PHP中多字節字符串操作實例詳解

前言

什麼是多字節的字符串操作呢?其實不少的同學可能都已經使用過瞭,但我們還是要從最基礎的問題說起。

一個字符占幾個字節並不是我們表面上看到的那樣。正常情況下,一個數字或英文以及英文符號都是占用一個字節的。但是這個世界的語言文字何其之多,特別是像中文、日文這樣的文字,往往用一個字節裝不下,這時候就需要多字節來解決瞭(多字節一般第一個字節是前導字節表示當前是什麼語言文字,後面的是正被的字節編碼)。比如說一個中文字在 GBK 環境是占用兩個字節,而在 UTF-8 下則是占用三個字節。而在最近幾年,由於 emoji 表情的出現 UTF-8MB4 又成為瞭主流,在表示這些 emoji 表情字符的時候,往往又會使用 UTF-8MB4 這種占用四個字節的編碼格式來表示。

雖說字節的不同設置能夠幫助我們展示豐富的內容,但對它的一些操作卻也帶來瞭麻煩。

字符串操作

$str = "abc測試一下";
echo strlen($str), PHP_EOL; // 15

strlen() 函數大傢都不陌生,但是對於中文來說,它返回的數量明顯是不對的。我們當前默認的編碼格式是 UTF-8 ,所以將一個中文當做三個英文字符來數就正好是 15 個字符長度。很明顯,這不是我們想要的結果,假設我們要截取字符串的話,這個長度的計算可是很費勁的,搞不好還容易出現亂碼。

幸好在 PHP 的默認擴展中就已經為我們準備好瞭一組 mb_ 函數庫,專門用來處理這類多字節字符串的問題。

echo mb_strlen($str), PHP_EOL; // 7
echo mb_strlen($str, 'GB2312'), PHP_EOL; // 11

在不指定 mb_strlen() 函數的第二個參數的情況下,會按照當前文檔的默認編碼格式來進行轉換,所以我們的字符串長度就在 UTF-8 的環境下正常顯示瞭。當然,我們也可以指定第二個參數為其它的編碼格式,比如以前常用的 GB2312 或者 GBK ,這樣返回的字符長度就是以一個中文占兩個字節的形式返回長度瞭。

var_dump(mb_strpos($str, "測")); // int(3)

var_dump(mb_convert_case($str, MB_CASE_UPPER)); // string(15) "ABC測試一下"
var_dump(mb_convert_case($str, MB_CASE_LOWER)); // string(15) "abc測試一下"

var_dump(mb_substr($str, 5)); // string(6) "一下"

當然,mb_ 相關的字符串操作函數是比較全面的,字符出現位置、大小寫轉換、截取字符串等函數都是提供的,調用的參數也都和普通的字符串操作函數沒什麼區別,隻是它們多瞭一個可選的指定編碼的參數。在通常的情況下,隻要我們的文件是對應的編碼格式,這個參數就不用去寫瞭。

當然,字符串的操作函數還有很多,這裡就不一一列舉瞭,大傢可以自行查閱相關的文檔。

字符串正則操作

既然說到瞭字符串的操作,正則相關的功能也是必不可少的,我們先看下使用默認的 preg_ 相關的函數操作中文的問題。

$str = iconv('UTF-8', 'GB2312', $str);

var_dump(preg_match("/[a-z]*測試/i", $str)); // int(0)
var_dump(preg_replace("/[a-z]*測試/i","試試", $str)); // string(11) "abc����һ��"

首先我們將測試用的字符串轉換為 GB2312 的形式。就像我們獲取的外部接口可能返回的就是 GB2312 的編碼的。這時直接使用 preg_ 相關的函數是無法正確獲得我們想要的結果的。

mb_regex_encoding('GB2312');
$pattern = iconv('UTF-8', 'GB2312', "[a-z]*測試");
var_dump(mb_ereg($pattern, $str)); // int(1)
var_dump(mb_eregi($pattern, $str)); // int(1)

var_dump(mb_ereg_replace($pattern,"試試", $str)); // string(10) "試試һ��"
var_dump(mb_eregi_replace($pattern,"試試", $str)); // string(10) "試試һ��"

接下來我們通過 mb_ereg 相關的函數來進行正則的匹配和替換,就能正常的對不同編碼的字符串進行操作瞭。註意,我們需要指定 mb_regex_encoding() 函數,告訴當前默認的規劃替換編碼是 GB2312 ,同時,正則規則也要轉換成對應的編碼格式。

mb_eregi 相關的函數和 mb_ereg 其實沒有本質上的區別,隻是它不區分大小寫瞭,就像 preg 相關函數中我們寫正則時的後綴符號 i 一樣。ereg 相關的函數都是不用寫反斜杠的,在普通的函數中其實是已經被淘汰瞭的函數(性能沒有 preg 好,語法也有區別),大部分情況下都會直接使用 preg 相關的函數來進行操作。不過如果是牽涉到多字節相關的問題,在 mb_ 函數庫中還是隻有 ereg 這類的函數可以使用。

字符串編碼轉換

就像我們之前學習過的 iconv() 函數一樣,mb_ 庫中也提供瞭字符編碼轉換的函數。

$phone = file_get_contents('https://tcc.taobao.com/cc/json/mobile_tel_segment.htm?tel=13888888888');

print_r($phone);
// __GetZoneResult_ = {
//     mts:'1388888',
//     province:'����',
//     catName:'�й��ƶ�',
//     telString:'13888888888',
// 	areaVid:'30515',
// 	ispVid:'3236139',
// 	carrier:'�����ƶ�'
// }

var_dump(mb_convert_encoding($phone, 'UTF-8', "GBK"));
// string(183) "__GetZoneResult_ = {
//     mts:'1388888',
//     province:'雲南',
//     catName:'中國移動',
//     telString:'13888888888',
// 	areaVid:'30515',
// 	ispVid:'3236139',
// 	carrier:'雲南移動'
// }
// "

echo mb_detect_encoding($phone, 'UTF-8,GBK'), PHP_EOL; // CP936

同樣我們還是拿這個獲取手機號信息的公共接口測試,它返回的內容是 GBK 的編碼內容。我們可以通過 mb_convert_encoding() 來轉換它的編碼內容。mb_detect_encoding() 是檢測編碼格式,這裡我們給瞭兩個參數,它會返回符合條件的編碼內容,CP936 就是 GBK 的另一種表示(IBM在制作 code page 時將 GBK 編碼放在瞭第 936 頁)。

HTTP 參數操作

mb_internal_encoding("UTF-8");

首先介紹一個 mb_internal_encoding() 函數,其實就是設置當前運行環境中的默認編碼規則的,如果不設置的話,就是以當前這個 php 文件的編碼規則為默認的。大傢瞭解一下,因為它會影響我們後面介紹的內容。

// // localhost:9991/?a=我上
var_dump(mb_http_input('GPC')); // bool(false)
var_dump(mb_http_output()); // string(5) "UTF-8"

mb_internal_encoding("CP936");
mb_parse_str($_SERVER['QUERY_STRING'], $result);
print_r($result);
// Array
// (
//     [a] => 我上
// )

首先我們運行起來測試文件,然後用瀏覽器請求這個鏈接地址。mb_http_input() 是檢測 HTTP 輸入字符編碼,不過我測試的結果都是返回 false 。有瞭解的小夥伴可以留言說明下這個是什麼情況。而 mb_http_output 則是設置檢測輸出的編碼,這個就會受到 mb_internal_encoding() 所定義的內容的影響。

另外,mb_parse_str() 是 parse_str() 函數的多字節版,我們可以將瀏覽器的默認編碼轉換成 GBK 或者 之後再來請求,因為我們設置當前的 mb_internal_encoding() 為 CP936 瞭。在默認情況下,如果使用 UTF-8 的瀏覽器請求的話,這裡就會報錯瞭,這就是 mb_internal_encoding() 對這些函數的影響。

其它屬性查看

最後,我們再來看看一些 mb_ 相關信息屬性的內容。

var_dump(mb_language());
// string(7) "neutral"

mb_language() 函數用於獲取/設置當前的語言,它可以接收一個參數設置當前的語言信息。主要用於編碼郵件信息  mb_send_mail() 函數就是使用它來對郵件進行編碼。關於  mb_send_mail() 的使用大傢可以自己嘗試一下,其實也是 send_mail() 函數的多字節版。neutral 的意思是中立的,其實也是跟我們的 mb_internal_encoding() 有關。

var_dump(mb_list_encodings());
// array(86) {
//     [0]=>
//     string(4) "pass"
//     [1]=>
//     string(5) "wchar"
//     [2]=>
//     string(7) "byte2be"
//     [3]=>
//     ……
//     [65]=>
//     string(5) "CP936"
//     ……

mb_list_encodings() 用於展示當前系統中所支持的所有語言編碼的列表,在這個列表中我們就可以看到 CP936 的身影,但是沒有 GBK 哦,記住它們倆是一個東西就好瞭。

var_dump(mb_get_info());
// array(14) {
//     ["internal_encoding"]=>
//     string(5) "UTF-8"
//     ["http_output"]=>
//     string(5) "UTF-8"
//     ["http_output_conv_mimetypes"]=>
//     string(31) "^(text/|application/xhtml\+xml)"
//     ["func_overload"]=>
//     int(0)
//     ["func_overload_list"]=>
//     string(11) "no overload"
//     ["mail_charset"]=>
//     string(5) "UTF-8"
//     ["mail_header_encoding"]=>
//     string(6) "BASE64"
//     ["mail_body_encoding"]=>
//     string(6) "BASE64"
//     ["illegal_chars"]=>
//     int(0)
//     ["encoding_translation"]=>
//     string(3) "Off"
//     ["language"]=>
//     string(7) "neutral"
//     ["detect_order"]=>
//     array(2) {
//       [0]=>
//       string(5) "ASCII"
//       [1]=>
//       string(5) "UTF-8"
//     }
//     ["substitute_character"]=>
//     int(63)
//     ["strict_detection"]=>
//     string(3) "Off"
//   }

mb_get_info() 是查看當前環境下默認的這些語言編碼的配置,比如我們熟悉的 internal_encoding 、 http_output 屬性都能在這裡看到。

總結

用過的同學是不是也發現瞭今天文章的新姿勢瞭呢?沒錯,GBK 和 CP936 反而成為瞭今天文章的意外驚喜。這個在之前確實還真沒有註意到。其實 mb_ 相關的函數的使用已經非常普遍瞭,基本算是學習 PHP 的入門必備知識瞭。它還有很多的函數並沒有一一地列舉出來,有興趣的同學可以多多查閱官方手冊進行更加深入地學習。

測試代碼:

[github.com/zhangyue050…]

參考文檔:

www.php.net/manual/zh/b…

到此這篇關於PHP中多字節字符串操作的文章就介紹到這瞭,更多相關PHP多字節字符串操作內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet!

推薦閱讀: