概述
MySQL在5.5.3之後增加了這個utf8mb4的編碼,mb4就是most bytes 4的意思,專門用來兼容四位元組的unicode。好在utf8mb4是utf8的超集,除了將編碼改為utf8mb4外不需要做其他轉換。當然,為了節省空間,一般情況下使用utf8也就夠了。
那上面說了既然utf8能夠存下大部分中文漢字,那為什麼還要使用utf8mb4呢? 原來mysql支持的 utf8 編碼最大字符長度為 3 位元組,如果遇到 4 位元組的寬字符就會插入異常了。三個位元組的 UTF-8 最大能編碼的 Unicode 字符是 0xffff,也就是 Unicode 中的基本多文種平面(BMP)。也就是說,任何不在基本多文本平面的 Unicode字符,都無法使用 Mysql 的 utf8 字符集存儲。包括 Emoji 表情(Emoji 是一種特殊的 Unicode 編碼,常見於 ios 和 android 手機上),和很多不常用的漢字,以及任何新增的 Unicode 字符等等。
問題來源
最初的 UTF-8 格式使用一至六個位元組,最大能編碼 31 位字符。最新的 UTF-8 規範只使用一到四個位元組,最大能編碼21位,正好能夠表示所有的 17個 Unicode 平面。
utf8 是 Mysql 中的一種字符集,只支持最長三個位元組的 UTF-8字符,也就是 Unicode 中的基本多文本平面。
Mysql 中的 utf8 為什麼只支持持最長三個位元組的 UTF-8字符呢?我想了一下,可能是因為 Mysql 剛開始開發那會,Unicode 還沒有輔助平面這一說呢。那時候,Unicode 委員會還做著 「65535 個字符足夠全世界用了」的美夢。Mysql 中的字符串長度算的是字符數而非位元組數,對於 CHAR 數據類型來說,需要為字符串保留足夠的長。當使用 utf8 字符集時,需要保留的長度就是 utf8 最長字符長度乘以字符串長度,所以這裡理所當然的限制了 utf8 最大長度為 3,比如 CHAR(100) Mysql 會保留 300位元組長度。至於後續的版本為什麼不對 4 位元組長度的 UTF-8 字符提供支持,我想一個是為了向後兼容性的考慮,還有就是基本多文種平面之外的字符確實很少用到。
要在 Mysql 中保存 4 位元組長度的 UTF-8 字符,需要使用 utf8mb4 字符集,但只有 5.5.3 版本以後的才支持(查看版本: select version();)。我覺得,為了獲取更好的兼容性,應該總是使用 utf8mb4 而非 utf8. 對於 CHAR 類型數據,utf8mb4 會多消耗一些空間,根據 Mysql 官方建議,使用 VARCHAR 替代 CHAR。
utf8mb4比utf8多了什麼的呢?
1、多了emoji編碼支持.
如果實際用途上來看,可以給要用到emoji的庫或者說表,設置utf8mb4.
比如評論要支持emoji可以用到.
建議普通表使用utf8 如果這個表需要支持emoji就使用utf8mb4
2、新建mysql庫或者表的時候還有一個排序規則
utf8_unicode_ci比較準確,utf8_general_ci速度比較快。通常情況下 utf8_general_ci的準確性就夠我們用的了,所以新建數據 庫時一般選用utf8_general_ci就可以了
如果是utf8mb4那麼對應的就是 utf8mb4_general_ci utf8mb4_unicode_ci
查看資料庫及伺服器的字符集/編碼集情況
可以使用如下sql查看資料庫及伺服器的字符集/編碼集情況:
show variables like '%character%';
show variables like 'collation%';
將資料庫和已經建好的表也轉換成utf8mb4
更改資料庫編碼(字符集):
ALTER DATABASE DATABASE_NAME DEFAULT CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci;
更改表編碼(字符集)(注意:這裡修改的是表的字符集,表裡面欄位的字符集並沒有被修改):
ALTER TABLE TABLE_NAME DEFAULT CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci;
更改表編碼(字符集)和表中所有欄位的編碼(字符集):
ALTER TABLE TABLE_NAME CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci;
修改字符集為utf8mb4的sql語句
1、session級別
/*來自客戶端的語句的字符集*/
set character_set_client = utf8mb4;
/*建立連接使用的字符集*/
set character_set_connection = utf8mb4;
/*默認資料庫使用的字符集。當默認資料庫更改時,伺服器則設置該變量。如果沒有默認資料庫,變量的值同character_set_server*/
set character_set_database = utf8mb4;
/*用於向客戶端返回查詢結果的字符集*/
set character_set_results = utf8mb4;
/*伺服器的默認字符集*/
set character_set_server=utf8mb4;
2、修改配置文件
/etc/my.cnf在以下三部分里添加如下內容:
[client]
default-character-set = utf8mb4
[mysql]
default-character-set = utf8mb4
[mysqld]
character-set-client-handshake = FALSE
character-set-server = utf8mb4
collation-server = utf8mb4_unicode_ci
init_connect='SET NAMES utf8mb4'
總之,utf8mb4 是目前最大的一個字符編碼,支持任意文字,不過具體還是要根據項目情況來評估。後面會分享更多devops和DBA方面的內容,感興趣的朋友可以關注一下~