MySQL字符集亂碼與解決方案

Real_man發表於2019-04-04

字符集是一套符號和編碼的規則,不論是在oracle資料庫還是在mysql資料庫,都存在字符集的選擇問題,而且如果在資料庫建立階段沒有正確選擇字符集,那麼可能在後期需要更換字符集,而字符集的更換是代價比較高的操作,也存在一定的風險,所以,我們推薦在應用開始階段,就按照需求正確的選擇合適的字符集,避免後期不必要的調整。

實戰

1、安裝MySQL資料庫

2、亂碼演示

mysql> show variables like 'character_set%';
+--------------------------+----------------------------------+
| Variable_name            | Value                            |
+--------------------------+----------------------------------+
| character_set_client     | utf8                             |
| character_set_connection | utf8                             |
| character_set_database   | utf8                             |
| character_set_filesystem | binary                           |
| character_set_results    | utf8                             |
| character_set_server     | utf8                             |
| character_set_system     | utf8                             |
| character_sets_dir       | /usr/local/mysql/share/charsets/ |
+--------------------------+----------------------------------+
8 rows in set (0.00 sec)
 
mysql> insert into test.table10 values (1,'雲中鶴');
Query OK, 1 row affected (0.00 sec)
 
mysql> select * from test.table10;
+------+-----------+
| id   | names     |
+------+-----------+
|    1 | 雲中鶴    |
+------+-----------+
1 row in set (0.00 sec)
 
mysql> set names latin1;
Query OK, 0 rows affected (0.00 sec)
 
mysql> select * from test.table10;
+------+-------+
| id   | names |
+------+-------+
|    1 | ???   |
+------+-------+
1 row in set (0.00 sec)
 
mysql> show variables like 'character_set%';
+--------------------------+----------------------------------+
| Variable_name            | Value                            |
+--------------------------+----------------------------------+
| character_set_client     | latin1    #客戶端來源資料使用的字符集                       
| character_set_connection | latin1    # 連線層字符集
| character_set_database   | utf8       #當前選中資料庫的預設字符集                        
| character_set_filesystem | binary                  
| character_set_results    | latin1    #查詢結果字符集   |
| character_set_server     | utf8       #預設的內部操作字符集                      |
| character_set_system     | utf8      #系統後設資料(欄位名等)字符集                                 
| character_sets_dir       | /usr/local/mysql/share/charsets/ |
+--------------------------+----------------------------------+
8 rows in set (0.00 sec)
複製程式碼

亂碼解決辦法

從上面可以看出,set names latin1;改變了三個引數.. 只要做到客戶端,MySQL character-set-client,table charset三個字符集完全一致就可以保證一定不會有亂碼出現。

方式:

​ 1、在mysql命令列模式下執行set names xxx;

       mysql> set names utf8;
       Query OK, 0 rows affected (0.01 sec)
複製程式碼

​ 2、登入mysql的時候指定預設字符集

       [root@node1 ~]# mysql -S /tmp/mysql.sock4 --defaults-character-set=utf8  #-S 指定多例項mysql的套接字檔案,
       使用--defaults-character-set 指定預設字符集。
複製程式碼

​ 3、 修改/etc/sysconfig/i18n 檔案,在my.cnf不指定預設字符集的情況下。

       vim /etc/sysconfig/i18n
       LANG='zh_CN.UTF-8'   #如果my.cnf不指定,預設使用系統字符集
複製程式碼

​ 4、 修改my.cnf 檔案,下面兩個欄位在任意一個欄位都是可以的。

       [client]
       default-character-set=latin1
複製程式碼
       [mysql]
       default-character-set=latin1
複製程式碼

​ 前兩種1,2是臨時解決方案,後面兩種3,4是永久有效的方案

檢視字符集

1、檢視系統當前字符集設定,修改之後登陸mysql執行。show variables lile 'character_set%';

mysql> show variables like 'character_set%';#我修改的為utf8,所以客戶端的三個引數都是utf8.你可以自行設定字符集。
+--------------------------+----------------------------------+
| Variable_name            | Value                            |
+--------------------------+----------------------------------+
| character_set_client     | utf8                             |
| character_set_connection | utf8                             |
| character_set_database   | utf8                             |
| character_set_filesystem | binary                           |
| character_set_results    | utf8                             |
| character_set_server     | utf8                             |
| character_set_system     | utf8                             |
| character_sets_dir       | /usr/local/mysql/share/charsets/ |
複製程式碼

2、mysql常用字符集。執行命令show character set; 檢視系統支援字符集。

mysql> show character set;
+----------+-----------------------------+---------------------+--------+
| Charset  | Description                 | Default collation   | Maxlen |
+----------+-----------------------------+---------------------+--------+
| big5     | Big5 Traditional Chinese    | big5_chinese_ci     |      2 |
| dec8     | DEC West European           | dec8_swedish_ci     |      1 |
| cp850    | DOS West European           | cp850_general_ci    |      1 |
| hp8      | HP West European            | hp8_english_ci      |      1 |
| koi8r    | KOI8-R Relcom Russian       | koi8r_general_ci    |      1 |
| latin1   | cp1252 West European        | latin1_swedish_ci   |      1 |   #常用
| latin2   | ISO 8859-2 Central European | latin2_general_ci   |      1 |
| swe7     | 7bit Swedish                | swe7_swedish_ci     |      1 |
| ascii    | US ASCII                    | ascii_general_ci    |      1 |
| ujis     | EUC-JP Japanese             | ujis_japanese_ci    |      3 |
| sjis     | Shift-JIS Japanese          | sjis_japanese_ci    |      2 |
| hebrew   | ISO 8859-8 Hebrew           | hebrew_general_ci   |      1 |
| tis620   | TIS620 Thai                 | tis620_thai_ci      |      1 |
| euckr    | EUC-KR Korean               | euckr_korean_ci     |      2 |
| koi8u    | KOI8-U Ukrainian            | koi8u_general_ci    |      1 |
| gb2312   | GB2312 Simplified Chinese   | gb2312_chinese_ci   |      2 |
| greek    | ISO 8859-7 Greek            | greek_general_ci    |      1 |
| cp1250   | Windows Central European    | cp1250_general_ci   |      1 |
| gbk      | GBK Simplified Chinese      | gbk_chinese_ci      |      2 | #常用
| latin5   | ISO 8859-9 Turkish          | latin5_turkish_ci   |      1 |
| armscii8 | ARMSCII-8 Armenian          | armscii8_general_ci |      1 |
| utf8     | UTF-8 Unicode               | utf8_general_ci     |      3 |#常用
| ucs2     | UCS-2 Unicode               | ucs2_general_ci     |      2 |
| cp866    | DOS Russian                 | cp866_general_ci    |      1 |
| keybcs2  | DOS Kamenicky Czech-Slovak  | keybcs2_general_ci  |      1 |
| macce    | Mac Central European        | macce_general_ci    |      1 |
| macroman | Mac West European           | macroman_general_ci |      1 |
| cp852    | DOS Central European        | cp852_general_ci    |      1 |
| latin7   | ISO 8859-13 Baltic          | latin7_general_ci   |      1 |
| utf8mb4  | UTF-8 Unicode               | utf8mb4_general_ci  |      4 | #常用
| cp1251   | Windows Cyrillic            | cp1251_general_ci   |      1 |
| utf16    | UTF-16 Unicode              | utf16_general_ci    |      4 |
| cp1256   | Windows Arabic              | cp1256_general_ci   |      1 |
| cp1257   | Windows Baltic              | cp1257_general_ci   |      1 |
| utf32    | UTF-32 Unicode              | utf32_general_ci    |      4 |
| binary   | Binary pseudo charset       | binary              |      1 |
| geostd8  | GEOSTD8 Georgian            | geostd8_general_ci  |      1 |
| cp932    | SJIS for Windows Japanese   | cp932_japanese_ci   |      2 |
| eucjpms  | UJIS for Windows Japanese   | eucjpms_japanese_ci |      3 |
+----------+-----------------------------+---------------------+--------+
39 rows in set (0.00 sec)
複製程式碼

字符集選擇

​ 1、如果處理各種各樣的文字,釋出到不同語言國家地區,選擇Unicode。,對mysql對號utf-8。

​ 2、只需中文,資料量很大,效能要求也高,選擇gbk.。

​ 3、處理移動物聯網業務,選utf8mb4

​ 建議在能夠完全滿足應用的前提下,儘量使用小的字符集。因為更小的字符集意味著能夠節省空間、減少網路傳輸位元組數,同時由於儲存空間的較小間接的提高了系統的效能。

伺服器字符集設定

[mysqld]
...
character-set-server=utf8   #新增這條語句,可設定伺服器端字符集。
複製程式碼

mysql服務端重新啟動後,這兩個引數會改變為設定值。

| character_set_server     | utf8    
| character_set_database   | utf8
複製程式碼

切換字符集

  1. 將一種編碼的資料庫轉換為另一種編碼的資料。
alter database dbname character set xxx; #只能對以後的資料有效,對之前的資料無效。基本不使用
複製程式碼
  1. 常用轉換資料庫字符集方案
mysqldump -S /tmp/mysql.sock4 --default-character-set=utf8 -d test > /data/test-`date +%F`.sql #1、匯出表結構而不匯出資料

vim /data/test-`date +%F`.sql
DROP TABLE IF EXISTS `table10`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `table10` (
  `id` int(11) DEFAULT NULL,
  `names` char(20) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8;  #2、這裡的CHARSET改為你想要修改的字符集

mysqldump -S /tmp/mysql.sock4 --extended-insert --no-create-info test > /data/test-data-`date +%F`.sql  #3、匯出資料內容

vim /data/test-data-`date +%F`.sql
LOCK TABLES `table10` WRITE;
set names utf8;  #4、這一行是多加的,自己指定想要轉換的字符集
INSERT INTO `table10` VALUES (1,'雲中鶴');
UNLOCK TABLES;

mysql> create database if not exists test;  #5、建立資料庫,儲存轉換後的資料
Query OK, 1 row affected, 0 warning (0.00 sec)

mysql -S /tmp/mysql.sock4 test < /data/test-`date +%F`.sql  #6、匯入表結構

mysql -S /tmp/mysql.sock4 test < /data/test-data-2015-09-25.sql   #7、匯入表資料
複製程式碼

最後

這是在15年的時候,自己學習MySQL的筆記,今天再拿出來分享下

相關文章