locale 詳解 字符集概念

locale 是國際化與本土化過程中的一個非常重要的概念，個人認為，對於中文使用者來說，通常會涉及到的國際化或者本土化，大致包含三個方面：看中文，寫中文，與 window中文系統的相容和通訊。從實際經驗上看來，locale的設定與看中文關係不大，但是與寫中文，及window分割槽的掛載方式有很密切的關係。本人認為就像一個純英文的Windows能夠瀏覽中文，日文或者義大利文網頁一樣，你不需要設定locale就可以看中文。那麼，為什麼要設定 locale呢？什麼時候會用到locale呢？ 

一、為什麼要設定locale 正如前面我所講的，設定locale與你能否瀏覽中文的網頁沒有直接的關係，即便你把locale設定成en_US.ISO-8859-1這樣一個標準的英文locale你照樣可以瀏覽中文的網頁，只要你的系統裡面有相應的字符集（這個都不一定需要）和合適的字型（如simsun），瀏覽器就可以把網頁翻譯成中文給你看。具體的過程是網路把網頁傳送到你的機器上之後，瀏覽器會判斷相應的編碼的字符集，根據網頁採用的字符集，去字型庫裡面找合適的字型，然後由文字渲染工具把相應的文字在螢幕上顯示出來。 

在下文字人會偶爾把字符集比喻成密碼本，個人覺得對於一些東西比較容易理解，假如你不習慣的話，把全文copy到任何文字編輯器，用字符集替換密碼本即可。 

那有時候網頁顯示亂碼或者都是方框是怎麼回事呢？個人認為，顯示亂碼是因為設定的字符集不對(或者沒有相應的字符集)，例如網頁是用UTF-8編碼的，你非要用GB2312去看，而系統根據GB2312去找字型，然後在螢幕上顯示，當然是一堆的亂碼，也就是說你用一個錯誤的密碼本去翻譯發給你的電報，當然內容那叫一個亂；至於有些時候瀏覽的網頁能顯示一部分漢字，但有很多的地方是方框，能夠顯示漢字說明瀏覽器已經正確的判斷出了網頁的編碼，並在字型庫裡面找到了相應的文字，但是並不是每個字型庫都包含某個字符集全部的字型的緣故，有些時候會顯示不完全，找一個比較全的支援較多字符集的字型就可以了。 

既然我能夠瀏覽中文網頁，那為什麼我還要設定locale呢？ 

其實你有沒有想過這麼一個問題，為什麼gentoo官方論壇上中文論壇的網頁是用UTF-8編碼的（雖然大家一直強烈建議用GB2312編碼），但是新浪網就是用GB2312編碼的呢？而Xorg的官方網頁竟然是ISO-8859-15編碼的，我沒有設定這個locale怎麼一樣的能瀏覽呢？這個問題就像是你有所有的密碼本，不論某個網站是用什麼字符集編碼的，你都可以用你手裡的密碼本把他們翻譯過來，但問題是雖然你能瀏覽中文網頁，但是在整個作業系統裡面流動的還是英文字元。所以，就像你能聽懂英語，也能聽懂中文。 最根本的問題是：你不可以寫中文。 

當你決定要寫什麼東西的時候，首先要決定的一件事情是用那種語言，對於計算機來說就是你要是用哪一種字符集，你就必須告訴你的linux系統，你想用那一本密碼本去寫你想要寫的東西。知道為什麼需要用GB2312字符集去瀏覽新浪了吧，因為新浪的網頁是用GB2312寫的。 

為了讓你的Linux能夠輸入中文，就需要把系統的locale設定成中文的(嚴格說來是locale中的語言類別LC_CTYPE )，例如zh_CN.GB2312、zh_CN.GB18030或者zh_CN.UTF-8。很多人都不明白這些古里古怪的表達方式。這個外星表示式規定了什麼東西呢？這個問題稍後詳述，現在只需要知道，這是locale的表達方式就可以了。 

二、到底什麼是locale？ locale這個單詞中文翻譯成地區或者地域，其實這個單詞包含的意義要寬泛很多。Locale是根據計算機使用者所使用的語言，所在國家或者地區，以及當地的文化傳統所定義的一個軟體執行時的語言環境。 

這個使用者環境可以按照所涉及到的文化傳統的各個方面分成幾個大類，通常包括使用者所使用的語言符號及其分類(LC_CTYPE)，數字 (LC_NUMERIC)，比較和排序習慣(LC_COLLATE)，時間顯示格式(LC_TIME)，貨幣單位(LC_MONETARY)，資訊主要是提示資訊,錯誤資訊, 狀態資訊, 標題, 標籤, 按鈕和選單等(LC_MESSAGES)，姓名書寫方式(LC_NAME)，地址書寫方式(LC_ADDRESS)，電話號碼書寫方式 (LC_TELEPHONE)，度量衡表達方式(LC_MEASUREMENT)，預設紙張尺寸大小(LC_PAPER)和locale對自身包含資訊的概述(LC_IDENTIFICATION)。 

所以說，locale就是某一個地域內的人們的語言習慣和文化傳統和生活習慣。一個地區的locale就是根據這幾大類的習慣定義的，這些locale定義檔案放在/usr/share/i18n/locales目錄下面，例如en_US, zh_CN and de_DE@euro都是locale的定義檔案，這些檔案都是用文字格式書寫的，你可以用寫字板開啟，看看裡邊的內容，當然出了有限的註釋以外，大部分東西可能你都看不懂，因為是用的Unicode的字元索引方式。 

對於de_DE@euro的一點說明，@後邊是修正項，也就是說你可以看到兩個德國的locale： /usr/share/i18n/locales/de_DE@euro /usr/share/i18n/locales/de_DE 開啟這兩個locale定義，你就會知道它們的差別在於de_DE@euro使用的是歐洲的排序、比較和縮排習慣，而de_DE用的是德國的標準習慣。 

上面我們說到了zh_CN.GB18030的前半部分，後半部分是什麼呢？大部分Linux使用者都知道是系統採用的字符集。 

三、什麼是字符集？ 字符集就是字元，尤其是非英語字元在系統內的編碼方式，也就是通常所說的內碼，所有的字符集都放在/usr/share/i18n/charmaps，所有的字符集也都是用Unicode編號索引的。Unicode用統一的編號來索引目前已知的全部的符號。而字符集則是這些符號的編碼方式，或者說是在網路傳輸，計算機內部通訊的時候，對於不同字元的表達方式，Unicode是一個靜態的概念，字符集是一個動態的概念，是每一個字元傳遞或傳輸的具體形式。就像 Unicode編號U59D0是代表姐姐的“姐”字，但是具體的這個字是用兩個位元組表示，三個位元組，還是四個位元組表示，是字符集的問題。例如：UTF-8字符集就是目前流行的對字元的編碼方式，UTF-8用一個位元組表示常用的拉丁字母，用兩個位元組表示常用的符號，包括常用的中文字元，用三個表示不常用的字元，用四個位元組表示其他的古靈精怪的字元。而GB2312字符集就是用兩個位元組表示所有的字元。需要提到一點的是Unicode除了用編號索引全部字元以外，本身是用四個位元組儲存全部字元，這一點在談到掛載windows分割槽的時候是非常重要的一個概念。所以說你也可以把Unicode看作是一種字符集（我不知道它和UTF-32的關係，反正UTF-32就是用四個位元組表示所有的字元的），但是這樣表述符號是非常浪費資源的，因為在計算機世界絕大部分時候用到的是一個位元組就可以搞定的 26個字母而已。所以才會有UTF-8，UTF-16等等，要不然大同世界多好，省了這許多麻煩。 

四、zh_CN.GB2312到底是在說什麼？ Locale 是軟體在執行時的語言環境, 它包括語言(Language), 地域 (Territory) 和字符集(Codeset)。一個locale的書寫格式為: 語言[_地域[.字符集]]. 所以說呢，locale總是和一定的字符集相聯絡的。下面舉幾個例子： 

1、我說中文，身處中華人民共和國，使用國標2312字符集來表達字元。 zh_CN.GB2312＝中文_中華人民共和國＋國標2312字符集。 

2、我說中文，身處中華人民共和國，使用國標18030字符集來表達字元。 zh_CN.GB18030＝中文_中華人民共和國＋國標18030字符集。 

3、我說中文，身處中華人民共和國臺灣省，使用國標Big5字符集來表達字元。 zh_TW.BIG5=中文_臺灣.大五碼字符集 

4、我說英文，身處大不列顛，使用ISO-8859-1字符集來表達字元。 en_GB.ISO-8859-1=英文_大不列顛.ISO-8859-1字符集 

5、我說德語，身處德國，使用UTF-8字符集，習慣了歐洲風格。 de_DE.UTF-8@euro＝德語_德國.UTF-8字符集@按照歐洲習慣加以修正 

注意不是[email]de_DE@euro.UTF[/email]-8，所以完全的locale表達方式是 [語言[_地域][.字符集] [@修正值] 

生成的locale放在/usr/lib/locale/目錄中，並且每個locale都對應一個資料夾，也就是說建立了[email]de_DE@euro.UTF[/email]-8 locale之後，就生成/usr/lib/locale/de_DE@euro.UTF-8/目錄，裡面是具體的每個locale的內容。 

五、怎樣去自定義locale 在gentoo生成locale還是很容易的，首先要在USE裡面加入userlocales支援，然後編輯locales.build檔案，這個檔案用來指示glibc生成locale檔案。 很多人不明白每一個條目是什麼意思。 其實根據上面的說明現在應該很明確了。 

File: /etc/locales.build en_US/ISO-8859-1 en_US.UTF-8/UTF-8 

zh_CN/GB18030 zh_CN.GBK/GBK zh_CN.GB2312/GB2312 zh_CN.UTF-8/UTF-8 

上面是我的locales.build檔案，依次的說明是這樣的： 

en_US/ISO-8859-1：生成名為en_US的locale，採用ISO-8859-1字符集，並且把這個locale作為英文_美國locale類的預設值，其實它和en_US.ISO-8859-1/ISO-8859-1沒有任何區別。 

en_US.UTF-8/UTF-8：生成名為en_US.UTF-8的locale，採用UTF-8字符集。 

zh_CN/GB18030：生成名為zh_CN的locale，採用GB18030字符集，並且把這個locale作為中文_中國locale類的預設值，其實它和zh_CN.GB18030/GB18030沒有任何區別。 

zh_CN.GBK/GBK：生成名為zh_CN.GBK的locale，採用GBK字符集。 zh_CN.GB2312/GB2312：生成名為zh_CN.GB2312的locale，採用GB2312字符集。 zh_CN.UTF-8/UTF-8：生成名為zh_CN.UTF-8的locale，採用UTF-8字符集。 

關於預設locale，預設locale可以簡寫成en_US或者zh_CN的形式，只是為了表達簡單而已沒有特別的意義。 

Gentoo在locale定義的時候掩蓋了一些東西，也就是locale的生成工具：localedef。 在編譯完glibc之後你可以用這個localedef 再補充一些locale，就會更加理解locale了。具體的可以看 localedef 的manpage。 

$localedef -f 字符集 -i locale定義檔案 生成的locale的名稱 例如 $localedef -f UTF-8 -i zh_CN zh_CN.UTF-8 

上面的定義方法和在locales.build中設定zh_CN.UTF-8/UTF-8的結果是一樣一樣的。 

六、locale的五臟六腑 

剛剛生成了幾個locale，但是為了讓它們生效，必須告訴Linux系統使用那(幾)個locale。這就需要對locale的內部機制有一點點的瞭解。在前面我已經提到過，locale把按照所涉及到的文化傳統的各個方面分成12個大類，這12個大類分別是： 1、語言符號及其分類(LC_CTYPE) 2、數字(LC_NUMERIC) 3、比較和排序習慣(LC_COLLATE) 4、時間顯示格式(LC_TIME) 5、貨幣單位(LC_MONETARY) 6、資訊主要是提示資訊,錯誤資訊, 狀態資訊, 標題, 標籤, 按鈕和選單等(LC_MESSAGES) 7、姓名書寫方式(LC_NAME) 8、地址書寫方式(LC_ADDRESS) 9、電話號碼書寫方式(LC_TELEPHONE) 10、度量衡表達方式(LC_MEASUREMENT) 11、預設紙張尺寸大小(LC_PAPER) 12、對locale自身包含資訊的概述(LC_IDENTIFICATION)。 

其中，與中文輸入關係最密切的就是 LC_CTYPE， LC_CTYPE 規定了系統內有效的字元以及這些字元的分類，諸如什麼是大寫字母，小寫字母，大小寫轉換，標點符號、可列印字元和其他的字元屬性等方面。而locale定義zh_CN中最最重要的一項就是定義了漢字(Class “hanzi”)這一個大類，當然也是用Unicode描述的，這就讓中文字元在Linux系統中成為合法的有效字元，而且不論它們是用什麼字符集編碼的。 

LC_CTYPE % This is a copy of the "i18n" LC_CTYPE with the following modifications: - Additional classes: hanzi 

copy "i18n" 

class "hanzi"; / % ..;/ ..;/ ;;;;;;;;/ ;;;;;;;;/ ;;;; END LC_CTYPE 

在en_US的locale定義中，並沒有定義漢字，所以漢字不是有效字元。所以如果要輸入中文必須使用支援中文的locale，也就是zh_XX，如zh_CN，zh_TW，zh_HK等等。 

另外非常重要的一點就是這些分類是彼此獨立的，也就是說LC_CTYPE，LC_COLLATE和 LC_MESSAGES等等分類彼此之間是獨立的，可以根據使用者的需要設定成不同的值。這一點對很多使用者是有利的，甚至是必須的。例如，我就需要一個能夠輸入中文的英文環境，所以我可以把LC_CTYPE設定成zh_CN.GB18030，而其他所有的項都是en_US.UTF-8。 

七、怎樣設定locale呢？ 

設定locale就是設定12大類的locale分類屬性，即 12個LC_*。除了這12個變數可以設定以外，為了簡便起見，還有兩個變數：LC_ALL和LANG。它們之間有一個優先順序的關係： LC_ALL>LC_*>LANG 可以這麼說，LC_ALL是最上級設定或者強制設定，而LANG是預設設定值。 1、如果你設定了LC_ALL＝zh_CN.UTF-8，那麼不管LC_*和LANG設定成什麼值，它們都會被強制服從LC_ALL的設定，成為 zh_CN.UTF-8。 2、假如你設定了LANG＝zh_CN.UTF-8，而其他的LC_*=en_US.UTF-8，並且沒有設定LC_ALL的話，那麼系統的locale設定以LC_*=en_US.UTF-8。 3、假如你設定了LANG＝zh_CN.UTF-8，而其他的LC_*，和LC_ALL均未設定的話，系統會將LC_*設定成預設值，也就是LANG的值 zh_CN.UTF-8 。 4、假如你設定了LANG＝zh_CN.UTF-8，而其他的LC_CTYPE=en_US.UTF-8，其他的LC_*，和LC_ALL均未設定的話，那麼系統的locale設定將是：LC_CTYPE=en_US.UTF-8，其餘的 LC_COLLATE，LC_MESSAGES等等均會採用預設值，也就是LANG的值，也就是LC_COLLATE＝LC_MESSAGES＝……＝ LC_PAPER＝LANG＝zh_CN.UTF-8。 

所以，locale是這樣設定的： 1、如果你需要一個純中文的系統的話，設定LC_ALL= zh_CN.XXXX，或者LANG= zh_CN.XXXX都可以，當然你可以兩個都設定，但正如上面所講，LC_ALL的值將覆蓋所有其他的locale設定，不要作無用功。 2、如果你只想要一個可以輸入中文的環境，而保持選單、標題，系統資訊等等為英文介面，那麼只需要設定LC_CTYPE＝zh_CN.XXXX，LANG= en_US.XXXX就可以了。這樣LC_CTYPE＝zh_CN.XXXX，而LC_COLLATE＝LC_MESSAGES＝……＝ LC_PAPER＝LANG＝en_US.XXXX。 3、假如你高興的話，可以把12個LC_*一一設定成你需要的值，打造一個古靈精怪的系統： LC_CTYPE＝zh_CN.GBK/GBK(使用中文編碼內碼GBK字符集)； LC_NUMERIC=en_GB.ISO-8859-1(使用大不列顛的數字系統) LC_MEASUREMEN=de_DE@euro.ISO-8859-15(德國的度量衡使用ISO-8859-15字符集) 羅馬的地址書寫方式，美國的紙張設定……。估計沒人這麼幹吧。 4、假如你什麼也不做的話，也就是LC_ALL，LANG和LC_*均不指定特定值的話，系統將採用POSIX作為lcoale，也就是C locale。

轉自： http://www.linuxsky.net 關於locale的設定,為什麼要設定locale 關於locale的設定 

作者: hew 釋出日期: 2006-6-27 

來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/14184018/viewspace-697999/，如需轉載，請註明出處，否則將追究法律責任。