qileilove

          blog已經轉移至github,大家請訪問 http://qaseven.github.io/

          Java字符編碼根本原理

           Java開發中,常常會遇到亂碼的問題,一旦遇到這種問題,常常就很扯蛋,每個人都不愿意承認是自己的代碼有問題。其實編碼問題并沒有那么神秘,那么不可捉摸,搞清Java的編碼本質過程就真相大白了。

            先看個圖:

            其實,編碼問題存在兩個方面:JVM之內和JVM之外。

            1、Java文件編譯后形成class

            這里Java文件的編碼可能有多種多樣,但Java編譯器會自動將這些編碼按照Java文件的編碼格式正確讀取后產生class文件,這里的class文件編碼是Unicode編碼(具體說是UTF-16編碼)。

            因此,在Java代碼中定義一個字符串:

            String s="漢字";

            不管在編譯前java文件使用何種編碼,在編譯后成class后,他們都是一樣的----Unicode編碼表示。

            2、JVM中的編碼

            JVM加載class文件讀取時候使用Unicode編碼方式正確讀取class文件,那么原來定義的String s="漢字";在內存中的表現形式是Unicode編碼。

            當調用String.getBytes()的時候,其實已經為亂碼買下了禍根。因為此方法使用平臺默認的字符集來獲取字符串對應的字節數組。在WindowsXP中文版中,使用的默認編碼是GBK,不信運行下:

        1. public class Test {   
        2. public static void main(String[] args) {   
        3. System.out.println("當前JRE:" + System.getProperty("java.version"));   
        4. System.out.println("當前JVM的默認字符集:" + Charset.defaultCharset());   
        5. }   
        6. }
        7.   當前JRE:1.6.0_16

            當前JVM的默認字符集:GBK

            當不同的系統、數據庫經過多次編碼后,如果對其中的原理不理解,就容易導致亂碼。因此,在一個系統中,有必要對字符串的編碼做一個統一,這個統一模糊點說,就是對外統一。比如方法字符串參數,IO流,在中文系統中,可以統一使用GBK、GB13080、UTF-8、UTF-16等等都可以,只是要選擇有些更大字符集,以保證任何可能用到的字符都可以正常顯示,避免亂碼的問題。(假設對所有的文件都用ASCII碼)那么就無法實現雙向轉換了。

           要特別注意的是,UTF-8并非能容納了所有的中文字符集編碼,因此,在特殊情況下,UTF-8轉GB18030可能會出現亂碼,然而一群傻B常常在做中文系統喜歡用UTF-8編碼而不說不出個所以然出來!最傻B的是,一個系統多個人做,源代碼文件有的人用GBK編碼,有人用UTF-8,還有人用GB18030。FK,都是中國人,也不是外包項目,用什么UTF-8啊,神經!源代碼統統都用GBK18030就OK了,免得ANT腳本編譯時候提示不可認的字符編碼。

            因此,對于中文系統來說,最好選擇GBK或GB18030編碼(其實GBK是GB18030的子集),以便最大限度的避免亂碼現象。

            3、內存中字符串的編碼

            內存中的字符串不僅僅局限于從class代碼中直接加載而來的字符串,還有一些字符串是從文本文件中讀取的,還有的是通過數據庫讀取的,還有可能是從字節數組構建的,然而他們基本上都不是Unicode編碼的,原因很簡單,存儲優化。

            因此就需要處理各種各樣的編碼問題,在處理之前,必須明確“源”的編碼,然后用指定的編碼方式正確讀取到內存中。如果是一個方法的參數,實際上必須明確該字符串參數的編碼,因為這個參數可能是另外一個日文系統傳遞過來的。當明確了字符串編碼時候,就可以按照要求正確處理字符串,以避免亂碼。

            在對字符串進行解碼編碼的時候,應該調用下面的方法:

        8. getBytes(String charsetName)   
        9. String(byte[] bytes, String charsetName)
        10.   而不要使用那些不帶字符集名稱的方法簽名,通過上面兩個方法,可以對內存中的字符進行重新編碼。

          posted on 2011-12-20 14:26 順其自然EVO 閱讀(223) 評論(0)  編輯  收藏


          只有注冊用戶登錄后才能發表評論。


          網站導航:
           
          <2011年12月>
          27282930123
          45678910
          11121314151617
          18192021222324
          25262728293031
          1234567

          導航

          統計

          常用鏈接

          留言簿(55)

          隨筆分類

          隨筆檔案

          文章分類

          文章檔案

          搜索

          最新評論

          閱讀排行榜

          評論排行榜

          主站蜘蛛池模板: 万宁市| 溆浦县| 曲阜市| 天峨县| 罗平县| 平凉市| 叙永县| 嵊泗县| 富平县| 铜鼓县| 聂拉木县| 洛川县| 广河县| 偏关县| 华亭县| 桃园市| 饶阳县| 庆元县| 全州县| 丹棱县| 德保县| 旺苍县| 昭平县| 武平县| 磴口县| 华宁县| 长乐市| 瑞安市| 时尚| 资中县| 苏州市| 张掖市| 米易县| 平阴县| 高雄市| 精河县| 叙永县| 靖远县| 溧水县| 广南县| 孟津县|