騎士の圣殿

           

          有關(guān)亂碼的處理---中國(guó)程序員永遠(yuǎn)無(wú)法避免的話(huà)題

          為什么說(shuō)亂碼是中國(guó)程序員無(wú)法避免的話(huà)題呢?這個(gè)首先要從編碼機(jī)制上說(shuō)起,大家都是中文和英文的編碼格式不是一樣,解碼也是不一樣的!如果中國(guó)的程序員不會(huì)遇到亂碼,那么只有使用漢語(yǔ)編程。漢語(yǔ)編程是怎么回事我也不大清楚,應(yīng)該是前年吧,我一朋友給我介紹漢語(yǔ)編程,怎么不錯(cuò)不錯(cuò)?當(dāng)時(shí)因?yàn)閷W(xué)習(xí)忙沒(méi)去關(guān)注這個(gè),等我閑了,那個(gè)朋友不弄這個(gè),問(wèn)他他也不說(shuō)不大清楚,最后自己對(duì)這個(gè)學(xué)習(xí)也不了了之了。
              今天我寫(xiě)這個(gè)不是講解中英文之間的差距,解碼等,我是將我在這幾年工作遇到各種各樣的亂碼的解決方法,總結(jié)一樣,也希望大家能把自己暈倒解決亂碼的方法都說(shuō)出來(lái),咱們弄一個(gè)解決亂碼的“葵花寶典”。

          對(duì)于Java由于默認(rèn)的編碼方式是 UNICODE,所以用中文也易出問(wèn)題,常見(jiàn)的解決是
          String s2 = new String(s1.getBytes(“ISO-8859-1”),”GBK”);


          1、utf8解決JSP中文亂碼問(wèn)題
          一般說(shuō)來(lái)在每個(gè)頁(yè)面的開(kāi)始處,加入:

          <%@ page language="java" contentType="text/html; charset=UTF-8"
              pageEncoding="UTF-8"%>

          <%
           request.setCharacterEncoding("UTF-8");
          %>

          charset=UTF-8  的作用是指定JSP向客戶(hù)端輸出的編碼方式為“UTF-8”

          pageEncoding="UTF-8"  為了讓JSP引擎能正確地解碼含有中文字符的JSP頁(yè)面,這在LINUX中很有效

           request.setCharacterEncoding("UTF-8"); 是對(duì)請(qǐng)求進(jìn)行了中文編碼

          有時(shí),這樣仍不能解決問(wèn)題,還需要這樣處理一下:

          String msg = request.getParameter("message");
           String str=new String(msg.getBytes("ISO-8859-1"),"UTF-8");
           out.println(st);

          2、Tomcat 5.5 中文亂碼

          )只要把%TOMCAT安裝目錄%/   webapps\servlets-examples\WEB-INF\classes\filters\SetCharacterEncodingFilter.class文件拷到你的webapp目錄/filters下,如果沒(méi)有filters目錄,就創(chuàng)建一個(gè)。  
            2)在你的web.xml里加入如下幾行:   <filter>  
            <filter-name>Set   Character   Encoding</filter-name>  
            <filter-class>filters.SetCharacterEncodingFilter</filter-class>  
            <init-param>  
            <param-name>encoding</param-name>  
            <param-value>GBK</param-value>  
            </init-param>  
            </filter>  
                <filter-mapping>  
            <filter-name>Set   Character   Encoding</filter-name>  
            <url-pattern>/*</url-pattern>  
            </filter-mapping>  
             
             
             
            3)完成.  
            2   get方式的解決辦法  
            1)   打開(kāi)tomcat的server.xml文件,找到區(qū)塊,加入如下一行:  
            URIEncoding=”GBK”  
            完整的應(yīng)如下:  
            <Connector    
            port="80"   maxThreads="150"   minSpareThreads="25"   maxSpareThreads="75"  
            enableLookups="false"   redirectPort="8443"   acceptCount="100"  
            debug="0"   connectionTimeout="20000"    
            disableUploadTimeout="true"    
            URIEncoding="GBK"  
            />     
             
            2)重啟tomcat,一切OK。

          3、xmlHttpRequest中文問(wèn)題

          頁(yè)面jsp用的GBK編碼


          代碼
          <%@ page contentType="text/html; charset=GBK"%> 


          javascript部分

          代碼
          function addFracasReport() {  
              var url="controler?actionId=0_06_03_01&actionFlag=0010";  
              var urlmsg="&reportId="+fracasReport1.textReportId.value;  //故障報(bào)告表編號(hào)  
                    
              var xmlHttp=Common.createXMLHttpRequest();  
              xmlHttp.onreadystatechange = Common.getReadyStateHandler(xmlHttp, eval("turnAnalyPage"));  
              xmlHttp.open("POST",url,true);  
              xmlHttp.setRequestHeader( " Content-Type " , " application/x-www-form-urlencoded);  
              xmlHttp.send(urlmsg);  
                


          后臺(tái)java中獲得的reportId是亂碼,不知道該怎么轉(zhuǎn),主要是不知道xmlHttp.send(urlmsg);以后是什么編碼?在后面用java來(lái)轉(zhuǎn),試了幾種,都沒(méi)有成功,其中有:


          代碼
          public static String UTF_8ToGBK(String str) {  
                  try {  
                      return new String(str.getBytes("UTF-8"), "GBK");  
                  } catch (Exception ex) {  
                      return null;  
                  }  
              }  
                
              public static String UTF8ToGBK(String str) {  
                  try {  
                      return new String(str.getBytes("UTF-16BE"), "GBK");  
                  } catch (Exception ex) {  
                      return null;  
                  }  
              }  
                
              public static String GBK(String str) {  
                  try {  
                      return new String(str.getBytes("GBK"),"GBK");  
                  } catch (Exception ex) {  
                      return null;  
                  }  
              }  
                   public static String getStr(String str) {  
                  try {  
                      String temp_p = str;  
                      String temp = new String(temp_p.getBytes("ISO8859_1"), "GBK");  
                      temp = sqlStrchop(temp);  
                      return temp;  
                  } catch (Exception e) {  
                      return null;  
                  }  
              } 

          4、JDBC ODBC Bridge的Bug及其解決方法

          在編寫(xiě)一數(shù)據(jù)庫(kù)管理程序時(shí),發(fā)現(xiàn)JDBC-ODBC Bridge存在不易發(fā)現(xiàn)的Bug。在向數(shù)據(jù)表插入數(shù)據(jù)時(shí),如果為英文字符,存儲(chǔ)內(nèi)容完全正確,如果存入中文字符,部分?jǐn)?shù)據(jù)庫(kù)只能存儲(chǔ)前七八個(gè)中文字符,其他內(nèi)容被截去,導(dǎo)致存儲(chǔ)內(nèi)容的不完整(有些數(shù)據(jù)庫(kù)不存在這個(gè)問(wèn)題,如Sybase SQL Anywhere 5.0。JDBC-ODBC Bridge還存在無(wú)法建表的Bug)。

            對(duì)于廣大需要存儲(chǔ)中文信息的Java程序員來(lái)說(shuō),這可是一個(gè)不好的消息。要么改用其他語(yǔ)言編程,要么選擇其他價(jià)格昂貴的數(shù)據(jù)庫(kù)產(chǎn)品。“一次編寫(xiě),到處運(yùn)行”的目標(biāo),也大打折扣。能不能采用變通的方法,將中文信息進(jìn)行處理后再存儲(chǔ)來(lái)解決這個(gè)問(wèn)題呢?答案是肯定的。

            解決問(wèn)題的具體思路、方法
            Java采用Unicode碼編碼方式,中英文字符均采用16bit存儲(chǔ)。既然存儲(chǔ)英文信息是正確的,根據(jù)一定規(guī)則,將中文信息轉(zhuǎn)換成英文信息后存儲(chǔ),自然不會(huì)出現(xiàn)截尾現(xiàn)象。讀取信息時(shí)再進(jìn)行逆向操作,將英文信息還原成中文信息即可。由GB2312編碼規(guī)則可知,漢字一般為二個(gè)高位為1的ASCII碼,在轉(zhuǎn)換時(shí)將一個(gè)漢字的二個(gè)高位1去掉,還原時(shí)再將二個(gè)高位1加上。為了處理含有英文字符的中文字串,對(duì)英文字符則需要加上一個(gè)Byte 0標(biāo)記。以下提供的兩個(gè)公用靜態(tài)方法,可加入任何一個(gè)類(lèi)中使用。

            將中英文字串轉(zhuǎn)換成純英文字串
            public static String toTureAsciiStr(String str){

            StringBuffer sb = new StringBuffer();

            byte[] bt = str.getBytes();

            for(int i =0 ;i〈bt.length;i++){

            if(bt[i]〈0){

            //是漢字去高位1

            sb.append((char)(bt[i]&&0x7f));

             }else{//是英文字符 補(bǔ)0作記錄

            sb.append((char)0);

            sb.append((char)bt[i]);

             }

             }

            return sb.toString();

            }

            將經(jīng)轉(zhuǎn)換的字串還原
            public static String unToTrueAsciiStr(String str){

             byte[] bt = str.getBytes();

             int i,l=0,length = bt.length,j=0;

             for(i = 0;i〈length;i++){

             if(bt[i] == 0){

             l++;

             }

             }

             byte []bt2 = new byte[length-l];

             for(i =0 ;i〈length;i++){

             if(bt[i] == 0){

             i++;

             bt2[j] = bt[i];

             }else{

             bt2[j] = (byte)(bt[i]|0x80);

             }

             j++;

             }

            String tt = new String(bt2);

            return tt;

            }

            上例在實(shí)際編程中效果很好,只是存儲(chǔ)的中文信息需要經(jīng)過(guò)同樣處理,才能被其他系統(tǒng)使用。而且如果中文字串出現(xiàn)英文字符,實(shí)際上增加了額外的存儲(chǔ)空間。

          5、Solaris下Servlet編程的中文問(wèn)題及解決辦法
          在使用Java開(kāi)發(fā)Internet上的一個(gè)應(yīng)用系統(tǒng)時(shí),發(fā)現(xiàn)在Windows下調(diào)試完全正常的Servlet,上傳到Solaris 服務(wù)器上,運(yùn)行卻出現(xiàn)故障——返回的網(wǎng)頁(yè)不能顯示中文,應(yīng)為中文的信息全為亂碼;用中文信息做關(guān)鍵字,不能正確檢索數(shù)據(jù)庫(kù)。后來(lái)采用加入檢查代碼等方法探知故障原因如下:

            顯示亂碼主要是因?yàn)橥ㄟ^(guò)類(lèi) HttpServletResponse提供的方法setContentType 無(wú)法改變返回給客戶(hù)的數(shù)據(jù)的編碼方式,正確的編碼方式應(yīng)為GB2312或者GBK,而事實(shí)上為缺省的ISO8859-1。無(wú)法檢索中文信息則是因?yàn)椋蛻?hù)提交的中文信息經(jīng)瀏覽器編碼到達(dá)服務(wù)器后,Servlet無(wú)法將其正確解碼。

            舉例說(shuō)明顯示亂碼解決方法
            Servlet 一般通常做法如下:

            public class ZldTestServlet extends HttpServlet {

            public void doGet (HttpServletRequest request,HttpServletResponse response)throws ServletException, IOException{

            //在使用 Writer向?yàn)g覽器返回?cái)?shù)據(jù)前,設(shè)置 content-type header ,在這里設(shè)置相應(yīng)的字符集gb2312

            response.setContentType("text/html;charset=gb2312");

            PrintWriter out = response.getWriter(); //*

            // 正式返回?cái)?shù)據(jù)

            out.println("〈html〉〈head〉〈title〉Servlet test〈/title〉〈/head〉" );

            out.println("這是一個(gè)測(cè)試頁(yè)!");

            out.println("〈/body〉〈/html〉");

            out.close();

            }

             ...

            }

            解決頁(yè)面顯示亂碼問(wèn)題,需將*處代碼換成如下內(nèi)容:

            PrintWriter out = new PrintWriter(new OutputStreamWriter(response.getOutputStream(),"gb2312"));

            Solaris中文信息檢索問(wèn)題的解決
            瀏覽器利用表單向服務(wù)器提交信息時(shí),一般采用x-www-form-urlencoded 的MIME格式對(duì)數(shù)據(jù)進(jìn)行編碼。如果使用get方法,參數(shù)名稱(chēng)和參數(shù)值經(jīng)編碼后附加在URL后,在Java中稱(chēng)作查詢(xún)串(query string)。

            在Servlet程序中,如果采用ServletRequest的方法getParameter取得參數(shù)值,在Solaris環(huán)境下,對(duì)漢字卻不能正確解碼。因而無(wú)法正確檢索數(shù)據(jù)庫(kù)。

            在Java 1.2的包——java.net中提供了URLEncode和URLDecode類(lèi)。類(lèi)URLEncode提供了按x-www-form-urlencoded格式對(duì)給定串進(jìn)行轉(zhuǎn)換的方法。類(lèi)URLEncode則提供了逆方法。

          6、Common Mail亂碼問(wèn)題
          common mail是一個(gè)小而方便的mail包,他實(shí)現(xiàn)了對(duì)Java Mail的封裝,使用起來(lái)十分的方便,但是我在使用他的時(shí)候發(fā)現(xiàn),使用純文本的內(nèi)容發(fā)送,結(jié)果是亂碼,代碼如下:
          public class TestCommonMail {
          public static void main(String[] args) throws EmailException, MessagingException {
          SimpleEmail email = new SimpleEmail();
          email.setCharset("GB2312");
          email.setHostName("smtp.163.com");
          email.setSubject("test");
          email.addTo("test@163.com");
          email.setFrom("test@163.com");
          email.setMsg("我的測(cè)試");
          email.setAuthentication("test", "test");
          email.send();
          }
          }

          分析了一下commons mail的源碼找到了原因。源碼如下:
          public class SimpleEmail extends Email
          {
          public Email setMsg(String msg) throws EmailException, MessagingException
          {
          if (EmailUtils.isEmpty(msg))
          {
          throw new EmailException("Invalid message supplied");
          }

          setContent(msg, TEXT_PLAIN);
          return this;
          }
          }

          Email代碼片段
          public void setContent(Object aObject, String aContentType)
          {
          this.content = aObject;
          if (EmailUtils.isEmpty(aContentType))
          {
          this.contentType = null;
          }
          else
          {
          // set the content type
          this.contentType = aContentType;

          // set the charset if the input was properly formed
          String strMarker = "; charset=";
          int charsetPos = aContentType.toLowerCase().indexOf(strMarker);
          if (charsetPos != -1)
          {
          // find the next space (after the marker)
          charsetPos += strMarker.length();
          int intCharsetEnd =
          aContentType.toLowerCase().indexOf(" ", charsetPos);

          if (intCharsetEnd != -1)
          {
          this.charset =
          aContentType.substring(charsetPos, intCharsetEnd);
          }
          else
          {
          this.charset = aContentType.substring(charsetPos);
          }
          }
          }
          }

          email.send();的send方法將調(diào)用
          public void buildMimeMessage() throws EmailException
          {
          try
          {
          this.getMailSession();
          this.message = new MimeMessage(this.session);

          if (EmailUtils.isNotEmpty(this.subject))
          {
          if (EmailUtils.isNotEmpty(this.charset))
          {
          this.message.setSubject(this.subject, this.charset);
          }
          else
          {
          this.message.setSubject(this.subject);
          }
          }

          // ========================================================
          // Start of replacement code
          if (this.content != null)
          {
          this.message.setContent(this.content, this.contentType);
          }
          // end of replacement code
          // ========================================================
          else if (this.emailBody != null)
          {
          this.message.setContent(this.emailBody);
          }
          else
          {
          this.message.setContent("", Email.TEXT_PLAIN);
          }

          if (this.fromAddress != null)
          {
          this.message.setFrom(this.fromAddress);
          }
          else
          {
          throw new EmailException("Sender address required");
          }

          if (this.toList.size() + this.ccList.size() + this.bccList.size() == 0)
          {
          throw new EmailException(
          "At least one receiver address required");
          }

          if (this.toList.size() > 0)
          {
          this.message.setRecipients(
          Message.RecipientType.TO,
          this.toInternetAddressArray(this.toList));
          }

          if (this.ccList.size() > 0)
          {
          this.message.setRecipients(
          Message.RecipientType.CC,
          this.toInternetAddressArray(this.ccList));
          }

          if (this.bccList.size() > 0)
          {
          this.message.setRecipients(
          Message.RecipientType.BCC,
          this.toInternetAddressArray(this.bccList));
          }

          if (this.replyList.size() > 0)
          {
          this.message.setReplyTo(
          this.toInternetAddressArray(this.replyList));
          }

          if (this.headers.size() > 0)
          {
          Iterator iterHeaderKeys = this.headers.keySet().iterator();
          while (iterHeaderKeys.hasNext())
          {
          String name = (String) iterHeaderKeys.next();
          String value = (String) headers.get(name);
          this.message.addHeader(name, value);
          }
          }

          if (this.message.getSentDate() == null)
          {
          this.message.setSentDate(getSentDate());
          }

          if (this.popBeforeSmtp)
          {
          Store store = session.getStore("pop3");
          store.connect(this.popHost, this.popUsername, this.popPassword);
          }
          }
          catch (MessagingException me)
          {
          throw new EmailException(me);
          }
          }
          由代碼可以知道純文本方式最終調(diào)用了Java Mail的
          message.setContent(this.content, this.contentType);
          content是內(nèi)容
          contentType是類(lèi)型,如text/plain,
          (我們可以試試直接用Java mail發(fā)郵件,設(shè)置文本內(nèi)容不使用setText方法,也使用setContent("測(cè)試", "text/plain")方式,你可以看到內(nèi)容也是亂碼)
          關(guān)鍵就在于text/plain,我們改成text/plain;charset=gb2312,ok亂碼解決了。在commons mail我們看SimpleEmail 類(lèi)中setMsg方法調(diào)用的就是 setContent(msg, TEXT_PLAIN);我們只需要將Email類(lèi)中的常量TEXT_PLAIN修改一下加入 charset=你的字符集 ,重新打包jar,這樣就可以了

          7、toad的字符集的設(shè)置與oracle的安裝
          oracle數(shù)據(jù)庫(kù)服務(wù)器的安裝一般是中文字符集,有時(shí)安裝在不同的平臺(tái)下,設(shè)置為ISO編碼,toad是oracle開(kāi)發(fā)的最好工具,不是我說(shuō)的,可是中文環(huán)境下安裝的toad,打開(kāi)英文字符的oracle時(shí),中文全是亂碼。必須進(jìn)行設(shè)置

          環(huán)境變量---〉系統(tǒng)變量

            NLS_lANG=SIMPLIFIED CHINESE_CHINA.ZHS16GBK
            或
            NLS_lANG=AMERICAN_AMERICA.WE8ISO8859P1

          AMERICAN_AMERICA.WE8MSWIN1252
           
           或者

           打開(kāi)注冊(cè)表,點(diǎn)擊HKEY_LOCAL_MATHINE
          再點(diǎn)擊Software,再點(diǎn)擊ORACLE
          在點(diǎn)擊HOME(ORACLE所在目錄)
          在注冊(cè)表的右半面有NLS_LANG,
          雙擊它,將你想要的覆蓋掉原來(lái)的就可以了
          最好記下舊的,以便可以改回來(lái)。


          connect sys/chang_on_install
          update props$
          set value$='ZHS16CGB231280'
          where name='NLS_CHARACTERSET';
          commit;
           這樣就OK了

           
          8、如何解決GWT(google web toolkit)中文的問(wèn)題
          GWT 中文亂碼解決方法

          1.把你要顯示的中文“測(cè)試字符串”輸入到一個(gè)文件,如:1.txt
          2.進(jìn)入命令行,進(jìn)入1.txt所在的目錄,敲入以下命令:native2ascii.exe 1.txt 2.txt 回車(chē)。這樣就生成了另外一個(gè)文件2.txt。
          3.2.txt的內(nèi)容如下:\u6d4b\u8bd5\u5b57\u7b26\u4e32
          4.然后用上面的編碼,在gwt中使用,就可以了.

          9、xmlHttp得到的網(wǎng)頁(yè)怎么是亂碼?
          (1)在服務(wù)器端使用WebRequest而不是xmlHttp
          (2) 將

          StreamReader sr = new StreamReader(stream);


          對(duì)于簡(jiǎn)體中文改成:

          StreamReader sr = new StreamReader(stream , Encoding.Default );
          對(duì)于utf-8改成:


          StreamReader sr = new StreamReader(stream , Encoding.UTF8 );
          當(dāng)然,Encoding枚舉還有很多其他的成員,對(duì)于不同的編碼content-type可以有選擇的應(yīng)用

          (3)后來(lái)我發(fā)現(xiàn)無(wú)論是content-type是gb2312還是utf-8,用


          StreamReader sr = new StreamReader(stream , Encoding.Default );

          都可以返回正常的漢字,所以統(tǒng)一的改成Encoding.Default

           


          --------------------------------------------------------------------------------

          最后,在服務(wù)器端從一個(gè)url獲得網(wǎng)頁(yè)的源代碼的代碼如下:

           

          /// <summary>
          /// post一個(gè)指定的url,獲得網(wǎng)頁(yè)的源代碼(用WebRequest實(shí)現(xiàn))
          /// </summary>
          /// <param name="url"></param>
          /// <returns>
          /// 如果請(qǐng)求失敗,返回null
          /// 如果請(qǐng)求成功,返回網(wǎng)頁(yè)的源代碼
          /// </returns>
          public static string GetContentFromUrl2( string url )
          {
              //變量定義
              string respstr;

              WebRequest myWebRequest=WebRequest.Create(url);
              //            myWebRequest.PreAuthenticate=true;
              //            NetworkCredential networkCredential=new NetworkCredential( username , password , domain );
              //            myWebRequest.Credentials=networkCredential;

              // Assign the response object of 'WebRequest' to a 'WebResponse' variable.
              WebResponse myWebResponse=myWebRequest.GetResponse();
              System.IO.Stream stream = myWebResponse.GetResponseStream();
              StreamReader sr = new StreamReader(stream , Encoding.Default );
              //以字符串形式讀取數(shù)據(jù)流
              respstr = sr.ReadToEnd();
              sr.Close();
             
              return respstr;
                 
          }

          10、解決weblogic/webshpere中文問(wèn)題:
          在web.xml文件中需要配置中文環(huán)境。r如下:
          <context-param>
            <param-name>weblogic.httpd.inputCharset./*</param-name>
            <param-value>GB2312</param-value>
          </context-param>

          posted on 2007-10-26 13:47 最後の騎士 閱讀(443) 評(píng)論(0)  編輯  收藏 所屬分類(lèi): java技術(shù)

          導(dǎo)航

          統(tǒng)計(jì)

          常用鏈接

          留言簿(1)

          隨筆分類(lèi)

          隨筆檔案

          文章分類(lèi)

          搜索

          最新評(píng)論

          閱讀排行榜

          評(píng)論排行榜

          主站蜘蛛池模板: 甘洛县| 察哈| 万盛区| 仪征市| 阿鲁科尔沁旗| 阳新县| 磐安县| 蕲春县| 丘北县| 嘉义市| 靖江市| 长丰县| 清河县| 芮城县| 商南县| 二手房| 芦山县| 湖南省| 滦平县| 康马县| 沂水县| 历史| 古丈县| 延庆县| 惠来县| 太仓市| 仁怀市| 左权县| 进贤县| 新宾| 开原市| 黑水县| 南投县| 泗阳县| 洞口县| 湘乡市| 清新县| 麻栗坡县| 普洱| 离岛区| 东乡族自治县|