I want to fly higher
          
		programming Explorer
	
          

          
          		
	

          

          


          
	
		
          
			


          
posts - 114,comments - 263,trackbacks - 0


          
	

          


          
	
					


          
	
	
    今天同事碰到了一個問題，從游戲服務器下載下來的輸出log有一個多G大。用記事本打不開，EditPlus也打不開，都提示文件太大。用word也打不開，提示文件大于512M。打不開怎么查找錯誤啊。于是他問我解決辦法。我想了想，決定寫一個簡單的程序讀取這個log，把這個log切分成一些小的可以用Editplus打開的文本。正好前段時間看了一些NIO的東西，所以決定用NIO來寫。沒想到，10幾行代碼就搞定了。下面附上源代碼：
               ReadLargeTextWithNIO.java

           1package com.nio.entrace;
           2
           3import java.io.FileInputStream;
           4import java.io.FileOutputStream;
           5import java.io.IOException;
           6import java.nio.ByteBuffer;
           7import java.nio.channels.FileChannel;
           8
           9/**
          10 * 
          11 * 用NIO讀取大文本（1G以上）
          12 * 
          13 * @author landon
          14 *
          15 */
          16public class ReadLargeTextWithNIO 
          17{
          18 public static void main(Stringargs) throws IOException
          19 {
          20  FileInputStream fin = new FileInputStream("d:\\temp\\outlineA1.log");
          21  FileChannel fcin = fin.getChannel();
          22  
          23  ByteBuffer buffer = ByteBuffer.allocate(1024 * 1024 * 50);
          24  
          25  while(true)
          26  {
          27   buffer.clear();
          28   
          29   int flag = fcin.read(buffer);
          30   
          31   if(flag == -1)
          32   {
          33    break;
          34   }
          35   
          36   buffer.flip();
          37   
          38   FileOutputStream fout = new FileOutputStream("d:\\temp\\" + Math.random() + ".log");
          39   FileChannel fcout = fout.getChannel();
          40   
          41   fcout.write(buffer);
          42  }
          43 }
          44}
          45
          46
          


              下面簡單說幾個注意的地方：
               a.因為要把超大文本切分成小的部分，所以分配buffer的時候盡量大一些，這里我分配的大小是50M，不過如果太大了，可能會報內存溢出。
               b.說一下clear和flip的方法，直接上源碼：
          

           1public final Buffer clear()
           2    {
           3        position = 0;
           4        limit = capacity;
           5        mark = -1;
           6        return this;
           7    }
           8
           9 public final Buffer flip()
          10    {
          11        limit = position;
          12        position = 0;
          13        mark = -1;
          14        return this;
          15    }
          


              一看便知二者的區別。
              c.跳出循環也即讀完的判斷是read返回的flag是-1

              利用NIO確實方便，以后繼續研究->NIO網絡編程 

	
          posted on 2010-12-20 22:09 landon 閱讀(5180) 評論(4)  編輯  收藏  所屬分類: Program 
          

          







          
	    
    


          
FeedBack:

          
	

		
          
			
          # re: NIO入門之輕松讀取大文件
          
			
          
				2010-12-21 14:37 | @joe
          
				
          不用nio也可以。nio和bio的區別不再這。而在主動和被動模式。  回復  更多評論
            
          
			
          
			
			
		
          
	
		
          
			
          # re: NIO入門之輕松讀取大文件
          
			
          
				2010-12-21 21:08 | landonlv
          
				
          嗯，大牛，學習了。@joe

            回復  更多評論
            
          
			
          
			
			
		
          
	
		
          
			
          # re: NIO入門之輕松讀取大文件
          
			
          
				2011-07-28 09:31 | greatghoul
          
				
          為什么不把代碼放在代碼塊中，方便閱讀，你這樣格式都破壞掉了。  回復  更多評論
            
          
			
          
			
			
		
          
	
		
          
			
          # re: NIO入門之輕松讀取大文件
          
			
          
				2011-07-29 23:05 | landonlv
          
				
          嗯，直接粘貼的。在ide中是格式的，貼過來就不行了@greatghoul

            回復  更多評論
            
          
			
          
			
			
		
          
	








          








          

				

          



    







          
        
	




主站蜘蛛池模板：
上虞市|
邛崃市|
寿宁县|
图木舒克市|
衢州市|
西昌市|
陕西省|
从江县|
高邮市|
古交市|
炎陵县|
赤城县|
达拉特旗|
奉新县|
平南县|
正安县|
右玉县|
建瓯市|
达拉特旗|
潞城市|
略阳县|
策勒县|
亚东县|
道孚县|
苍山县|
突泉县|
中西区|
拉萨市|
福建省|
玉屏|
湖北省|
孟村|
调兵山市|
合水县|
塘沽区|
交城县|
濮阳市|
仁怀市|
大荔县|
青铜峡市|
侯马市|