Go语言视频零基础入门到精通

javalearner

今天碰到了一个问题，从游戏服务器下载下来的输出log有一个多G大。用记事本打不开，EditPlus也打不开，都提示文件太大。用word也打不开，提示文件大于512M。打不开怎么查找错误啊。于是他问我解决办法。我想了想，决定写一个简单的程序读取这个log，把这个log切分成一些小的可以用Editplus打开的文本。正好前段时间看了一些NIO的东西，所以决定用NIO来写。没想到，10几行代码就搞定了。下面附上源代码：
ReadLargeTextWithNIO.java

1. import java.io.FileInputStream;
   
2. import java.io.FileOutputStream;
   
3. import java.io.IOException;
   
4. import java.nio.ByteBuffer;
   
5. import java.nio.channels.FileChannel;
   
6. /**
   
7. *
   
8. * 用NIO读取大文本（1G以上）
   
9. *
   
10. * @author landon
    
11. *
    
12. */
    
13. public class ReadLargeTextWithNIO
    
14. {
    
15. public static void main(String...args) throws IOException
    
16. {
    
17.   FileInputStream fin = new FileInputStream("d:\temp\outlineA1.log");
    
18.   FileChannel fcin = fin.getChannel();
    
19.   
    
20.   ByteBuffer buffer = ByteBuffer.allocate(1024 * 1024 * 50);
    
21.   
    
22.   while(true)
    
23.   {
    
24.    buffer.clear();
    
25.    
    
26.    int flag = fcin.read(buffer);
    
27.    
    
28.    if(flag == -1)
    
29.    {
    
30.     break;
    
31.    }
    
32.    
    
33.    buffer.flip();
    
34.    
    
35.    FileOutputStream fout = new FileOutputStream("d:\temp" + Math.random() + ".log");
    
36.    FileChannel fcout = fout.getChannel();
    
37.    
    
38.    fcout.write(buffer);
    
39.   }
    
40. }
    
41. }

复制代码

下面简单说几个注意的地方：
a.因为要把超大文本切分成小的部分，所以分配buffer的时候尽量大一些，这里我分配的大小是50M，不过如果太大了，可能会报内存溢出。
b.说一下clear和flip的方法，直接上源码：
public final Buffer clear()
{
position = 0;
limit = capacity;
mark = -1;
return this;
}  public final Buffer flip()
{
limit = position;
position = 0;
mark = -1;
return this;
}
一看便知二者的区别。
c.跳出循环也即读完的判断是read返回的flag是-1
  

   
     
     
      
      

        
      

        
      
     
   

  


源码下载：http://file.javaxxz.com/2014/11/4/235832796.zip