本文介紹如何讀取大文件的簡單實例,有需要的朋友可以參考。
場景是這樣的:需要從一個 200 多 MB 的文本文件中提取有用數據。面對大文件,可以考慮分段處理。Java 中可以使用內存映射文件(MappedByteBuffer)來操作大文件,最大可達 2GB。下面是一個簡單示例:
import java.io.*;
import java.nio.*;
import java.nio.channels.*;
public class LargeMappedFiles {
static int length = 0x8FFFFFF; // 128 Mb
public static void main(String[] args) throws Exception {
MappedByteBuffer out =
new RandomAccessFile("test.dat", "rw").getChannel()
.map(FileChannel.MapMode.READ_WRITE, 0, length);
for (int i = 0; i < length; i++)
out.put((byte) 'x');
System.out.println("Finished writing");
for (int i = length / 2; i < length / 2 + 6; i++)
System.out.print((char) out.get(i));
// read file
}
}
通過 FileChannel 的 map 方法把文件映射到內存,就能像操作數組一樣高效地讀寫大文件,具體用法可 further 參考 Java API 文檔。