java高效实现大文件拷贝
2013-11-18 19:10
661 查看
在java中,FileChannel类中有一些优化方法可以提高传输的效率,其中transferTo( )和 transferFrom( )方法允许将一个通道交叉连接到另一个通道,而不需要通过一个缓冲区来传递数据。只有FileChannel类有这两个方法,因此 channel-to-channel 传输中通道之一必须是 FileChannel。不能在sock通道之间传输数据,不过socket 通道实现WritableByteChannel 和 ReadableByteChannel 接口,因此文件的内容可以用
transferTo( )方法传输给一个 socket 通道,或者也可以用 transferFrom( )方法将数据从一个 socket 通道直接读取到一个文件中。
Channel-to-channel 传输是可以极其快速的,特别是在底层操作系统提供本地支持的时候。某些操作系统可以不必通过用户空间传递数据而进行直接的数据传输。对于大量的数据传输,这会是一个巨大的帮助。
注意:如果要拷贝的文件大于4G,则不能直接用Channel-to-channel 的方法,替代的方法是使用ByteBuffer,先从原文件通道读取到ByteBuffer,再将ByteBuffer写到目标文件通道中。
下面为实现大文件快速拷贝的代码:
transferTo( )方法传输给一个 socket 通道,或者也可以用 transferFrom( )方法将数据从一个 socket 通道直接读取到一个文件中。
Channel-to-channel 传输是可以极其快速的,特别是在底层操作系统提供本地支持的时候。某些操作系统可以不必通过用户空间传递数据而进行直接的数据传输。对于大量的数据传输,这会是一个巨大的帮助。
注意:如果要拷贝的文件大于4G,则不能直接用Channel-to-channel 的方法,替代的方法是使用ByteBuffer,先从原文件通道读取到ByteBuffer,再将ByteBuffer写到目标文件通道中。
下面为实现大文件快速拷贝的代码:
import java.io.File; import java.io.IOException; import java.io.RandomAccessFile; import java.nio.ByteBuffer; import java.nio.channels.FileChannel; public class BigFileCopy { /** * 通过channel到channel直接传输 * @param source * @param dest * @throws IOException */ public static void copyByChannelToChannel(String source, String dest) throws IOException { File source_tmp_file = new File(source); if (!source_tmp_file.exists()) { return ; } RandomAccessFile source_file = new RandomAccessFile(source_tmp_file, "r"); FileChannel source_channel = source_file.getChannel(); File dest_tmp_file = new File(dest); if (!dest_tmp_file.isFile()) { if (!dest_tmp_file.createNewFile()) { source_channel.close(); source_file.close(); return; } } RandomAccessFile dest_file = new RandomAccessFile(dest_tmp_file, "rw"); FileChannel dest_channel = dest_file.getChannel(); long left_size = source_channel.size(); long position = 0; while (left_size > 0) { long write_size = source_channel.transferTo(position, left_size, dest_channel); position += write_size; left_size -= write_size; } source_channel.close(); source_file.close(); dest_channel.close(); dest_file.close(); } public static void main(String[] args) { try { long start_time = System.currentTimeMillis(); BigFileCopy.copyByChannelToChannel("source_file", "dest_file"); long end_time = System.currentTimeMillis(); System.out.println("copy time = " + (end_time - start_time)); } catch (IOException e) { e.printStackTrace(); } } }
相关文章推荐
- java IO之字节流和字符流-Reader和Writer以及实现文件复制拷贝
- Java---三种文件拷贝的实现方法
- 【Java】文件拷贝的几种实现方案
- Java如何实现文件拷贝操作和如何正确关闭资源
- Java利用文件输入输出流实现文件夹内所有文件拷贝到另一个文件夹
- JavaIO实现文件的拷贝
- Java实现文件拷贝
- Java实现文件拷贝的4种方法
- java递归实现文件的删除和拷贝
- Java常用面试题16 用IO和NIO两种方式实现文件拷贝
- java递归实现文件的删除和拷贝
- Java实现分类文件拷贝1
- java IO之字节流和字符流-Reader和Writer以及实现文件复制拷贝
- 用java实现的文件和文件夹拷贝和转移
- Java实现文件拷贝的4种方法
- Java实现拷贝文件详细代码
- java实现批量拷贝音乐文件
- 删除和拷贝文件递归方法(Java实现)
- Java实现分类文件拷贝2
- Java编程___File各类方法使用(实现拷贝特定文件至特定目录下)