④ JAVA IO—拷贝(java拷贝文件夹到另外一个文件夹)

createh52个月前 (02-01)技术教程15

一、 传统的IO

  • 1. 数据由磁盘拷贝到内核空间(DMA),再由内核空间拷贝到用户空间(JVM)
  • 2. 用户可能会对拷贝进来的数据进行操作
  • 3. 数据从用户空间拷贝到内核空间(JVM),再通过内核空间将数据发送出去。

传统IO经过了4次拷贝,两次内核空间的拷贝,两次用户空间拷贝

用户态与内核态的切换:

  • 1. 调用read方法的时候,由用户态切换为内核态,将数据从磁盘读取到内核缓冲区(DMA系统总线)
  • 2. 系统由内核态变化为用户态,当内核读取完成后,将数据读取到用户空间(CPU参加)
  • 3. 调用write方法的时候,由用户态切换为内核态,将用户缓冲区的数据读取到网络缓冲区(Socket Buffer)中(JVM参加)
  • 4. 系统由内核态切换为用户态,网络缓冲区数据通过DMA传送出去。

二、 NIO零拷贝

1. JAVA的零拷贝是指数据在用户态下没有经过拷贝,没有经过CPU的拷贝,所以才叫零拷贝,而不是不进行拷贝,在kernel空间还是需要经过两次拷贝的。

2. JAVA方法调用FileChannel的transferTo方法(内核的sendFile()方法)使用。

  • 在Linux2.1版本中,增加数据从Read Buffer被copy到channel Buffer的操作,减少了CPU的copy,未经过用户态,减少了用户态与内存态的切换。(需要进行三次拷贝)
  • 在Linux2.4版本中,增加了数据的长度与位置的描述符(kernel Buffer的内存地址与偏移量),不需要将Read Buffer数据经过CPU copy到channel Socket中了。

注意点:

1. 零拷贝好处:

  • ① 可以减少甚至完全不占用CPU,能够释放CPU去执行其它的事情
  • ② 减少内存带宽的占用
  • ③ 减少用户态与内核态之间上下文的切换

2. 零拷贝是由操作系统来支持的,不依赖JAVA程序支持,如果操作系统支持那就存在零拷贝功能,不支持就不存在。

3. 用户无法对数据内容进行操作


三、NIO的直接内存

直接内存:使用的是MMAP技术,直接将文件映射到内核空间的内存中,然后返回一个操作地址address。

MMAP是由MappedByteBuffer类实现的,主要是channel的map()方法,通过map方法将文件映射到内核空间的内存中,并且返回一个addr,拼接成一个MappedByteBuffer对象。

try {
   File file = new File("D://download//BID_DB.sql");
   long len = file.length();
   byte[] bs = new byte[(int)len];
   MappedByteBuffer bb = new FileInputStream(file).getChannel().map(MapMode.READ_ONLY, 0, len);
  
   for(int offset=0;offset<len;offset++){
    byte b = bb.get();
    bs[offset] = b;
   }
   
   Scanner sc=new Scanner(new ByteArrayInputStream(bs));
   sc.useDelimiter(" ");
   while(sc.hasNext()){
    System.out.println(sc.next()+" ");
   }
  }catch (Exception e) {
   e.printStackTrace();
  }

相关文章

你知道Java的对象拷贝方式有哪几种吗?

【死记硬背】总共有四种,分别是直接赋值拷贝、浅拷贝、深拷贝和序列化。直接赋值拷贝:这个实际上复制的是对象的引用地址,如:Person p1 = p2,则p1和p2指向的是同一个对象的地址。因此,p1属...

你还在用BeanUtils进行对象属性拷贝?

在做业务的时候,为了隔离变化,我们会将DAO查询出来的DO和对前端提供的DTO隔离开来。大概90%的时候,它们的结构都是类似的;但是我们很不喜欢写很多冗长的b.setF1(a.getF1())这样的代...

java对象深拷贝的三种实现方式,可避免循环引用导致的堆栈溢出

在java编程中,难免要对一个对象进行复制,复制分为深拷贝和浅拷贝。浅拷贝只复制对象本身,对于对象引用的其他对象不进行复制。 深拷贝则将对象与引用对象,全部进行拷贝。最简单的深拷贝就是自己new一个对...

Java常用的几种属性拷贝工具类使用总结

Java属性拷贝工具类使用总结对项目中经常使用的属性拷贝工具类进行总结:org.apache.commons.beanutils.BeanUtilsorg.apache.commons.beanuti...

java浅拷贝BeanUtils.copyProperties引发的RPC异常

背景近期参与了一个攻坚项目,前期因为其他流程原因,测试时间已经耽搁了好几天了,本以为已经解决了卡点,后续流程应该顺顺利利的,没想到 人在地铁上,bug从咚咚来~没有任何修改的服务接口,抛出异常:jav...