文档章节

Netty进阶基础篇之NIO Channel篇(4)

木九天
 木九天
发布于 07/14 11:48
字数 1276
阅读 40
收藏 0

1、Channel概念

通道(Channel):用于源节点与目标节点的连接。在 Java NIO 中负责缓冲区中数据的传输。Channel 本身不存储数据,因此需要配合缓冲区进行传输

2、 Channel主要实现的类

      |--FileChannel                    本地io
      |--SocketChannel          TCP网络io
      |--ServerSocketChannel TCP网络io
      |--DatagramChannel      UDP网络io

3、 获取通道

3.1 Java 针对支持通道的类提供了 getChannel() 方法

本地 IO:FileInputStream、FileOutputStream、 RandomAccessFile

网络IO:Socket、ServerSocket、DatagramSocket

//利用通道完成文件的复制(非直接缓冲区)
@Test
public void test1(){
   long start = System.currentTimeMillis();
   
   FileInputStream fis = null;
   FileOutputStream fos = null;
   //①获取通道
   FileChannel inChannel = null;
   FileChannel outChannel = null;
   try {
      fis = new FileInputStream("/Users/tentsuuhou/Desktop/01.mp4");
      fos = new FileOutputStream("/Users/tentsuuhou/Desktop/09.mp4");
      
      inChannel = fis.getChannel();
      outChannel = fos.getChannel();
      
      //②分配指定大小的缓冲区
      ByteBuffer buf = ByteBuffer.allocate(1024);
      
      //③将通道中的数据存入缓冲区中
      while(inChannel.read(buf) != -1){
         buf.flip(); //切换读取数据的模式
         //④将缓冲区中的数据写入通道中
         outChannel.write(buf);
         buf.clear(); //清空缓冲区
      }
   } catch (IOException e) {
      e.printStackTrace();
   } finally {
      if(outChannel != null){
         try {
            outChannel.close();
         } catch (IOException e) {
            e.printStackTrace();
         }
      }
      
      if(inChannel != null){
         try {
            inChannel.close();
         } catch (IOException e) {
            e.printStackTrace();
         }
      }
      
      if(fos != null){
         try {
            fos.close();
         } catch (IOException e) {
            e.printStackTrace();
         }
      }
      
      if(fis != null){
         try {
            fis.close();
         } catch (IOException e) {
            e.printStackTrace();
         }
      }
   }
   
   long end = System.currentTimeMillis();
   System.out.println("耗费时间为:" + (end - start));
}

我用的是mac系统,01.mp4视频25M左右,第一次复制时间1024ms,然后覆盖重新执行,大概左右在683ms,如果可以,大家可以试试1G以上的视频,看看需要多久

3.2、在 JDK 1.7 中的 NIO.2 针对各个通道提供了静态方法 open()

//使用直接缓冲区完成文件的复制(内存映射文件)
@Test
public void test2(){
   long start = System.currentTimeMillis();

   FileChannel inChannel = null;
   FileChannel outChannel= null;

   try {
      inChannel  = FileChannel.open(Paths.get("/Users/tentsuuhou/Desktop/01.mp4"), StandardOpenOption.READ);
      outChannel = FileChannel.open(Paths.get("/Users/tentsuuhou/Desktop/08.mp4"), StandardOpenOption.WRITE, StandardOpenOption.READ, StandardOpenOption.CREATE);

      //内存映射文件
      MappedByteBuffer inMappedBuf  = inChannel.map(MapMode.READ_ONLY, 0, inChannel.size());
      MappedByteBuffer outMappedBuf = outChannel.map(MapMode.READ_WRITE, 0, inChannel.size());

      //直接对缓冲区进行数据的读写操作
      byte[] dst = new byte[inMappedBuf.limit()];
      inMappedBuf.get(dst);
      outMappedBuf.put(dst);
   } catch (IOException e){
      e.printStackTrace();
   } finally {
      try {
         inChannel.close();
      } catch (IOException e) {
         e.printStackTrace();
      }

      try {
         outChannel.close();
      } catch (IOException e) {
         e.printStackTrace();
      }
   }
   
   long end = System.currentTimeMillis();
   System.out.println("耗费时间为:" + (end - start));
}

第一次:371ms,第二次104ms,证明直接缓冲区比间接缓冲区效率搞了很多。

3.3、在 JDK 1.7 中的 NIO.2 的 Files 工具类的 newByteChannel()

直接字节缓冲区还可以通过FileChannel的map()方法将文件区域直接映射到内存中来创建。该方法返回 MappedByteBuffer 。Java 平台的实现有助于通过 JNI 从本机代码创建直接字节缓冲区。如果以上这些缓冲区 中的某个缓冲区实例指的是不可访问的内存区域,则试图访问该区域不会更改该缓冲区的内容,并且将会在 访问期间或稍后的某个时间导致抛出不确定的异常。

@Test
public void test7(){
   long start = System.currentTimeMillis();

   FileChannel in  = null;
   FileChannel out = null;

   try {
      in  = (FileChannel) Files.newByteChannel(Paths.get("/Users/tentsuuhou/Desktop/01.mp4"),StandardOpenOption.READ);
      out = (FileChannel) Files.newByteChannel(Paths.get("/Users/tentsuuhou/Desktop/07.mp4"),StandardOpenOption.READ,StandardOpenOption.WRITE,StandardOpenOption.CREATE);

      MappedByteBuffer inMap  = in.map(MapMode.READ_ONLY,0,in.size());
      MappedByteBuffer outMap = out.map(MapMode.READ_WRITE,0,in.size());
      byte[] bytes = new byte[inMap.limit()];
      //直接对缓冲区进行数据的读写操作
      inMap.get(bytes);
      outMap.put(bytes);

   } catch (IOException i){
      i.printStackTrace();
   } finally {

      try {
         in.close();
      } catch (IOException e) {
         e.printStackTrace();
      }

      try {
         out.close();
      } catch (IOException e) {
         e.printStackTrace();
      }
   }

   long end   = System.currentTimeMillis();
   System.out.println(end-start);
}

同样使用的是直接缓冲区,速度和上面基本一致,只不过这个是用newByteChannel() 方法创建通道。

4、通道之间的数据传输

4.1 transferFrom()

4.2 transferTo()

//通道之间的数据传输(直接缓冲区)
@Test
public void test3(){
   FileChannel inChannel  = null;
   FileChannel outChannel = null;

   try {
      inChannel  = FileChannel.open(Paths.get("/Users/tentsuuhou/Desktop/01.mp4"), StandardOpenOption.READ);
      outChannel = FileChannel.open(Paths.get("/Users/tentsuuhou/Desktop/06.mp4"), StandardOpenOption.WRITE, StandardOpenOption.READ, StandardOpenOption.CREATE);

      //使用下面transferTo 或者 transferFrom 都可以达到目的
          //inChannel.transferTo(0, inChannel.size(), outChannel);
      outChannel.transferFrom(inChannel, 0, inChannel.size());
   } catch (IOException e){
      e.printStackTrace();
   } finally {
      try {
         inChannel.close();
      } catch (IOException e) {
         e.printStackTrace();
      }
      try {
         outChannel.close();
      } catch (IOException e) {
         e.printStackTrace();
      }
   }
}

5、分散(Scatter)与聚集(Gather)

5.1 分散读取(Scattering Reads):将通道中的数据分散到多个缓冲区中

5.2 聚集写入(Gathering Writes):将多个缓冲区中的数据聚集到通道中

//分散和聚集
@Test
public void test4() throws IOException{
   RandomAccessFile raf1 = new RandomAccessFile("1.txt", "rw");
   
   //1. 获取通道
   FileChannel channel1 = raf1.getChannel();
   
   //2. 分配指定大小的缓冲区
   ByteBuffer buf1 = ByteBuffer.allocate(100);
   ByteBuffer buf2 = ByteBuffer.allocate(1024);
   
   //3. 分散读取
   ByteBuffer[] bufs = {buf1, buf2};
   channel1.read(bufs);
   
   for (ByteBuffer byteBuffer : bufs) {
      byteBuffer.flip();
   }
   
   System.out.println(new String(bufs[0].array(), 0, bufs[0].limit()));
   System.out.println("-----------------");
   System.out.println(new String(bufs[1].array(), 0, bufs[1].limit()));
   
   //4. 聚集写入
   RandomAccessFile raf2 = new RandomAccessFile("2.txt", "rw");
   FileChannel channel2 = raf2.getChannel();
   
   channel2.write(bufs);
}

没有什么效率的问题,只是记住有这么一个功能就好了

6、字符集:Charset

6.1 编码:字符串 -> 字节数组

6.2 解码:字节数组 -> 字符串

//字符集
@Test
public void test6() throws IOException{
   Charset cs1 = Charset.forName("utf-8");
   
   //获取编码器
   CharsetEncoder ce = cs1.newEncoder();
   
   //获取解码器
   CharsetDecoder cd = cs1.newDecoder();
   
   CharBuffer cBuf = CharBuffer.allocate(1024);
   cBuf.put("我爱开源中国,作者MuJiuTian!");
   cBuf.flip();
   
   //编码
   ByteBuffer bBuf = ce.encode(cBuf);
   
   for (int i = 0; i < 36; i++) {
      System.out.println(bBuf.get());
   }
   
   //解码
   bBuf.flip();
   CharBuffer cBuf2 = cd.decode(bBuf);
   System.out.println(cBuf2.toString());
   
   System.out.println("------------------------------------------------------");
   
   Charset cs2 = Charset.forName("utf-8");
   bBuf.flip();
   CharBuffer cBuf3 = cs2.decode(bBuf);
   System.out.println(cBuf3.toString());
}

 

 

 

 

 

© 著作权归作者所有

木九天

木九天

粉丝 171
博文 224
码字总数 169575
作品 0
海淀
程序员
私信 提问
NIO相关基础篇二

转载请注明原创出处,谢谢! 上篇NIO相关基础篇一,主要介绍了一些基本的概念以及缓冲区(Buffer)和通道(Channel),本篇继续NIO相关话题内容,主要就是文件锁、以及比较关键的Selector,后...

匠心零度
2017/12/18
0
0
Netty进阶基础篇之流概念篇(1)

序言:学Netty之前,对流的概念应该深刻一些,所以先理解一下流的使用! 1、IO、NIO、AIO 含义区别 1.1 同步阻塞I/O(BIO block io) jdk1.4之前就一个io流,服务器实现模式为一个连接一个线程...

木九天
07/13
30
0
高性能网络通信框架Netty-基础概念篇

一、前言 Netty是一种可以轻松快速的开发协议服务器和客户端网络应用程序的NIO框架,它大大简化了TCP或者UDP服务器的网络编程,但是你仍然可以访问和使用底层的API,Netty只是对其进行了高层的...

阿里加多
2018/06/03
0
0
Netty精粹之JAVA NIO开发需要知道的

学习Netty框架以及相关源码也有一小段时间了,恰逢今天除夕,写篇文章总结一下。Netty是个高效的JAVA NIO框架,总体框架基于异步非阻塞的设计,基于网络IO事件驱动,主要贡献在于可以让用户基...

Float_Luuu
2016/02/07
14.8K
3
Netty进阶基础篇之NIO 阻塞通信(5)

NIO 完成网络通信的三个核心:Channel、Buffer、Selector 1、通道(Channel) 负责连接 SocketChannel、ServerSocketChannel、DatagramChannel、Pipe.SinkChannel、Pipe.SourceChannel 2、缓......

木九天
07/14
13
0

没有更多内容

加载失败,请刷新页面

加载更多

反编译9.png图片还原

本文链接:https://blog.csdn.net/a1140778530/article/details/10528507 经常反编译apk文件找资源,9.png的文件处理起来很麻烦。 最近使用Ant自动编译打包app时,从别处搜罗来的9.png文件导...

shzwork
22分钟前
6
0
Shell脚本应用 – for、while循环语句

一、for循环语句 在实际工作中,经常会遇到某项任务需要多次执行的情况,而每次执行时仅仅是处理的对象不一样,其他命令相同。例如:根据通讯录中的姓名列表创建系统账号等情况。 当面对各种...

linux-tao
22分钟前
5
0
RPA风潮下企业财务工作模式的变革

RPA(机器人流程自动化)在财务领域的应用,正给企业财务带来前所未有的改变。 前RPA时代,财务领域面临的痛点 在RPA机器人应用之前,企业财务工作进程的推进,主要通过财务人员人工操作或信...

UiBot
27分钟前
5
0
Hive之命令行修改表注释

最近遇到一个需求,在不重建表的情况下,修改表的注释,hive有没有类似关系型数据库的SQL命令来修改呢,找了下,亲测有效,如下List-1 List-1 hive>use your_schemahvie>ALTER TABLE tabl...

克虏伯
28分钟前
5
0
是什么,它的作用是什么

在HTML文档的首部往往会有这么一句话<!DOCTYPE html>,许多时候我们忽视了它的存在,它实际上是一个声明,告诉浏览器用哪种HTML版本的规范来解读HTML文档。 尽管我们不给出这句声明浏览器照样...

前端老手
33分钟前
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部