【netty学习】之零拷贝

零拷贝

1、零拷贝是从操作系统的角度出发，因为内核缓冲区之间没有数据是重复的，只有kernel buffer一份数据
2、零拷贝不仅仅带来更少的数据复制，还能带来其他性能的优势，例如更少的上下文切换，更少的cpu缓存伪共享，以及无cpu校验和计算

DMA(direct memory Access):直接存储器访问

mmap内存映射和sendFile的区别

1、mmap适合小数据量读写，sendfile适合大文件传输
2、mmap需要4次上下文切换，3次数据拷贝；sendFile需要3次上下文切换，最少2次数据拷贝
3、sendFile可以利用DMA方式，减少CPU拷贝，mmap则不能（必须从内核拷贝到socket缓冲区）

标题代码实例记录：

// server端
package com.example.demo.nio.ZeroCopy;import java.net.InetSocketAddress;
import java.net.ServerSocket;
import java.nio.ByteBuffer;
import java.nio.channels.ServerSocketChannel;
import java.nio.channels.SocketChannel;public class NewIOSever {public static void main(String[] args) throws Exception{InetSocketAddress inetSocketAddress = new InetSocketAddress(7001);ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();ServerSocket serverSocket = serverSocketChannel.socket();//绑定端口serverSocket.bind(inetSocketAddress);//创建bufferByteBuffer byteBuffer = ByteBuffer.allocate(1024);while (true){SocketChannel socketChannel = serverSocketChannel.accept();System.out.println("进来的连接:" + socketChannel.getRemoteAddress());int readCount = 0;while (-1 != readCount){try{readCount = socketChannel.read(byteBuffer);}catch (Exception ex){break;}//进行倒带byteBuffer.rewind();//position为0，mark作废}}}}

客户端

//客户端
package com.example.demo.nio.ZeroCopy;import java.io.FileInputStream;
import java.net.InetSocketAddress;
import java.nio.channels.FileChannel;
import java.nio.channels.SocketChannel;public class NewIOClient {public static void main(String[] args) throws Exception{SocketChannel socketChannel = SocketChannel.open();socketChannel.connect(new InetSocketAddress("127.0.0.1", 7001));String fileName = "interview.pdf";//得到一个文件channelFileChannel fileChannel = new FileInputStream(fileName).getChannel();System.out.println("socketChannel的地址:" + socketChannel.getLocalAddress());long startTime = System.currentTimeMillis();//在linux下调用transferTo方法可以完成传输，在windows下，一次只能传输8M文件//准备发送long transferCount = fileChannel.transferTo(0, fileChannel.size(), socketChannel);System.out.println("发送总字节数="+transferCount+",耗时："+(System.currentTimeMillis()-startTime));fileChannel.close();}
}

总结：代码主要演示由netty提供的transferTo()方法可以直接进行零拷贝，与传统IO流复制文件相比确实速度提高很多
此处注意该方法调用时windows和linux系统存在差异

                                                                                                     （画个太阳激励自己） ☀

【netty学习】之零拷贝相关推荐

浅析操作系统和Netty中的零拷贝机制
点击关注公众号,Java干货及时送达零拷贝机制(Zero-Copy)是在操作数据时不需要将数据从一块内存区域复制到另一块内存区域的技术,这样就避免了内存的拷贝,使得可以提高CPU的.零拷贝机制是一种 ...
理解Netty中的零拷贝（Zero-Copy）机制
理解Netty中的零拷贝(Zero-Copy)机制发表于2年前(2014-01-13 15:11) 阅读(10209) | 评论(12) 164人收藏此文章,我要收藏赞29 12月12日北京O ...
对于 Netty ByteBuf 的零拷贝(Zero Copy) 的理解
根据 Wiki 对 Zero-copy 的定义: "Zero-copy" describes computer operations in which the CPU does n ...
彻底搞懂Netty高性能之零拷贝
作为Java网络编程学习者,不仅要知道NIO,还一定要学习Mina和Netty这两个优秀的网络框架.作为上一篇NIO效率高的原理之零拷贝与直接内存映射的补充,本文将针对Netty的零拷贝特性进行详细分 ...
netty如何实现零拷贝
根据 Wiki 对 Zero-copy 的定义: "Zero-copy" describes computer operations in which the CPU does n ...
Netty、Kafka中的零拷贝技术到底有多牛?
点击上方"方志朋",选择"设为星标" 回复"666"获取新整理的面试文章来源:rrd.me/ggFBd 零拷贝,从字面意思理解就是数据不需 ...
深入探秘 Netty、Kafka 中的零拷贝技术！
作者:ksfzhaohui 原文:juejin.im/post/5cad6f1ef265da039f0ef5df 零拷贝,从字面意思理解就是数据不需要来回的拷贝,大大提升了系统的性能.我们也经常在 J ...
netty的零拷贝、架构设计、ByteBuf扩容机制详解
文章目录 1. netty高并发架构设计精髓 ①:主从.Reactor线程模型 ②:NIO多路复用非阻塞 ③:无锁串行化设计思想 ④:高可用.可扩展架构 ⑤:直接内存和零拷贝 ⑥:ByteBuf内存池 ...
80-15-020-原理-零拷贝-Netty零拷贝的原理
1.概述 Netty 的零拷贝 1. 传统意义的拷贝是在发送数据的时候,传统的实现方式是: File.read(bytes) Socket.send(bytes) 这种方式需要四次数据拷贝和四次上下 ...
关于零拷贝的一点认识
点击上方蓝色"程序猿DD",选择"设为星标" 回复"资源"获取独家整理的学习资料! 作者 | ksfzhaohui 来源 | https:/ ...

【netty学习】之零拷贝

零拷贝

mmap内存映射和sendFile的区别

标题代码实例记录：

【netty学习】之零拷贝相关推荐

最新文章

热门文章