JavaScript 起初为浏览器而设计,没有读取或操作二进制数据流的机制。Buffer类的引入,则让NodeJS拥有操作文件流或网络二进制流的能力。

Buffer基本概念

Buffer 对象的内存分配不是在V8的堆内存中,而是Node在C++层面进行内存申请,可以理解为在内存中单独开辟了一部分空间,但是使用时分配内存则是由Node层面完成的,释放也是由Node中v8的gc机制自动控制。Buffer基本操作,这里不在赘述,官方文档很详细。

Buffer性能对比

通常,网络传输中,都需要将数据转换为Buffer。下面做一个性能对比实验。

1.使用纯字符串返回给客户端

const http = require('http');let hello = ''
for (var i = 0; i < 10240; i++) {hello += "a";
}console.log(`Hello:${hello.length}`)
// hello = Buffer.from(hello);http.createServer((req, res) => {res.writeHead(200);res.end(hello);
}).listen(8001);
复制代码

使用ab -c 200 -t 100 http://127.0.0.1:8001/命令来进行性能测试,发起200个并发客户端

使用字符串,QPS可以达到4019.70,传输率为40491.45KB每秒。

2.使用Buffer。将字符串转换为Buffer对象,再发给客户端。

const http = require('http');let hello = ''
for (var i = 0; i < 10240; i++) {hello += "a";
}console.log(`Hello:${hello.length}`)
hello = Buffer.from(hello);http.createServer((req, res) => {res.writeHead(200);res.end(hello);
}).listen(8001);
复制代码

取消Buffer转换的注释,同样使用ab -c 200 -t 100 http://127.0.0.1:8001/测试,同样发起200个并发客户端。

使用Buffer,QPS达到7130.05,传输率为71822.74KB每秒。 性能是原来的177%,极大的节省了服务器资源。 上面这个对比示例参考于《深入浅出Node JS》。

那么问题来了,为什么会有这么大的性能提升呢?

道理其实很简单,在NodeJS中,进行http传输时,若返回的类型为string,则会将string类型的参数,转换为Buffer,通过NodeJS中的Stream流,一点点的返回给客户端。如果我们直接返回Buffer类型,就没有了转换操作,直接返回,减少了CPU的重复使用率。这一部分逻辑见Node源码github.com/nodejs/node…

在上面性能对比示例中,返回string时,每次请求都需要将string装换成Buffer返回;而直接返回Buffer时,这个Buffer是我们启动服务时就存放在内存中的,每次请求直接返回内存中的Buffer即可,因此Buffer使用前后QPS提升了很多。

因此,我们在写业务代码时,部分资源可以预先转换为Buffer类型(如js、css等静态资源文件),直接返回buffer给客户端,再比如一些文件转发的场景,将获取到的内容储存为Buffer直接转发,避免额外的转换操作。

参考资料:

  • nodejs.cn/api/buffer.…
  • book.douban.com/subject/257…

Node JS Buffer使用理解相关推荐

  1. 【Nodejs】448- 深入学习 Node.js Buffer

    预备知识 ArrayBuffer ArrayBuffer 对象用来表示通用的.固定长度的原始二进制数据缓冲区.ArrayBuffer 不能直接操作,而是要通过类型数组对象 或 DataView 对象来 ...

  2. Node.js Buffer(缓冲区)

    一.Node.js Buffer(缓冲区) JavaScript 语言自身只有字符串数据类型,没有二进制数据类型. 但在处理像TCP流或文件流时,必须使用到二进制数据.因此在 Node.js中,定义了 ...

  3. Node.js—Buffer对象

    Node.js-Buffer对象 1 概述 2 基本操作 3 与二进制数组的关系 4 Buffer类 5 Buffer构造函数 6 Buffer类的方法(函数) 6.1 Buffer.isEncodi ...

  4. Node.js Buffer

    目录 I/O 操作中传输数据的格式 文件 I/O 中数据格式 网络 I/O 中的数据格式 JavaScript与二进制数据 Node.js 的 Buffer类 Buffer是啥 Buffer对象的内存 ...

  5. Node.js Buffer的使用

    一. 认识Buffer 1.1. 数据的二进制 计算机中所有的内容:文字.数字.图片.音频.视频最终都会使用二进制来表示. JavaScript可以直接去处理非常直观的数据:比如字符串,我们通常展示给 ...

  6. 【Node.js】如何理解非阻塞I/O(详解)

    Node.js 想要学好 node ,必须要理解 node 的特性. node 有三大特性:单线程.非阻塞I/O.事件驱动 如果你已经深刻理解了这三大特性,会发现这三大特性其实说的是一个事,三者少一不 ...

  7. Node.js 线程你理解的可能是错的

    本文代码运行环境 系统:MacOS High Sierra Node.js:10.3.0 复制代码 Node.js是单线程的,那么Node.js启动后线程数是1? 答案:Node.js启动后线程数并不 ...

  8. Node.js 线程你理解的可能是错的 1

    本文代码运行环境系统:MacOS High SierraNode.js:10.3.0 Node.js是单线程的,那么Node.js启动后线程数是1? 答案:Node.js启动后线程数并不是1,以下面代 ...

  9. Node.js Buffer静态方法

    Buffer对象是Node处理二进制数据的一个接口.它是Node原生提供的全局对象,可以直接使用,不需要require('buffer'). 静态方法: Buffer.isEncoding() 判断是 ...

最新文章

  1. 多核处理器集成了神经处理单元
  2. 【力荐】Exadata火线救援:10TB级数据修复经典案例详解!
  3. Linux信号列表(非实时信号和实时信号)
  4. java代码代替xml实现图片
  5. .NET Core 2.0迁移技巧之MemoryCache问题修复
  6. 训练日志 2019.2.10
  7. Python各种推导式(列表推导式,字典推导式,集合推导式,嵌套列表推导式)
  8. eclipse-4.4.2安装Groovy插件(其他版本eclipse可参考)
  9. win7 64位 内核安全_Win7进入死亡倒计时,全国一半电脑要遭殃?
  10. zepto.js学习笔记02
  11. freeswitch 基于webrtc网页视频、语音通话官方例子video_demo安装
  12. 随笔—醒悟篇之考研调剂
  13. 淘宝直通车展现位置和人群精准如何运用
  14. java微信分享朋友圈_Java实现微信公众平台朋友圈分享功能详细代码
  15. SPSS Modeler 18.0 新功能权威解读(文末附下载地址)
  16. IMX6ULL设备上面调试SDIOwifi。
  17. Linux上安装dos2unix
  18. 2011 年互联网十大浏览器
  19. 记录对接移动Mas平台发送短信踩的坑
  20. anaconda3、pycharm2019.3.3、python3.7搭建中文车牌识别系统环境

热门文章

  1. 计算机基础知识的知识要点,计算机基础知识要点
  2. cdn搭建原理_直播平台搭建并不难,最难的是这两点
  3. fs.readfile 显示html,javascript – 从fs.readFile获取数据
  4. 用计算机实现工业自动化,计算机技术在工业自动化控制系统中的应用
  5. java怎么从大到小排序元祖_列表、元祖的操作
  6. 公司服务器文档管理制度,文件服务器管理制度
  7. object string java_java实现Object转String的4种方法小结
  8. mysql中字符串处理替换字符replace和连接字符串函数concat
  9. 报表中判断字段中是否包含某字符串
  10. 如果降低sbus总线的传输速率/帧率,sbus怎样转UART,sbus接到4G