大厂技术  高级前端  Node进阶

点击上方 程序员成长指北,关注公众号

回复1,加入高级Node交流群

原文链接: https://juejin.im/post/5cf61ed3e51d4555fd20a2f3

作者: AlienZHOU

1.熟悉的JSON.stringify

在浏览器端或服务端,JSON.stringify()都是我们很常用的方法:

  • 将 JSON object 存储到 localStorage 中;

  • POST 请求中的 JSON body;

  • 处理响应体中的 JSON 形式的数据;

  • 甚至某些条件下,我们还会用它来实现一个简单的深拷贝;

  • ……

在一些性能敏感的场合下(例如服务端处理大量并发),或面对大量 stringify 的操作时,我们会希望它的性能更好,速度更快。这也催生了一些优化的 stringify 方案/库,下图是它们与原生方法的性能对比:

绿色部分是原生JSON.stringify(),可见性能相较这些库都要低很多。那么,在大幅的性能提升背后的技术原理是什么呢?

2. 比 stringify 更快的 stringify

由于 JavaScript 是动态性很强的语言,所以对于一个 Object 类型的变量,其包含的键名、键值、键值类型最终只能在运行时确定。因此,执行JSON.stringify()时会有很多工作要做。在一无所知的情况下,我们想要大幅优化显然无能为力。

那么如果我们知道这个 Object 中的键名、键值信息呢 —— 也就是知道它的结构信息,这会有帮助么?

看个例子:

下面这个 Object,

const obj = {name: 'alienzhou',status: 6,working: true
};

我们对它应用JSON.stringify(),得到结果为

JSON.stringify(obj);
// {"name":"alienzhou","status":6,"working":true}

现在如果我们知道这个obj的结构是固定的:

  • 键名不变

  • 键值的类型一定

那么其实,我可以创建一个“定制化”的 stringify 方法

function myStringify(o) {return ('{"name":"'+ o.name+ '","status":'+ o.status+ ',"isWorking":'+ o.working+ '}');
}

看看我们的myStringify方法的输出:

myStringify({name: 'alienzhou',status: 6,working: true
});
// {"name":"alienzhou","status":6,"isWorking":true}myStringify({name: 'mengshou',status: 3,working: false
});
// {"name":"mengshou","status":3,"isWorking":false}

可以得到正确的结果,但只用到了类型转换和字符串拼接,所以“定制化”方法可以让“stringify”更快。

总结来看,如何得到比 stringify 更快的 stringify 方法呢?

  1. 需要先确定对象的结构信息;

  2. 根据其结构信息,为该种结构的对象创建“定制化”的stringify方法,其内部实际是通过字符串拼接生成结果的;

  3. 最后,使用该“定制化”的方法来 stringify 对象即可。

这也是大多数 stringify 加速库的套路,转化为代码就是类似:

import faster from 'some_library_faster_stringify';// 1. 通过相应规则,定义你的对象结构
const theObjectScheme = {// ……
};// 2. 根据结构,得到一个定制化的方法
const stringify = faster(theObjectScheme);// 3. 调用方法,快速 stringify
const target = {// ……
};
stringify(target);

3. 如何生成“定制化”的方法

根据上面的分析,核心功能在于,根据其结构信息,为该类对象创建“定制化”的stringify方法,其内部实际是简单的属性访问与字符串拼接。

为了了解具体的实现方式,下面我以两个实现上略有差异的开源库为例来简单介绍一下。

3.1. fast-json-stringify

下图是根据 fast-json-stringify[1] 提供的 benchmark 结果,整理出来的性能对比。

可以看到,在大多数场景下具备2-5倍的性能提升。

3.1.1. scheme 的定义方式

fast-json-stringify 使用了 JSON Schema Validation[2] 来定义(JSON)对象的数据格式。其 scheme 定义的结构本身也是 JSON 格式的,例如对象

{name: 'alienzhou',status: 6,working: true
}

对应的 scheme 就是:

{title: 'Example Schema',type: 'object',properties: {name: {type: 'string'},status: {type: 'integer'},working: {type: 'boolean'}}
}

其 scheme 定义规则丰富,具体使用可以参考 Ajv[3] 这个 JSON 校验库。

3.1.2. stringify 方法的生成

fast-json-stringify 会根据刚才定义的 scheme,拼接生成出实际的函数代码字符串,然后使用 Function 构造函数[4]在运行时动态生成对应的 stringify 函数。

在代码生成上,首先它会注入预先定义好的各类工具方法,这一部分不同的 scheme 都是一样的:

var code = `'use strict'`code += `${$asString.toString()}${$asStringNullable.toString()}${$asStringSmall.toString()}${$asNumber.toString()}${$asNumberNullable.toString()}${$asIntegerNullable.toString()}${$asNull.toString()}${$asBoolean.toString()}${$asBooleanNullable.toString()}`

其次,就会根据 scheme 定义的具体内容生成 stringify 函数的具体代码。而生成的方式也比较简单:通过遍历 scheme。

遍历 scheme 时,根据定义的类型,在对应代码处插入相应的工具函数用于键值转换。例如上面例子中name这个属性:

var accessor = key.indexOf('[') === 0 ? sanitizeKey(key) : `['${sanitizeKey(key)}']`
switch (type) {case 'null':code += `json += $asNull()`breakcase 'string':code += nullable ? `json += obj${accessor} === null ? null : $asString(obj${accessor})` : `json += $asString(obj${accessor})`breakcase 'integer':code += nullable ? `json += obj${accessor} === null ? null : $asInteger(obj${accessor})` : `json += $asInteger(obj${accessor})`break……

上面代码中的code变量保存的就是最后生成的函数体的代码串。由于在 scheme 定义中,namestring类型,且不为空,所以会在code中添加如下一段代码字符串:

"json += $asString(obj['name'])"

由于还需要处理数组、级联对象等复杂情况,实际的代码省略了很多。

然后,生成的完整的code字符串大致如下:

function $asString(str) {// ……
}
function $asStringNullable(str) {// ……
}
function $asStringSmall(str) {// ……
}
function $asNumber(i) {// ……
}
function $asNumberNullable(i) {// ……
}
/* 以上是一系列通用的键值转换方法 *//* $main 就是 stringify 的主体函数 */
function $main(input) {var obj = typeof input.toJSON === 'function'? input.toJSON(): inputvar json = '{'var addComma = falseif (obj['name'] !== undefined) {if (addComma) {json += ','}addComma = truejson += '"name":'json += $asString(obj['name'])}// …… 其他属性(status、working)的拼接json += '}'return json
}return $main

最后,将code字符串传入 Function 构造函数来创建相应的 stringify 函数。

// dependencies 主要用于处理包含 anyOf 与 if 语法的情况
dependenciesName.push(code)
return (Function.apply(null, dependenciesName).apply(null, dependencies))

3.2. slow-json-stringify

slow-json-stringify[5] 虽然名字叫 "slow",但其实是一个 "fast" 的 stringify 库(命名很调皮)。

The slowest stringifier in the known universe. Just kidding, it's the fastest (:

它的实现比前面提到的 fast-json-stringify 更轻量级,思路也很巧妙。同时它在很多场景下效率会比 fast-json-stringify 更快[6]

3.2.1. scheme 的定义方式

slow-json-stringify 的 scheme 定义更自然与简单,主要就是将键值替换为类型描述。还是上面这个对象的例子,scheme 会变为

{name: 'string',status: 'number',working: 'boolean'
}

确实非常直观。

3.2.2. stringify 方法的生成

不知道你注意到没有

// scheme
{name: 'string',status: 'number',working: 'boolean'
}// 目标对象
{name: 'alienzhou',status: 6,working: true
}

scheme 和原对象的结构是不是很像?

这种 scheme 的巧妙之处在于,这样定义之后,我们可以先把 scheme JSON.stringify一下,然后“扣去”所有类型值,最后等着我们的就是把实际的值直接填充到 scheme 对应的类型声明处。

具体如何操作呢?

首先,可以直接对 scheme 调用JSON.stringify()来生成基础模版,同时借用JSON.stringify()的第二个参数来作为遍历方法收集属性的访问路径:

let map = {};
const str = JSON.stringify(schema, (prop, value) => {const isArray = Array.isArray(value);if (typeof value !== 'object' || isArray) {if (isArray) {const current = value[0];arrais.set(prop, current);}_validator(value);map[prop] = _deepPath(schema, prop);props += `"${prop}"|`;}return value;
});

此时,map 里收集所有属性的访问路径。同时生成的props可以拼接为匹配相应类型字符串的正则表达式,例如我们这个例子里的正则表达式为/"name"|"status"|"working"|"(string|number|boolean|undef)"|\\[(.*?)\\]/

然后,根据正则表达式来顺序匹配这些属性,替换掉属性类型的字符串,换成统一的占位字符串"__par__",并基于"__par__"拆分字符串:

const queue = [];
const chunks = str.replace(regex, (type) => {switch (type) {case '"string"':case '"undefined"':return '"__par__"';case '"number"':case '"boolean"':case '["array-simple"]':case '[null]':return '__par__';default:const prop = type.match(/(?<=\").+?(?=\")/)[0];queue.push(prop);return type;}}).split('__par__');

这样你就会得到chunksprops两个数组。chunks里包含了被分割的 JSON 字符串。以例子来说,两个数组分别如下

// chunks
['{"name":"','","status":"','","working":"','"}'
]// props
['name','status','working'
]

最后,由于 map 中保存了属性名与访问路径的映射,因此可以根据 prop 访问到对象中某个属性的值,循环遍历数组,将其与对应的 chunks 拼接即可。

从代码量和实现方式来看,这个方案会更轻便与巧妙,同时也不需要通过 Function、eval 等方式动态生成或执行函数。

4. 总结

虽然不同库的实现有差异,但从整体思路上来说,实现高性能 stringify 的方式都是一样的:

  1. 开发者定义 Object 的 JSON scheme;

  2. stringify 库根据 scheme 生成对应的模版方法,模版方法里会对属性与值进行字符串拼接(显然,属性访问与字符串拼接的效率要高多了);

  3. 最后开发者调用返回的方法来 stringify Object 即可。

归根到底,它本质上是通过静态的结构信息将优化与分析前置了。

Tips

最后,还是想提一下

  • 所有的 benchmark 只能作为一个参考,具体是否有性能提升、提升多少还是建议你在实际的业务中测试;

  • fast-json-stringify 中使用到了 Function 构造函数,因此建议不要将用户输入直接用作 scheme,以防一些安全问题。

Node 社群我组建了一个氛围特别好的 Node.js 社群,里面有很多 Node.js小伙伴,如果你对Node.js学习感兴趣的话(后续有计划也可以),我们可以一起进行Node.js相关的交流、学习、共建。下方加 考拉 好友回复「Node」即可。如果你觉得这篇内容对你有帮助,我想请你帮我2个小忙:1. 点个「在看」,让更多人也能看到这篇文章2. 订阅官方博客 www.inode.club 让我们一起成长点赞和在看就是最大的支持❤️

参考资料

[1]

https://github.com/fastify/fast-json-stringify#benchmarks: https://github.com/fastify/fast-json-stringify#benchmarks

[2]

http://json-schema.org/latest/json-schema-validation.html: http://json-schema.org/latest/json-schema-validation.html

[3]

https://ajv.js.org/: https://ajv.js.org/

[4]

https://developer.mozilla.org/zh-CN/docs/Web/JavaScript/Reference/Global_Objects/Function: https://developer.mozilla.org/zh-CN/docs/Web/JavaScript/Reference/Global_Objects/Function

[5]

https://github.com/lucagez/slow-json-stringify: https://github.com/lucagez/slow-json-stringify

[6]

https://github.com/lucagez/slow-json-stringify/blob/master/benchmark.md: https://github.com/lucagez/slow-json-stringify/blob/master/benchmark.md

你知道如何提升JSON.stringify()的性能吗?相关推荐

  1. [js] 如何提升JSON.stringify的性能

    [js] 如何提升JSON.stringify的性能 用第二个参数指定需要转换的属性,按需转换 个人简介 我是歌谣,欢迎和大家一起交流前后端知识.放弃很容易, 但坚持一定很酷.欢迎大家一起讨论 主目录 ...

  2. 【Immutable】拷贝与JSON.parse(JSON.stringify()),深度比较相等与underscore.isEqual(),性能比较...

    样本:1MB的JSON文件,引入后生成500份的一个数组: 结果如下: 拷贝性能: JSON.parse(JSON.stringify()) 的方法:2523.55517578125ms immuta ...

  3. JSON.stringify() / JSON.parse() / JSON 真是个好东西

    目录 1. JSON 基本概念 1.1 JavaScript 对象表示法 1.2 JSON 文件 1.3 JSON 语法 2. XML VS JSON 2.1 共同点 2.2 不同点 2.3 使用步骤 ...

  4. php json.parse,JSON.parse()与JSON.stringify()和eval()使用方法详解

    这次给大家带来JSON.parse()与JSON.stringify()和eval()使用方法详解,JSON.parse()与JSON.stringify()和eval()使用的注意事项有哪些,下面就 ...

  5. JSON.parse()、JSON.stringify()和eval()的作用

    浅谈JSON.parse().JSON.stringify()和eval()的作用 相信大家对于JSON应该不陌生,度娘对这个名词的解释大致如下: "JSON(JavaScript Obje ...

  6. Python爬虫多线程提升数据下载的性能优化

    Pyhton爬虫多线程提升数据下载的性能优化 很幸运地上了两次Tony老师关于python爬虫的课(收获巨多),在这里我对第一次课做一下知识总结: 1.什么是爬虫? 自动从网络上进行数据采集的程序 一 ...

  7. 【面试题】JSON.stringify 和fast-json-stringify有什么区别

    前言 相信大家对JSON.stringify并不陌生,通常在很多场景下都会用到这个API,最常见的就是HTTP请求中的数据传输, 因为HTTP 协议是一个文本协议,传输的格式都是字符串,但我们在代码中 ...

  8. JSON.stringify()

    写在前边 不言而喻,JSON.stringify() 是用来将合法的JSON数据字符串化的!然而在正常的工作中我们用到的只是最基础的功能:今天我们就探索不一样的JSON.stringify(). 基础 ...

  9. 提升Web应用程序性能的最佳实践

    2019独角兽企业重金招聘Python工程师标准>>> 导读:作为开发人员,Web页面加载或刷新的速度对其网站至关重要.在浏览器中调整性能问题比在Java应用程 序中更难.开发人员在 ...

  10. 提升深度学习模型性能及网络调参

    提升深度学习模型性能及网络调参 https://www.toutiao.com/a6637086018950398472/ 图像处理与机器视觉 2018-12-25 10:42:00 深度学习有很多的 ...

最新文章

  1. apt Could not get lock /var/lib/dpkg/lock 解决方案
  2. 【资讯】人工智能专业职称来了,快来看看你够不够申请资格!
  3. 全球独家 | 赋予企业级开源无限可能,阿里云首发云数据库MongoDB 4.2版本
  4. php csrf攻击 xss区别,XSS与CSRF攻击及防御方法
  5. 官网python安装教程_Python安装教程
  6. element-ui 组件库 el-form 实现
  7. [渝粤教育] 西南科技大学 管理信息系统 在线考试复习资料(2)
  8. Pandas系列(八)字符串处理
  9. 调试网页PAIP HTML的调试与分析工具
  10. 基于Web的SQL Server管理工具(SQL Server Web Tools )
  11. python笔记-动态类型
  12. 计算机操作系统课后习题答案(第四版 汤小丹等著)
  13. 《深入浅出WPF》——命令学习
  14. 4种方法解决鼠标反应慢(迟钝)
  15. python统计汉字和标点_Python处理中文标点符号大集合
  16. PS制作火焰文字特效
  17. 【网络工程】什么是7类网线7类线与超6类线的区别以及它的应用场景
  18. 关于架构师:角色、能力和挑战
  19. 微信网页授权登录demo
  20. 发光二极管之—工作原理图解分析

热门文章

  1. Android小程序白屏,微信小程序web-view跳转h5 安卓白屏
  2. 数字集成电路与系统设计基础知识
  3. 系统地介绍计算材料科学的发展现状、主要理论框架和设计实践方法,汪林望博士作序《计算材料学——设计与实践方法(第2版)》
  4. RS232,RS485 标准DB9接口(串口通信线标准接口)
  5. DLL注入之修改PE静态注入
  6. Oracle数据库中的数据类型
  7. 0-1背包问题-c语言实现
  8. Guava guava-18.0.jar下载
  9. Silverlight常见问题解决方法
  10. editplus html格式化,Editplus 格式化js,css,html工具