什么是TLV存储格式以及为什么Protocol Buffer要比Json和XML传输时要快

这是Protocol Buffer里的一种存储格式，即：Tag（标识） - Lenght（长度） - Value（字节值）

为什么Protocol Buffer会比Json与XML要快呢？就体现在这点上面，在传输过程中Json与XML是直接把原生的字符串给你传输过去了，不做任何编码处理，纯粹就是字符串解析，比如：

在Protocol Buffer中定义一个消息：

message Person {int32 age = 1;
}

仅仅定义一个age的元素，其ID编号为1

然后在用XML定义一个同样的结构元素：

Body{<name>test<name>
}

在发送时XML是以字符形式发送出去的，上面的总字符占用：24个字节，一个字符一个字节，而Protocol Buffer不一样，它会将其转化为：Tag(4字节) - Len(4字节) - Value(4字节)，总共十二个字节，比XML小了一倍，但是Protocol Buffer有个缺点，就是要求两端通讯程序必须使用同一个生成的people.pb.h文件，这个文件里包含了对每个属性访问的接口，会根据Tag和Len来分配对应的大小空间以及放入对应的元素数组里，最终我们定义的age其实最后都只会变成这个数组里的一个ID，同时又大大减少了Name的长度，然后通过映射访问不同的元素，只是生成的访问接口以属性名生成而已。

其实Protocol Buffer就是把更多的时间用在了编码上，因为随着CPU的发展运算能力越来越强了，这点编码过程对于计算机来说是微不足道的的，网络还需要考虑当前网络情况，是否拥堵等等，所以在本地做编码在发送的方法能大大提升传输效率，同时XML格式还会把字符串的分隔符也放入进去，但Protocol Buffer不一样，它的内存非常紧凑，每隔TLV都是相邻的，没有任何分隔符。

同时它还支持Var属性，就是根据你变量的数值来自动来调节你的字节，如age是32，会简化成int8，用1个字节来存储，因为Protocol Buffer认为一个字节就能存储这个值了，不必要浪费空间，这样又提升了传输空间，并且它没有Lenght这个字节，它是用Value字节的最高位来判断是0还是1，如是1则有后续字节，则会继续往后读，如果为0则认为无后续字节。

什么是TLV存储格式以及为什么Protocol Buffer要比Json和XML传输时要快相关推荐

Tensorflow中的Protocol Buffer
Protocol Buffer是谷歌公司开发的处理结构化数据的工具.注意这里介绍的结构化数据和大数据中的结构化数据的概念不同,这里的结构化数据指的是拥有多种属性的数据.比如一个用户:包含名字,ID,和 ...
数据交换格式 - PB(protocol buffer)，xml，json，array
目录 PB PB vs xml PB vs json json json vs xml xml 数组 PB 扩充容易, 二进制序列化简单 ProtocolBuffers-Google's data ...
【C++】Google Protocol Buffer（protobuf）详解（一）
1.简介 Google Protocol Buffer( 简称 Protobuf) 是 Google 公司内部的混合语言数据标准, Protocol Buffers 是一种轻便高效的结构化数据存储格式 ...
Google Protocol Buffer 的使用和原理
FROM : https://www.ibm.com/developerworks/cn/linux/l-cn-gpb/ Google Protocol Buffer 的使用和原理 Protocol ...
快来看看Google出品的Protocol Buffer，别仅仅会用Json和XML了
前言习惯用 Json.XML 数据存储格式的你们,相信大多都没听过Protocol Buffer Protocol Buffer 事实上是 Google出品的一种轻量 & 高效的结构化数据 ...
Hadoop基于Protocol Buffer的RPC实现代码分析-Server端--转载
原文地址:http://yanbohappy.sinaapp.com/?p=110 最新版本的Hadoop代码中已经默认了Protocol buffer(以下简称PB,http://code.goog ...
Golang 使用Protocol Buffer 案例
目录 1. 前言 2. Protobuf 简介 2.1 Protobuf 优点 2.2 Protobuf 缺点 2.3 Protobuf Golang 安装使用 3. Protobuf 通讯案例 3. ...
不仅仅于 Json和XML ，快来学习Google出品的序列化神器Protocol Buffer
前言习惯用 Json.XML 数据存储格式的你们,相信大多都没听过Protocol Buffer Protocol Buffer 其实是 Google出品的一种轻量 & 高效的结构化数据存 ...
Google Protocol Buffer学习笔记(一)
概述: 新公司用的平台和相关技术都与原公司使用的不同,原来是linux+thrift而现在换成了windows+protobuf了. 参考资料: https://developers.google.c ...

什么是TLV存储格式以及为什么Protocol Buffer要比Json和XML传输时要快

什么是TLV存储格式以及为什么Protocol Buffer要比Json和XML传输时要快相关推荐

最新文章

热门文章