快速理解编码，unicode与utf-8

1.为什么编码，因为cpu只认识数字
2.ASCII 一个字符共占7位，用一个字节表示，共128个字符
3.那么ASCII浪费了最高位多可惜，出现了
ISO-8859-1，一个字节，256个字符，很多协议的默认编码
4.中文编码
GB2132 两个字节，大陆使用，表示约6k个字符
BIG5 两个字节，繁体字编码标准，共表示1.3w个字符
GBK 扩展了GB2132,能表示2w个汉字，不兼容BIG5

Unicode
又称万国码，源于一个组织，一共有两个组织，都是为了构建出一种能表示地球所有字符的编码，其中一个就是unicode，unicode是准确说是一个字符表，每个字符对应一个数字，称为码点，兼容ACSII，即a对应数字96，目前来说16位长度还未占满，所以有人说unicode字符占两个字节，这绝对是一种误解，unicode只是定义了哪个字符对应哪个数字，就这么简单。

java与unicode
java中为了存储字符时统一映射关系，存储与编码无关的unicode码点，不然一会存一个gbk字符，又来一个big5字符，连打印字符串都有问题了。

utf
那么unicode只是定义映射关系的话，具体怎么存储，用几个字节存呢
目前有ucs和utf两种思路。
utf-8 因为节省流量，互联网用的较多
用1,2,3,4个字节存储一个字符，通常来说英文字符一个字节，汉子三个字节
具体格式参考链接
uft16与bom
采用2.4字节存储，那么为了区分高字节在前还是在后，就需要在字节流前加特殊的BOM字节表示，utf8不需要bom，只是微软有这个习惯。

更加详细的描述推荐　　https://www.cnblogs.com/leesf456/p/5317574.html

转载于:https://www.cnblogs.com/lshao/p/9738041.html

快速理解编码，unicode与utf-8相关推荐

Unicode、UTF 和 ISO-8859-1等编码方式详解与浏览器URL编码
将字符转换为二进制码的过程,我们称为编码,将二进制码转换为字符的过程,我们称为解码. 编码和解码时所采用的规则,我们称为字符集常见的字符集: ASCII - 美国人编码,使用7位来对美国常用的字符进 ...
各种编码UNICODE、UTF-8、ANSI、ASCII、GB2312、GBK详解
GBK,ISO-8859-1,GB2312的本质区别编码有几种 ,计算机最初是在美国等国家发明的所以表示字符只有简单的几个字母只要对字母进行编码就好我们标准码 iso-8859-1 这就是一个标 ...
python爬虫入门教程--快速理解HTTP协议（一）
http协议是互联网里面最重要,最基础的协议之一,我们的爬虫需要经常和http协议打交道.下面这篇文章主要给大家介绍了关于python爬虫入门之快速理解HTTP协议的相关资料,文中介绍的非常详细,需要 ...
快速理解ASP.NET Core的认证与授权
ASP.NET Core的认证与授权已经不是什么新鲜事了,微软官方的文档对于如何在ASP.NET Core中实现认证与授权有着非常详细深入的介绍.但有时候在开发过程中,我们也往往会感觉无从下手,或者由 ...
ASCII Unicode GBK UTF的联系
快下班时,爱问问题的小朋友Nico又问了一个问题: "sqlserver里面有char和nchar,那个n据说是指unicode的数据,这个是什么意思." 并不是所有简单的问题都很 ...
字符集和编码 UNICODE、ANSI、UTF-8、GB2312 都是什么鬼
这是我在网上看到的一篇通俗易懂的教程,但是无法找到原作者的署名,故直接搬过来了不是本人所作,特此声明快下班时,爱问问题的小朋友Nico又问了一个问题: "sqlserver里面有char ...
字符编码 unicode 及其在javascript 中的使用
一.javascript 使用 unicode16 字符集,可以使用中文变量名和函数名计算机使用 8 位(bit)二进制表示一个字节(Byte),计算机内存最小寻址单位就是 1 字节. 早期为了在计 ...
编码 unicode 及其在 javascript 中的使用
编码 unicode 及其在 javascript 中的使用一.javascript 使用 unicode16 字符集,可以使用中文变量名和函数名计算机使用 8 位(bit)二进制表示一个字节(B ...
引用字库编码Unicode相关知识
引用 weifeng.shen 的字库编码Unicode相关知识 1. 各地编码首先说明一下现在常用的一些编码方案: 1. 在中国,大陆最常用的就是GBK18030编码, ...

快速理解编码，unicode与utf-8

快速理解编码，unicode与utf-8相关推荐

最新文章

热门文章