2019独角兽企业重金招聘Python工程师标准>>>

  • UTF-8:   3字节一个字符

  • UNICODE: 2字节一个字符

  • GB2312:  1字节一个字符

例子:
“你”字的UTF-8编码: E4 BD A0        11100100 10111101 10100000
“你”的Unicode编码: 4F 60            01001111 01100000

按照UTF-8的编码规则,分解如下:xxxx0100 xx111101 xx100000,把除了x之外的数字拼接在一起,就变成“你”的Unicode编码了。
注意UTF-8的最前面3个1,表示整个UTF-8串是由3个字节构成的。
经过UTF-8编码之后,再也不会出现敏感字符了,因为最高位始终为1。

类定义

class CChineseCode{
public:static void UTF_8ToUnicode(wchar_t* pOut,char *pText);  // 把UTF-8转换成Unicodestatic void UnicodeToUTF_8(char* pOut,wchar_t* pText);  //Unicode 转换成UTF-8static void UnicodeToGB2312(char* pOut,wchar_t uData);  // 把Unicode 转换成 GB2312 static void Gb2312ToUnicode(wchar_t* pOut,char *gbBuffer);// GB2312 转换成 Unicodestatic void GB2312ToUTF_8(string& pOut,char *pText, int pLen);//GB2312 转为 UTF-8static void UTF_8ToGB2312(string &pOut, char *pText, int pLen);//UTF-8 转为 GB2312
};//类实现
void CChineseCode::UTF_8ToUnicode(wchar_t* pOut,char *pText){char* uchar = (char *)pOut;uchar[1] = ((pText[0] & 0x0F) << 4) + ((pText[1] >> 2) & 0x0F);uchar[0] = ((pText[1] & 0x03) << 6) + (pText[2] & 0x3F);return;
}void CChineseCode::UnicodeToUTF_8(char* pOut,wchar_t* pText){// 注意 WCHAR高低字的顺序,低字节在前,高字节在后char* pchar = (char *)pText;pOut[0] = (0xE0 | ((pchar[1] & 0xF0) >> 4));pOut[1] = (0x80 | ((pchar[1] & 0x0F) << 2)) + ((pchar[0] & 0xC0) >> 6);pOut[2] = (0x80 | (pchar[0] & 0x3F));return;
}void CChineseCode::UnicodeToGB2312(char* pOut,wchar_t uData){WideCharToMultiByte(CP_ACP,NULL,&uData,1,pOut,sizeof(wchar_t),NULL,NULL);return;
}     void CChineseCode::Gb2312ToUnicode(wchar_t* pOut,char *gbBuffer){::MultiByteToWideChar(CP_ACP,MB_PRECOMPOSED,gbBuffer,2,pOut,1);return ;
}void CChineseCode::GB2312ToUTF_8(string& pOut,char *pText, int pLen){char buf[4];int nLength = pLen* 3;char* rst = new char[nLength];memset(buf,0,4);memset(rst,0,nLength);int i = 0;int j = 0;      while(i < pLen){//如果是英文直接复制就能if( *(pText + i) >= 0){rst[j++] = pText[i++]; }else{wchar_t pbuffer;Gb2312ToUnicode(&pbuffer,pText+i);UnicodeToUTF_8(buf,&pbuffer);unsigned short int tmp = 0;tmp = rst[j] = buf[0];tmp = rst[j+1] = buf[1];tmp = rst[j+2] = buf[2];    j += 3;i += 2;}}rst[j] = ’’;//返回结果pOut = rst;             delete []rst;     return;
}void CChineseCode::UTF_8ToGB2312(string &pOut, char *pText, int pLen){char * newBuf = new char[pLen];char Ctemp[4];memset(Ctemp,0,4);int i =0;int j = 0;while(i < pLen){//if(pText > 0){if( *(pText + i) >= 0){ newBuf[j++] = pText[i++];                       }else{WCHAR Wtemp;UTF_8ToUnicode(&Wtemp,pText + i);UnicodeToGB2312(Ctemp,Wtemp);newBuf[j] = Ctemp[0];newBuf[j + 1] = Ctemp[1];i += 3;    j += 2;   }}newBuf[j] = ’’;pOut = newBuf;delete []newBuf;return;
}

转载于:https://my.oschina.net/u/1426828/blog/552383

c++字符集之间转换(UTF-8,UNICODE,Gb2312)相关推荐

  1. linux unicode 转换工具,字符集之间转换(UTF-8,UNICODE,Gb2312)

    特搜集了UTF-8,UNICODE,Gb2312他们3个之间的相互转换. UTF-8:   3字节一个字符 UNICODE: 2字节一个字符 GB2312:  1字节一个字符 例子: "你& ...

  2. 字符集之间转换(UTF-8,UNICODE,Gb2312) c++

    UTF-8:   3字节一个字符 UNICODE: 2字节一个字符 GB2312:  1字节一个字符 例子: "你"字的UTF-8编码: E4 BD A0 11100100 101 ...

  3. 几种 中文字符集编码规范的关系Unicode ,gb2312 , cp936 ,GBK,GB18030

    转自 https://www.cnblogs.com/finallyliuyu/archive/2013/05/10/3071023.html 概要: UTF-8的一个特别的好处是它与ISO- 885 ...

  4. 转载 中文字符集编码Unicode ,gb2312 , cp936 ,GBK,GB18030

    转自: http://www.blog.edu.cn/user3/flyingcs/archives/2006/1418577.shtml 概要:UTF-8的一个特别的好处是它与ISO- 8859-1 ...

  5. java字符集转换 Big5 和 Unicode互转

    完整的代码如下 帮助 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 ...

  6. UTF、Unicode、ASCII及中文编码

    一.Unicode缘起 Unicode是一种字符编码规范 . 1.国际标准ASCII编码 先从ASCII说起.ASCII是用来表示英文字符的一种编码规范,每个ASCII字符占用1个字节(8bits)  ...

  7. Qt QString 中文 char* UTF-8 QByteArray QTextCodec unicode gb2312 GBK 乱码与转码问题

    代码如下:如果不不设全局的字符集是utf-8,那么网上一般的方法是可以转的.如下程序中 #define DD 1的情况下:但是如果设置了全局的utf-8,再用以前的方法: QByteArray ba= ...

  8. char qt 转unicode_Qt QString 中文 char* UTF-8 QByteArray QTextCodec unicode gb2312 GBK 乱码与转码问题...

    2012-03-22 14:00 175人阅读 评论(0) 代码如下:如果不不设全局的字符集是utf-8,那么网上一般的方法是可以转的.如下程序中 #define DD 1的情况下:但是如果设置了全局 ...

  9. oracle817字符集,Oracle817 版本 不同字符集之间的数据库导入

    Oracle817   版本   不同字符集之间的数据库导入 由于业务原因,需要将一英文字符集(American_America.WE8ISO8859P1)的数据库DMP文件导入到一中文字符集(SIM ...

最新文章

  1. 修改framework后重新刷入手机
  2. 014 怪物过滤的设计和实现
  3. 用python念数字_Python-数据类型之数字
  4. 5. OD-把限制的功能恢复,把阉割的功能添加(未注册版本,部分功能不可使用的修改)
  5. 洛谷 P1028 数的计算【递推】
  6. 使用ajax的时候必须要加的几行代码
  7. uushare.com 增加了小组(群)功能
  8. scala trait 另一种用法类混入
  9. 福禄克OptiFiber® Pro OTDR光线测试仪
  10. toastr 在js中的用法
  11. 专利写作规范及如何写一篇专利
  12. Windows安装--拼音分词器
  13. 【赛后总结】第十三届服务外包创新创业大赛总结——A14
  14. 在拥有vin码识别的时代,您还在傻乎乎手工录入吗?
  15. 弘辽科技:淘宝店铺转化率变差教你快速排查
  16. 想要认认真真的夯实基础知识了
  17. 仿支付宝钱包:带分割线的GridView
  18. iview upload组件手动控制上传,excel表格导入
  19. Android网易新闻评论盖楼效果的实现
  20. java.io.IOException: Response data error, expect Throwable, but get null

热门文章

  1. python 装饰器 继承_Python设计模式之装饰器模式
  2. java servlet 3_java – Servlet 2.5和3之间有什么区别?
  3. python3 image_python3 ImageTk 安装方法
  4. vue怎么让接口带上cookie_在Vue中如何使用Cookie操作实例
  5. jquery ajax php中 css样式不显示,Chrome浏览器在Ajax同步调用之前不会显示Jquery的动态css Propery更改...
  6. php 关闭电脑,php实现用手机关闭计算机(电脑)的方法
  7. MyBatis嵌套查询解析
  8. 互联网晚报 | 3月24日 星期四 |​ ​国务院安委办:立即开展民航安全隐患排查;​新东方新公司经营范围含电竞赛事策划...
  9. B端产品经理,应从哪些方面理解业务?
  10. 2021快手电商数据报告