c++字符集之间转换(UTF-8,UNICODE,Gb2312)
2019独角兽企业重金招聘Python工程师标准>>>
UTF-8: 3字节一个字符
UNICODE: 2字节一个字符
GB2312: 1字节一个字符
例子:
“你”字的UTF-8编码: E4 BD A0 11100100 10111101 10100000
“你”的Unicode编码: 4F 60 01001111 01100000
按照UTF-8的编码规则,分解如下:xxxx0100 xx111101 xx100000,把除了x之外的数字拼接在一起,就变成“你”的Unicode编码了。
注意UTF-8的最前面3个1,表示整个UTF-8串是由3个字节构成的。
经过UTF-8编码之后,再也不会出现敏感字符了,因为最高位始终为1。
类定义
class CChineseCode{
public:static void UTF_8ToUnicode(wchar_t* pOut,char *pText); // 把UTF-8转换成Unicodestatic void UnicodeToUTF_8(char* pOut,wchar_t* pText); //Unicode 转换成UTF-8static void UnicodeToGB2312(char* pOut,wchar_t uData); // 把Unicode 转换成 GB2312 static void Gb2312ToUnicode(wchar_t* pOut,char *gbBuffer);// GB2312 转换成 Unicodestatic void GB2312ToUTF_8(string& pOut,char *pText, int pLen);//GB2312 转为 UTF-8static void UTF_8ToGB2312(string &pOut, char *pText, int pLen);//UTF-8 转为 GB2312
};//类实现
void CChineseCode::UTF_8ToUnicode(wchar_t* pOut,char *pText){char* uchar = (char *)pOut;uchar[1] = ((pText[0] & 0x0F) << 4) + ((pText[1] >> 2) & 0x0F);uchar[0] = ((pText[1] & 0x03) << 6) + (pText[2] & 0x3F);return;
}void CChineseCode::UnicodeToUTF_8(char* pOut,wchar_t* pText){// 注意 WCHAR高低字的顺序,低字节在前,高字节在后char* pchar = (char *)pText;pOut[0] = (0xE0 | ((pchar[1] & 0xF0) >> 4));pOut[1] = (0x80 | ((pchar[1] & 0x0F) << 2)) + ((pchar[0] & 0xC0) >> 6);pOut[2] = (0x80 | (pchar[0] & 0x3F));return;
}void CChineseCode::UnicodeToGB2312(char* pOut,wchar_t uData){WideCharToMultiByte(CP_ACP,NULL,&uData,1,pOut,sizeof(wchar_t),NULL,NULL);return;
} void CChineseCode::Gb2312ToUnicode(wchar_t* pOut,char *gbBuffer){::MultiByteToWideChar(CP_ACP,MB_PRECOMPOSED,gbBuffer,2,pOut,1);return ;
}void CChineseCode::GB2312ToUTF_8(string& pOut,char *pText, int pLen){char buf[4];int nLength = pLen* 3;char* rst = new char[nLength];memset(buf,0,4);memset(rst,0,nLength);int i = 0;int j = 0; while(i < pLen){//如果是英文直接复制就能if( *(pText + i) >= 0){rst[j++] = pText[i++]; }else{wchar_t pbuffer;Gb2312ToUnicode(&pbuffer,pText+i);UnicodeToUTF_8(buf,&pbuffer);unsigned short int tmp = 0;tmp = rst[j] = buf[0];tmp = rst[j+1] = buf[1];tmp = rst[j+2] = buf[2]; j += 3;i += 2;}}rst[j] = ’’;//返回结果pOut = rst; delete []rst; return;
}void CChineseCode::UTF_8ToGB2312(string &pOut, char *pText, int pLen){char * newBuf = new char[pLen];char Ctemp[4];memset(Ctemp,0,4);int i =0;int j = 0;while(i < pLen){//if(pText > 0){if( *(pText + i) >= 0){ newBuf[j++] = pText[i++]; }else{WCHAR Wtemp;UTF_8ToUnicode(&Wtemp,pText + i);UnicodeToGB2312(Ctemp,Wtemp);newBuf[j] = Ctemp[0];newBuf[j + 1] = Ctemp[1];i += 3; j += 2; }}newBuf[j] = ’’;pOut = newBuf;delete []newBuf;return;
}
转载于:https://my.oschina.net/u/1426828/blog/552383
c++字符集之间转换(UTF-8,UNICODE,Gb2312)相关推荐
- linux unicode 转换工具,字符集之间转换(UTF-8,UNICODE,Gb2312)
特搜集了UTF-8,UNICODE,Gb2312他们3个之间的相互转换. UTF-8: 3字节一个字符 UNICODE: 2字节一个字符 GB2312: 1字节一个字符 例子: "你& ...
- 字符集之间转换(UTF-8,UNICODE,Gb2312) c++
UTF-8: 3字节一个字符 UNICODE: 2字节一个字符 GB2312: 1字节一个字符 例子: "你"字的UTF-8编码: E4 BD A0 11100100 101 ...
- 几种 中文字符集编码规范的关系Unicode ,gb2312 , cp936 ,GBK,GB18030
转自 https://www.cnblogs.com/finallyliuyu/archive/2013/05/10/3071023.html 概要: UTF-8的一个特别的好处是它与ISO- 885 ...
- 转载 中文字符集编码Unicode ,gb2312 , cp936 ,GBK,GB18030
转自: http://www.blog.edu.cn/user3/flyingcs/archives/2006/1418577.shtml 概要:UTF-8的一个特别的好处是它与ISO- 8859-1 ...
- java字符集转换 Big5 和 Unicode互转
完整的代码如下 帮助 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 ...
- UTF、Unicode、ASCII及中文编码
一.Unicode缘起 Unicode是一种字符编码规范 . 1.国际标准ASCII编码 先从ASCII说起.ASCII是用来表示英文字符的一种编码规范,每个ASCII字符占用1个字节(8bits) ...
- Qt QString 中文 char* UTF-8 QByteArray QTextCodec unicode gb2312 GBK 乱码与转码问题
代码如下:如果不不设全局的字符集是utf-8,那么网上一般的方法是可以转的.如下程序中 #define DD 1的情况下:但是如果设置了全局的utf-8,再用以前的方法: QByteArray ba= ...
- char qt 转unicode_Qt QString 中文 char* UTF-8 QByteArray QTextCodec unicode gb2312 GBK 乱码与转码问题...
2012-03-22 14:00 175人阅读 评论(0) 代码如下:如果不不设全局的字符集是utf-8,那么网上一般的方法是可以转的.如下程序中 #define DD 1的情况下:但是如果设置了全局 ...
- oracle817字符集,Oracle817 版本 不同字符集之间的数据库导入
Oracle817 版本 不同字符集之间的数据库导入 由于业务原因,需要将一英文字符集(American_America.WE8ISO8859P1)的数据库DMP文件导入到一中文字符集(SIM ...
最新文章
- 修改framework后重新刷入手机
- 014 怪物过滤的设计和实现
- 用python念数字_Python-数据类型之数字
- 5. OD-把限制的功能恢复,把阉割的功能添加(未注册版本,部分功能不可使用的修改)
- 洛谷 P1028 数的计算【递推】
- 使用ajax的时候必须要加的几行代码
- uushare.com 增加了小组(群)功能
- scala trait 另一种用法类混入
- 福禄克OptiFiber® Pro OTDR光线测试仪
- toastr 在js中的用法
- 专利写作规范及如何写一篇专利
- Windows安装--拼音分词器
- 【赛后总结】第十三届服务外包创新创业大赛总结——A14
- 在拥有vin码识别的时代,您还在傻乎乎手工录入吗?
- 弘辽科技:淘宝店铺转化率变差教你快速排查
- 想要认认真真的夯实基础知识了
- 仿支付宝钱包:带分割线的GridView
- iview upload组件手动控制上传,excel表格导入
- Android网易新闻评论盖楼效果的实现
- java.io.IOException: Response data error, expect Throwable, but get null
热门文章
- python 装饰器 继承_Python设计模式之装饰器模式
- java servlet 3_java – Servlet 2.5和3之间有什么区别?
- python3 image_python3 ImageTk 安装方法
- vue怎么让接口带上cookie_在Vue中如何使用Cookie操作实例
- jquery ajax php中 css样式不显示,Chrome浏览器在Ajax同步调用之前不会显示Jquery的动态css Propery更改...
- php 关闭电脑,php实现用手机关闭计算机(电脑)的方法
- MyBatis嵌套查询解析
- 互联网晚报 | 3月24日 星期四 |​ ​国务院安委办:立即开展民航安全隐患排查;​新东方新公司经营范围含电竞赛事策划...
- B端产品经理,应从哪些方面理解业务?
- 2021快手电商数据报告