mysql utf8 bom_UTF8的BOM

windows下用notepad++写一python脚本 test.py，编码方式为utf8:

f=open("test.py")

line=f.readline()

while line:

print (line,)

line=f.readline()

f.close()

f=open("test.py")

line=f.readline()

whileline:

print(line,)

line=f.readline()

f.close()

执行python test.py出错：

$ python test.py

Traceback (most recent call last):

File "test.py", line 7, in

print (line)

UnicodeEncodeError: 'gbk' codec can't encode character '\ufeff' in position 0: illegal multibyte sequence

$pythontest.py

Traceback(mostrecentcalllast):

File"test.py",line7,in

print(line)

UnicodeEncodeError:'gbk'codeccan't encode character '\ufeff'inposition0:illegalmultibytesequence

原因是编码方式为带bom的UTF8，改成无bom就好了。

关于bom：

UTF- 8编码的文件中，BOM占三个字节。如果用记事本把一个文本文件另存为UTF-8编码方式的话，用UE打开这个文件，切换到十六进制编辑状态就可以看到开头的FFFE了。这是个标识UTF-8编码文件的好办法，软件通过BOM来识别这个文件是否是UTF-8编码，很多软件还要求读入的文件必须带BOM。可是，还是有很多软件不能识别BOM。

上面的报错中的 '\ufeff' 正是带bom的文件开头的 FFFE。

另，改了之后如果文件中有中文一样会报错，这时需要指定以何种编码读取文件：

f=open("test.py",encoding=("utf8"))

Netbeans的报错比较明确：

File ””, line None SyntaxError: Non-ASCII character in file 'D:\NetBeansProjects\NewPythonProject\src\newpythonproject.py', but no encoding declared; see http://www.python.org/peps/pep-0263.html for details

参考：http://afericazebra.blog.163.com/blog/static/30050408201211199298711/

博客能带货吗

mysql utf8 bom_UTF8的BOM相关推荐

mysql去bom头_使用editplus等编程工具时UTF-8编码去掉BOM头方法
Unicode规范中有一个BOM的概念.BOM--Byte Order Mark,就是字节序标记.在这里找到一段关于BOM的说明: 在UCS 编码中有一个叫做"ZERO WIDTH NO-B ...
总结：被MySQL UTF8编码坑的惨痛教训...
点击上方"方志朋",选择"设为星标" 回复"666"获取新整理的面试文章最近遇到几个项目被MySQL的utf8编码坑,想起之前编码问题被坑 ...
Mysql UTF8 varchar与Oracle ZHS16GBK varchar2同长度下存汉字的差异
目录 1简介... 1 2 准备... 1 2.1 环境说明... 1 3 安装... 2 4 配置... 2 5 使用... 3 5.1 验证实验... 3 5.2 问题分析... 5 6 延展.. ...
Mysql 批量更改数据表和字段的字符集（Mysql UTF-8字符集更改为utf8mb4字符集）
相关内容: Mysql utf8 和utf8mb4 的区别记一次Mysql查询字段为空串在java中使用equals不相等的问题由于Mysql的utf8是有缺陷的,不是真正的UTF-8,utf8m ...
Mysql utf8 和utf8mb4 的区别
相关内容: 记一次Mysql查询字段为空串在java中使用equals不相等的问题 Mysql 批量更改数据表和字段的字符集(Mysql UTF-8字符集更改为utf8mb4字符集) 前言我们新建m ...
QT与VS环境下代码文件编码格式使用utf-8与带BOM的utf-8的差异
QT与VS环境下代码文件编码格式使用utf-8与带BOM的utf-8的差异使用QT进行开发的时候,有时候通常会遇到使用中文的时候,就算格式为utf-8,也会出现编译错误的问题,一般无从下手,这几天看 ...
utf-8与带有BOM的utf-8的区别
最近在学习处理的过程中,遇到了需要txt转换为csv文件的需求,第一步当然是另存txt为utf-8的格式,但是博主在保存时,发现了utf-8有两种格式,如下图: 怀着求知欲,我查找了一下两者的区别,现 ...
CSV乱码 - UTF-8 Unicode (with BOM)
Unicode 统一码,也叫万国码.单一码(Unicode)是计算机科学领域里的一项业界标准,包括字符集.编码方案等.Unicode 是为了解决传统的字符编码方案的局限而产生的,它为每种语言中的每个字 ...
mysql utf8转化utf8mb4
mysql utf8转化utf8mb4 (字符集转化,批量更改为utf8mb4) SELECT CONCAT('ALTER TABLE ',TABLE_NAME,' CONVERT TO CHARAC ...
UTF8文件带BOM引起的问题——iOS端竟然加载出了html代码
起因是公司iOS端竟然加载出来了HTML代码,百思不得其解,查文献,原来如此... UTF-8 不需要 BOM,尽管 Unicode 标准允许在 UTF-8 中使用 BOM. 所以不含 BOM 的 U ...

mysql utf8 bom_UTF8的BOM

mysql utf8 bom_UTF8的BOM相关推荐

最新文章

热门文章