python中文乱码 def decode-python处理一些乱码的中文文本时decode('utf-8')报错的处理...

用python写脚本时，遇到处理中文（乱码的中文）时，用decode("utf-8")会发现始终会报错

>>> txt_from = open("/home/love/ex130705.log")

>>> txt_from_iter= iter(txt_from)

>>> txt_proc = txt_from_iter.next().decode("utf-8", "ignore")

Traceback (most recent call last):

File "/tmp/py4049kjX", line 41, in

txt_proc = txt_from_iter.next().decode("utf-8")

File "/usr/lib/python2.7/encodings/utf_8.py", line 16, in decode

return codecs.utf_8_decode(input, errors, True)

UnicodeDecodeError: "utf8" codec can"t decode bytes in position 84-85: invalid continuation byte

欲处理的原文件中部分显示为乱码：

2013-07-05 04:20:10 192.168.1.5 GET /Portals/0/鏁欒偛淇℃伅鏂囦欢澶校园 80 - 25.XXX.10.99 Mozilla/4.0+(compatible;+MSIE+8.0;+Windows+NT+5.1;+Trident/4.0;+Alexa+Toolbar) 404 0 2 234

2013-07-05 04:20:24 192.168.1.5 GET /Portals/0/鏁欒偛淇℃伅鏂囦欢澶校园 80 - 25.XXX.10.99 Mozilla/4.0+(compatible;+MSIE+8.0;+Windows+NT+5.1;+Trident/4.0;+Alexa+Toolbar) 404 0 2 296

这些显示乱码的中文字符是IIS在记录日志过程中出现的。python通过decode("utf-8")解码为UTF-8时会抛出异常UnicodeDecodeError。

解决：用 decode("utf-8", "ignore")

>>>

>>> txt_proc = txt_from_iter.next().decode("utf-8", "ignore")

>>>

查看decode的帮助：

help("".decode)

decode(...)

S.decode([encoding[,errors]]) -> object

Decodes S using the codec registered for encoding. encoding defaults

to the default encoding. errors may be given to set a different error

handling scheme. Default is "strict" meaning that encoding errors raise

a UnicodeDecodeError. Other possible values are "ignore" and "replace"

as well as any other name registered with codecs.register_error that is

able to handle UnicodeDecodeErrors.

python中文乱码 def decode-python处理一些乱码的中文文本时decode('utf-8')报错的处理...相关推荐

python导入类有红线_python踩坑系列之导入包时下划红线及报错“No module named”问题...
python踩坑系列之导入包时下划红线及报错"No module named"问题使用pycharm编写Python时,自己写了一个包(commontool),在同级另一个路径下 ...
python代码下出现红线_python踩坑系列之导入包时下划红线及报错“No module named”问题...
python踩坑系列之导入包时下划红线及报错"No module named"问题使用pycharm编写Python时,自己写了一个包(commontool),在同级另一个路径下 ...
python pip下载本地依赖包，并在离线环境中安装，并解决报错ERROR: Could not find a version that satisfies the requirement报错
文章目录步骤1:导出依赖步骤2:离线下载依赖包步骤3:进入新环境使用python安装依赖整体思路如下: 首先根据项目需要导出依赖包,由于本地的python环境中其实安装了很多乱七八糟的包,这些 ...
python处理一些乱码的中文文本时decode('utf-8')报错的处理
2019独角兽企业重金招聘Python工程师标准>>> 用python写脚本时,遇到处理中文(乱码的中文)时,用decode('utf-8')会发现始终会报错 >>> ...
utf-8 python 乱码prinnt u_python处理一些乱码的中文文本时decode('utf-8')报错的处理
用python写脚本时,遇到处理中文(乱码的中文)时,用decode('utf-8')会发现始终会报错 >>> txt_from = open('/home/love/ex13070 ...
python 获取你电脑纯文本文档内容！解决IndentationError: expected an indented block报错！
1,Windows+R启动:运行 2,输入:cmd 回车打开! 3,输入python(假设你已经安装过了python) 里面还会出现版本号! 4,输入代码: 注意:如果空格缩进不对,会报错的! 比如: ...
解决Python使用matplotlib绘图时出现的中文标签报错问题
Python中使用matplotlib绘图时发现控制台报如下问题,可知是中文字体问题解决方案只需设置下参数即可,设置代码如下 import matplotlib.pyplot as pltplt. ...
python3.7怎么使用arcpy_从Python到空间分析Arcpy｜1.3.7 神啊！救救我之如何处理报错...
今天讲的是关键时候不卡壳的技能,尤其是循环语句中和数据清洗中,先假设一种情况,领导安排你把,某机构给你们的坐标x和y数据列表中的每个元素的x偏移3个单位,假设你现在已经可以掌握相关的内容了,心里想太e ...
python之bug0：selenium使用新版edge（chrome内核) 导致的webdriver.Edge 运行报错
1.报错 2.前提 1.edge版本87.0.664.75 2.对应版本的驱动已经下载好msedgedriver.exe 3.msedgedriver.exe已经放置在相应的python的script ...

python中文乱码 def decode-python处理一些乱码的中文文本时decode('utf-8')报错的处理...

python中文乱码 def decode-python处理一些乱码的中文文本时decode('utf-8')报错的处理...相关推荐

最新文章

热门文章