在输出内容时，出现如下图的情况：

解决爬虫中文乱码的步骤网址编码为gbk

查看网页源代码的head部分的编码：
<meta http-equiv="Content-Type" content="text/html; charset=gb2312">，发现网页编码为gbk类型
利用requests库的方法查看默认输出的编码类型

import requestsurl = 'https://chengdu.chashebao.com/yanglao/19077.html'response = requests.get(url)
print(response.encoding)

输出结果为编码ISO-8859-1，并不是原网页的编码类型。

3. 利用requests库改变输出结果的编码

import requestsurl = 'https://chengdu.chashebao.com/yanglao/19077.html'response = requests.get(url)
response.encoding = 'gbk'
print(response.encoding)

输出结果为编码gbk，与原网页保持一致。

基于以上三个步骤，即可解决爬虫中文乱码问题。

代码

import requestsdef get_html(url):try:response = requests.get(url)response.encoding = 'gbk'  # 改变编码print(response.encoding)html = response.textreturn htmlexcept:print('请求网址出错')url = 'https://chengdu.chashebao.com/yanglao/19077.html'
html = get_html(url)
print(html)

效果展示如下图所示：

解决爬虫中文乱码的步骤网址编码为utf-8

对于有些网页编码为utf-8的网址，输出事发现中文为乱码，此时我们需要进行两次重编码。

response = requests.get(url, headers=headers)
response.encoding = 'GBK'
response.encoding = 'utf-8'

解决爬虫中文乱码的步骤网址编码为gb2312

response.encoding = 'GBK'

Python爬虫中文乱码问题（爬虫乱码）相关推荐

在VS2017中用c#编写程序执行python遇到中文不能处理出现乱码的情况
最近在做在.NET平台调用python文件. 使用的工具为IronPython,VS2017 使用的语言为C#,python(2.7) 怎么使用请看这里这篇文章主要是说下遇到的处理中文字符时出现乱码 ...
永久解决python matplotlib 中文字体的显示乱码-Windows系统
在python中使用matplotlib绘图时,新手通常会遇到中文字体无法显示或显示乱码的问题,这是因为matplotlib中默认没有中文字体.windows系统下的永久解决方法如下: 1.确定当前p ...
python爬虫中文乱码_解决Python爬虫处理文件时候中文名称出现乱码问题
当下如果需要批量处理文件,爬虫网页和图片的时候使用Python是最为简单和高效的.但是在处理过程中还是有一些细节问题,比如在爬虫中文名称和处理中文文件URL的时候会出现乱码.实际上就是因为编码的问题. ...
python爬虫中文乱码解决方法
python爬虫中文乱码解决方法参考文章: (1)python爬虫中文乱码解决方法 (2)https://www.cnblogs.com/surecheun/p/9694052.html 备忘一下.
盘点3种Python爬虫中文乱码的处理方法
人生苦短,快学Python! 给大家祭出网络爬虫过程中三种中文乱码的处理方案,希望对大家的学习有所帮助. 前言前几天有个粉丝在Python交流群里问了一道关于使用Python网络爬虫过程中中文乱码的 ...
Python 爬虫中文乱码一文通
如果经常使用Python编程或者是其他语言编程,或者在前面的文章中已经多次使用Python练习网络爬虫技术,就不可避免地会遇到中文乱码的问题.中文乱码问题经常难以理解,或者治标不治本,本文就是来解决这 ...
解决爬虫中文乱码问题
解决爬虫中文乱码问题今天群里有个人反映某个网址爬出来的网页源代码出现中文乱码,我研究了半天,终于找到了解决方法. 一开始,我是这样做的: import requestsurl = 'http://s ...
node.js 爬虫中文乱码处理
爬虫中文乱码可做如下处理 import request from 'superagent'; import cheerio from 'cheerio';//类似jquery写法 const Icon ...
python爬虫的数据如何解决乱码_写爬虫时如何解决网页乱码问题
实战讲解,文章较长,对爬虫比较熟悉的浏览翻看章节 2.3 获取新闻文本内容. 写爬虫时经常对网址发起请求,结果返回的html数据除了标签能看懂,其他的全部是乱码.大家如果对爬虫感兴趣,请耐心阅读本文, ...

Python爬虫中文乱码问题（爬虫乱码）

解决爬虫中文乱码的步骤网址编码为gbk

代码

解决爬虫中文乱码的步骤网址编码为utf-8

解决爬虫中文乱码的步骤网址编码为gb2312

Python爬虫中文乱码问题（爬虫乱码）相关推荐

最新文章

热门文章

Python爬虫中文乱码问题（爬虫乱码）

解决爬虫中文乱码的步骤 网址编码为gbk

代码

解决爬虫中文乱码的步骤 网址编码为utf-8

解决爬虫中文乱码的步骤 网址编码为gb2312

Python爬虫中文乱码问题（爬虫乱码）相关推荐

最新文章

热门文章

解决爬虫中文乱码的步骤网址编码为gbk

解决爬虫中文乱码的步骤网址编码为utf-8

解决爬虫中文乱码的步骤网址编码为gb2312