爬虫乱码问题（中文乱码）

###源代码

import requests
from bs4 import BeautifulSoupres = requests.get("https://www.autohome.com.cn/news/",)soup=BeautifulSoup(res.text,'lxml')
ul=soup.find(class_="article")
print(ul)

乱码情况为：

ÈÕÇ°£¬ÓÐ¹úÄÚÃ½Ìå±¨µÀ³Æ£¬±ÈÑÇµÏ¹Ù·½ÔÚ½ÓÊÜ²É·ÃÊ±±íÊ¾£¬Æä¼Æ»®µ½2025ÄêÔÚÈÕ±¾¿ªÉè100¼Òµç¶¯Æû³µÏúÊÛÃÅµê£¬µ«Ä¿Ç°²¢Ã»ÓÐÔÚÈÕ±¾½¨³§.

解决方法：(将文本先拿出，进行重新编码，在放入bs4soup中)

res = requests.get("https://www.autohome.com.cn/news/",)
#'iso-8859-1为浏览器默认的字符编码Html=res.text.encode('iso-8859-1').decode('gbk')#对编码格式为gbk方式读取
# 实例化soup对象
soup = BeautifulSoup(Html, 'lxml')

爬虫乱码问题（中文乱码）相关推荐

彻底解决网络爬虫遇到的中文乱码问题
你是否遇到过下面的情况: 作为爬虫新手好不容易写了一个爬虫结果爬出来的数据中文数据乱码导致不能使用如图: 其实很好解决: 如果你是使用的request模块得到的相应对象则可以如下设置: 主要由两种情 ...
爬虫学习----解决中文乱码
一.字符编码在编程的过程中,我们会遇到中文乱码的问题.要解决中文乱码我们就要了解计算机的字符编码,计算机有很多编码方式,因为计算机只能处理数字,因为处理文本的话,就必须先转化为数字.最早的时候计算机 ...
创新实训-python爬虫多线程|解决中文乱码问题|卡片向上浮动效果|图文切换
创新实训-python爬虫多线程|乱码问题|前端样式重新修改考完毛概,把上周的工作总结一下.爬虫在第一周的时候只爬了一个就业指导这一个模块,这一次又加了招聘服务模块,所以就用了两个线程.前端首页一开 ...
Node爬虫GBK网页中文乱码
今天跟第三方对接一个接口.接口非常简单,get请求,参数也简单,返回是json,用postman调了一下,很顺利,返回正常.于是三下五除二把代码写完.上线前,测试一下.不测不知道,一测吓一跳,竟然乱码 ...
tomcat mysql 中文乱码_tomcat 中文乱码, mysql 中文乱码_MySQL
Tomcat tomcat中文乱码 get 请求. 修改server.xml中的添加URIEncoding='UTF-8' tomcat中文乱码 post 版另外HttpURLConnection上 ...
java 空格乱码_java 中文乱码以及空格乱码解决方案总结
当使用response.write返回JSON数据到前端时,需要在前面加上这句 response.ContentType = "text/html;charset=gb2312"; ...
jsp mysql中文乱码,jsp中文乱码 jsp mysql 乱码的解决方法
jsp中文乱码 jsp mysql 乱码的解决方法 jsp中文乱码 jsp mysql 乱码要servlet里面支持中文的方法: 在dopost或者doget的第一句加上: request.setCh ...
java中文乱码decode_Java中文乱码处理
java编码转换过程我们总是用一个java类文件和用户进行最直接的交互(输入.输出),这些交互内容包含的文字可能会包含中文.无论这些java类是与数据库交互,还是与前端页面交互,他们的生命周期总是这 ...
中文乱码java_JAVA中文乱码问题应该怎么解决？
大家好,我是Dodo团队的娇娇. 最近工作中遇到中文乱码的问题,这里做下记录,同时也跟大家分享下. 这篇文章是以以下这种方式展开的,先提出问题,列出解决方案,最后再寻找原理. 第一,先讲出我在工作中遇 ...
debian mysql中文乱码_MySQL中文乱码的解决方法汇总
当我们用PHP往MySQL数据库里插入中文时,一旦出现????乱码,很多同学就抓狂了,身为中国人,你却把中文汉字变成乱码,那我可不答应,于是乎我们就开始奔波于个大论坛发帖求助.... 对于MySQL中 ...

爬虫乱码问题（中文乱码）

爬虫乱码问题（中文乱码）相关推荐

最新文章

热门文章