使用python爬取百度今日热点事件排行榜

#目标url：https://item.jd.com/100002019841.html
#爬取百度今日热点事件排行榜
#今天时间短，爬个小玩意import requests  #自动爬去html页面，自动请求网络提交
from bs4 import BeautifulSoup   #解析HTML/XMl页面，提取数据或信息url = 'http://top.baidu.com/buzz?b=341&c=513&fr=topbuzz_b1'
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36'}
urls = requests.get(url, headers=headers)
urls.encoding = urls.apparent_encoding
text = urls.text
soup = BeautifulSoup(text, 'lxml') #网页解析器"""
#爬取标题
for i in soup.find_all(class_="list-title"):print(i.get_text())
"""
a = soup.find_all(class_="list-title")
aa = [i.get_text() for i in a]"""
#搜索指数
for i in soup.find_all('td', class_="last"):print(i.get_text().strip())
"""
q = soup.find_all('td', class_="last")
qq = [i.get_text().strip() for i in q]#将一个一个功能找出来之后，将他们合并在一起
print('{:25}\t{}'.format('标题', '搜索指数'))
for i,y in zip(aa,qq):print('{:20}\t{}\n'.format(i,y))

运行结果：

使用python爬取百度今日热点事件排行榜相关推荐

利用Python对百度今日热点事件排行榜关键词的爬取
百度今日热点事件排行榜URL:今日热点事件排行榜代码: #CrawBaiduTop.py import requests from bs4 import BeautifulSoup import b ...
python爬取热门新闻每日排行_用python查看百度搜索中今日热点事件排行榜
大家好,我是咿哑呀.我们知道,在百度搜索中,查看今日热点事件排行榜时,可以打开网址"http://top.baidu.com/buzz?b=341&c=513&fr=topb ...
python爬百度翻译-Python爬取百度翻译（利用json提取数据）
本篇文章给大家带来的内容是关于Python爬取百度翻译(利用json提取数据),有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助. 工具:Python 3.6.5.PyCharm开发工具. ...
python爬取百度使用kw关键字爬取时出现，百度安全验证，解决方法
python爬取百度使用kw关键字爬取时出现,百度安全验证,解决方法之前爬取百度用kw时的代码(没有任何问题) import requestsurl = 'http://www.baidu.com/ ...
python爬取百度贴吧图片库_python爬取百度贴吧的图片2
今天看了一下beautifulsoup库的用法,把昨天的python爬取百度贴吧的图片1的代码更新成使用beautifulsoup库的函数来实现.用的还是不太熟练,但是感觉比正则表达式写起来容易了一些 ...
python爬取百度搜索_使用Python + requests爬取百度搜索页面
想学一下怎样用python爬取百度搜索页面,因为是第一次接触爬虫,遇到一些问题,把解决过程与大家分享一下 1.使用requests爬取网页首先爬取百度主页www.baidu.com import r ...
Python爬取百度翻译及有道翻译
Python爬取百度翻译及网易有道翻译百度翻译一.简介明确翻译链接,百度翻译链接:https://fanyi.baidu.com/,但是该链接不能为我们提供翻译的内容,此时需要在chrome浏览 ...
【Python】python爬取百度云网盘资源-源码
今天测试用了一下python爬取百度云网盘资源. 标签: <无> 代码片段 [代码][Python]代码 import urllib import urllib.request impor ...
python爬取百度在线语音合成的音频
python爬取百度在线语音合成 URL:https://ai.baidu.com/tech/speech/tts_online 抓包 api从这里抓包,用的post请求,返回的是base64文件格式 ...
python爬取百度云网盘资源-源码
今天测试用了一下python爬取百度云网盘资源. 代码片段 import urllib import urllib.request import webbrowser import re def yu ...

使用python爬取百度今日热点事件排行榜

使用python爬取百度今日热点事件排行榜相关推荐

最新文章

热门文章