Python百度指数抓取一键生成指数信息导出到txt文件，制作可视化动态图表

简介

通过百度指数，以及python的baidux模块和 flourish 制作可视化动态图表，实现数据的可视化。

安装baidux模块

打开pycharm 输入以下命令

pip install baidux

用法

打开百度指数，登录后，找到index.html此条 GET 请求，并复制此条请求 headers 里的 cookies，注意复制完全！使用样例如下：

from baidux.utils import test_cookies
from baidux import config
from baidux import BaiduIndex, ExtendedBaiduIndexcookies = """这里放cookie"""# 测试cookies是否配置正确
# True为配置成功，False为配置不成功
print(test_cookies(cookies))keywords = [['英雄联盟'], ['冠军杯', '英雄联盟'], ['抑郁', '自杀', '明星']]# 获取城市代码, 将代码传入area可以获取不同城市的指数, 不传则为全国
# 媒体指数不能分地区获取
print(config.PROVINCE_CODE)
print(config.CITY_CODE)# 获取百度搜索指数(地区为山东)
baidu_index = BaiduIndex(keywords=keywords,start_date='2018-01-01',end_date='2019-01-01',cookies=cookies,area=901
)
for index in baidu_index.get_index():print(index)# 获取百度媒体指数
news_index = ExtendedBaiduIndex(keywords=keywords,start_date='2018-01-01',end_date='2019-01-01',cookies=cookies,kind='news'
)
for index in news_index.get_index():print(index)# 获取百度咨询指数
feed_index = ExtendedBaiduIndex(keywords=keywords,start_date='2018-01-01',end_date='2019-01-01',cookies=cookies,kind='feed'
)
for index in feed_index.get_index():print(index)

结果

百度搜索指数: {'keyword': ['抑郁', '自杀', '明星'], 'type': 'wise', 'date': '2018-06-10', 'index': '1835'}
百度媒体指数: {'keyword': ['抑郁', '自杀', '明星'], 'date': '2018-12-29', 'index': '0'}
百度咨询指数: {'keyword': ['抑郁', '自杀', '明星'], 'date': '2018-12-29', 'index': '1102911'}

技巧

如需导出txt文件则添加以下代码

class Logger(object):
def __init__(self, filename="Default.log"):self.terminal = sys.stdoutself.log = open(filename, "a")def write(self, message):self.terminal.write(message)self.log.write(message)def flush(self):pass
sys.stdout = Logger('文件名称.txt')
for index in baidu_index.get_index():
print(index)

不限制传入关键词的数量
搜索指数最早的数据日期为2011-01-01
开始时间超过最早的数据日期会导致数据不准确
初始化类时传入area可以查询指定区域的百度指数，默认为全国
有些代码不是特别严谨，有需要请自己DIY
媒体指数不支持细分地域查询
当查询百度指数未收录的关键词时也会出现报错，这个之后会修复

如需制作可视化动态图表可以访问以下网站
Flourish | Data Visualisation & Storytelling

视频教程在这儿：一分钟制作百度指数可视化图表_哔哩哔哩_bilibili

调入数据以后即生成动态图表啦。

Python百度指数抓取一键生成指数信息导出到txt文件，制作可视化动态图表相关推荐

python爬关键词百度指数_详解python3百度指数抓取实例
百度指数抓取,再用图像识别得到指数前言: 土福曾说,百度指数很难抓,在淘宝上面是20块1个关键字: 哥那么叼的人怎么会被他吓到,于是乎花了零零碎碎加起来大约2天半搞定,在此鄙视一下土福安装的库很多 ...
【Python爬虫】百度指数爬取+导入数据库+QuickBI展示
百度指数爬取原文在这里:如何用Python下载百度指数的数据_小小明-代码实体的专栏-CSDN博客 00.序言一直想把百度指数每天定时爬下来,然后放到Dashboard里展示,终于,我看到了大神给出 ...
java 抓取百度新闻,java中使用jdom生成百度新闻抓取的xm
百度新闻开放,详细见 plaincopy to clipboardprint? 自己用java写了个使用jdom生成百度要求的 xml文件的实例,生成供百度搜索引擎抓取新闻 package com. ...
python爬虫（抓取百度新闻列表）
一.python请求要抓取的url页面要抓取的url http://news.baidu.com/ ,先python模拟请求该url #!/usr/bin/python # -*- coding:u ...
python抓取网页内容到excel_Python实现抓取网页生成Excel文件的方法示例
本文实例讲述了Python实现抓取网页生成Excel文件的方法.分享给大家供大家参考,具体如下: Python抓网页,主要用到了PyQuery,这个跟jQuery用法一样,超级给力示例代码如下: # ...
python爬虫微信朋友圈怎么发文字_如何利用Python网络爬虫抓取微信朋友圈的动态（上）...
今天小编给大家分享一下如何利用Python网络爬虫抓取微信朋友圈的动态信息,实际上如果单独的去爬取朋友圈的话,难度会非常大,因为微信没有提供向网易云音乐这样的API接口,所以很容易找不到门.不过不要慌 ...
机械臂论文笔记（一）【基于卷积神经网络的二指机械手抓取姿态生成研究】
基于卷积神经网络的二指机械手抓取姿态生成研究论文下载摘要第1章绪论 1.1 抓取生成国内外研究现状 1.1.1已知物体抓取生成 1.1.2相似物体抓取生成 1.1.3 未知物体抓取生成 1. ...
python抓取微信朋友圈动态_2018最全如何利用Python网络爬虫抓取微信朋友圈的动态...
今天小编给大家分享一下如何利用Python网络爬虫抓取微信朋友圈的动态信息,实际上如果单独的去爬取朋友圈的话,难度会非常大,因为微信没有提供向网易云音乐这样的API接口,所以很容易找不到门.不过不要慌 ...
Python爬虫：抓取智联招聘岗位信息和要求（进阶版）
本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理以下文章来源于腾讯云作者:王强 ( 想要学习Python?Python学习交流群 ...
Python 3.6 抓取微博m站数据
Python 3.6 抓取微博m站数据 2019.05.01 更新内容 containerid 可以通过 "107603" + user_id 组装得到,无需请求个人信息获取: 优 ...

Python百度指数抓取一键生成指数信息导出到txt文件，制作可视化动态图表

简介

安装baidux模块

用法

结果

技巧

Python百度指数抓取一键生成指数信息导出到txt文件，制作可视化动态图表相关推荐

最新文章

热门文章

Python百度指数抓取 一键生成指数信息导出到txt文件，制作可视化动态图表

简介

安装baidux模块

用法

结果

技巧

Python百度指数抓取 一键生成指数信息导出到txt文件，制作可视化动态图表相关推荐

最新文章

热门文章

Python百度指数抓取一键生成指数信息导出到txt文件，制作可视化动态图表

Python百度指数抓取一键生成指数信息导出到txt文件，制作可视化动态图表相关推荐