Python爬取疫情中高风险地区名单

  • 任务总况
    • 任务分析
    • 网站解析与代码实现
    • 数据输出与动态保存
    • 附上完整代码
    • 实验结果
    • 感谢与展望

任务总况

疫情当下,思考如何快速获取实时的中国风险地区名单助力疫情防控。

任务分析

通过前期的调研,发现中国政府网 中央人民政府门户网站只是通过小程序提供完整中高风险地区名单,并没有提供完整的疫情中高分析地区名单。

在百度中检索后发现,广东省人民政府网站全国中高风险地区名单在定期及时地更新《全国疫情中高风险地区名单》,方便了群众及时了解查看疫情动态,其数据来源于中国政府网,数据可靠性高。

网站解析与代码实现

通过对广东省人民政府网站提供《全国疫情中高风险地区名单》的信息多日追踪后发现,其url固定(http://www.gd.gov.cn/gdywdt/zwzt/yqfk/content/post_3021711.html),可以作为定时爬取的途径。

采用 requests 代码完成数据爬取,代码如下:

def getHTML(url):try:r = requests.get(url, timeout=30)r.raise_for_status()r.encoding = r.apparent_encodingreturn r.textexcept:return ""

分析其网页源代码,可以发现,所需要信息以文本形式在源代码中展示。

    <div class="viewList"><h3 class="zw-title">全国疫情中高风险地区名单(截至2021年1月17日18时)</h3><div class="zw-info">  <span class="time">时间  :  2021-01-16 21:49:24</span>   <span class="ly">来源  :  中国政府网</span><div class="right"><span class="print" οnclick="javascript:window.print()">【打印】</span><div class="fav-wrap"><a class="my-fav">我的收藏</a>&nbsp;&nbsp;<a class="add-fav">收藏</a></div>   <span class="changeFont" >【字体:<span id="lFont">大</span> <span id="mFont">中</span> <span id="sFont">小</span>】</span><div class="shareIcon">分享到:<div id="share-1" style="display: inline-block;" data-sites="wechat ,weibo, qq, qzone"></div></div></div>        </div><div class="zw"><p style="text-align: justify;"><strong>  高风险地区:</strong></p><p style="text-align: justify;"><strong><strong style="text-align: justify;">  河北省石家庄市藁城区</strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;">黑龙江省绥化市望奎县惠七镇</strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;"> <strong> 河北省石家庄市新乐市长寿街道</strong></p><p style="text-align: justify;"><br/></p><p style="text-align: justify;"><strong>  中风险地区:</strong></p><p style="text-align: justify;"><strong>  </strong><strong>北京市顺义区高丽营镇东马各庄村</strong></p><p style="text-align: justify;"><strong>  北京市顺义区高丽营镇张喜庄村</strong></p><p style="text-align: justify;"><strong>  </strong><strong>北京市顺义区南法信(地区)镇西杜兰村</strong></p><p style="text-align: justify;"><strong>  北京市顺义区北石槽镇西赵各庄村</strong></p><p style="text-align: justify;"><strong>  北京市顺义区北石槽镇北石槽村</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>北京市顺义区赵全营镇联庄村</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市高新区赵村新区小区</strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市高新区主语城小区</strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市无极县东北远村</strong></strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市无极县西郝庄村</strong></strong></strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市正定县空港花园小区</strong></strong></strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市正定县孔村</strong></strong></strong></strong></strong></strong></strong></p><p style="text-align: justify;">  <strong>河北省石家庄市新乐市</strong></p><p style="text-align: justify;"><strong>  河北省石家庄市新华区都市阳光小区</strong></p><p style="text-align: justify;"><strong>  河北省石家庄市新华区丽都河畔小区</strong></p><p style="text-align: justify;"><strong>  河北省石家庄市桥西区平安小区</strong></p><p style="text-align: justify;"><strong>  河北省石家庄市行唐县滨河小区</strong></p><p style="text-align: justify;">  <strong>河北省石家庄市裕华区天海誉天下小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;">河北省石家庄市裕华区晶彩苑小区</strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市裕华区众美廊桥四季A区</strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">河北省石家庄市裕华区东方明珠小区</strong></strong></strong></strong></p><p style="text-align: justify;"><strong>  河北省石家庄市桥西区白金公寓</strong></p><p style="text-align: justify;"><strong>  河北省石家庄市桥西区华润万象城</strong></p><p style="text-align: justify;"><strong>  河北省石家庄市鹿泉区观峰嘉邸小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市正定县冯家庄村</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市正定县东平乐村</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市长安区博雅盛世小区E区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市长安区国赫红珊湾小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市高新区太行嘉苑小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市裕华区卓东小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市裕华区新华苑小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市鹿泉区银山花园新区小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省石家庄市新华区尚金苑小区</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市天地名城小区</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市天一和院小区</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市凤岗街道办事处</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市鸿兴小区</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市文景名苑小区</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市在水一方</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市凤岗街道办事处十里铺居委会所辖区域</strong></p><p style="text-align: justify;"><strong>  河北省邢台市南宫市大高村镇石家庄村</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省邢台市南宫市青年街清旺胡同</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省邢台市南宫市凤岗街道东胡居委会北小街</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>河北省<span style="text-align: justify;">廊坊市固安县英国宫5期</span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;"><strong style="text-align: justify;">  辽宁省沈阳市皇姑区长江南街197-1号楼</strong></p><p style="text-align: justify;"><strong>  辽宁省沈阳市铁西区卫工北街22号楼</strong></p><p style="text-align: justify;"><strong><strong style="text-align: justify;">  辽宁省沈阳市铁西区</strong>笃工街道纳帕阳光</strong></p><p style="text-align: justify;"><strong>  辽宁省大连市沙河口区星海湾街道星海公园社区</strong></p><p style="text-align: justify;"><strong>  辽宁省大连市金普新区光中街道胜利西社区</strong></p><p style="text-align: justify;"><strong>  辽宁省大连市金普新区拥政街道古城甲区</strong></p><p style="text-align: justify;"><strong>  黑龙江省黑河市爱辉区喇嘛台社区学府佳苑小区</strong></p><p style="text-align: justify;"><strong>  黑龙江省黑河市爱辉区热电社区兴边集资楼(2号楼)</strong></p><p style="text-align: justify;"><strong>  黑龙江省黑河市爱辉区人保财险社区水岸华府小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;"> <strong> 黑龙江省绥化市望奎县<strong style="text-align: justify;">(除惠七镇外)</strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>黑龙江省齐齐哈尔市昂昂溪区大五福玛村</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>黑龙江省哈尔滨市香坊区香坊大街街道办事处香中社区古香街12号</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>黑龙江省哈尔滨市香坊区大庆路街道办事处电塔小区101栋7单元</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>黑龙江省哈尔滨市香坊区和平路街道办事处风华社区石化小区9栋6单元</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>黑龙江省哈尔滨市和平路街道办事处上东社区万象上东小区E栋2单元</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong>吉林省</strong><strong>长春市公主岭市范家屯镇兴华社区公安分局小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong><strong>长春市公主岭市东胜社区糖研小区</strong></strong><br/></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong><strong><strong style="text-align: justify;">长春市公主岭市富民社区鑫鑫家园小区</strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong><strong><strong style="text-align: justify;"><strong style="text-align: justify;">长春市公主岭市和谐社区二鞋帽小区</strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong><strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">长春市公主岭市<strong style="text-align: justify;">东胜社区<strong style="text-align: justify;">糖研所文明小区</strong></strong></strong></strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong><strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">长春市公主岭市永<strong style="text-align: justify;">胜社区粮库家属楼小区</strong></strong></strong></strong></strong></strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong><strong><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;">长春市公主岭市凯旋社区一水家属楼小区</strong></strong></strong></strong></strong></strong></strong></strong></strong></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong>长春市公主岭市和谐社区阳光小区</strong><br/></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong>长春市绿园区蓉桥壹号C区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong>长春市绿园区大禹华邦B区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong style="text-align: justify;">吉林省</strong><strong>长春市二道区鲁辉国际城荷兰小镇小区</strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><strong style="text-align: justify;">吉林省</strong>通化市<span style="text-align: justify;">东昌区新山社区林化科技楼</span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><span style="text-align: justify;"><strong style="text-align: justify;"><strong>吉林省</strong>通化市东昌区</strong><span style="text-align: justify;">怡星园小区6号楼</span></span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><span style="text-align: justify;"><span style="text-align: justify;"><strong style="text-align: justify;"><strong>吉林省</strong>通化市<strong style="text-align: justify;">东昌区</strong></strong><span style="text-align: justify;">铁道北三新社区701号楼</span></span></span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><span style="text-align: justify;"><span style="text-align: justify;"><span style="text-align: justify;"><strong style="text-align: justify;"><strong>吉林省</strong>通化市</strong><strong style="text-align: justify;">东昌区铁道</strong><strong style="text-align: justify;">北三新社区<strong style="text-align: justify;">705号楼</strong></strong></span></span></span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><span style="text-align: justify;"><span style="text-align: justify;"><span style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><strong><strong>吉林省</strong>通化市</strong><strong>东昌区</strong></strong><span style="text-align: justify;">师范学院家属楼2号楼</span></strong></strong></span></span></span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  <strong><span style="text-align: justify;"><span style="text-align: justify;"><span style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><span style="text-align: justify;"><strong style="text-align: justify;"><strong><strong><strong>吉林省</strong>通化市</strong><strong>东昌区</strong></strong></strong><span style="text-align: justify;">血站中行家属楼</span></span></strong></strong></span></span></span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;"><strong><span style="text-align: justify;"><span style="text-align: justify;"><span style="text-align: justify;"><strong style="text-align: justify;"><strong style="text-align: justify;"><span style="text-align: justify;"><span style="text-align: justify;"><br/></span></span></strong></strong></span></span></span></strong></p><p indenttext="  " noextractcontent="true" style="text-align: justify;">  国务院客户端小程序已上线疫情风险等级查询,可订阅全国各地疫情风险等级变更通知。你订阅的地区风险等级如发生变更,将会收到微信通知。扫描下方葵花码即可进行订阅。</p><p style="text-align:center"><img class="nfw-cms-img" img-id="328486" src="http://www.gd.gov.cn/img/0/328/328486/3021711.jpg" alt="WechatIMG1622_meitu_1.jpg"/></p><div class="fj" style="margin-top:15px;"></div></div></div

分析源代码,《全国中高风险地区名单》标题以 标签 “zw-title”出现,具体名单在 p标签内,因此考虑使用BeautifuSoup 对数据进行筛选提取,代码如下:

def getContent(url):html = getHTML(url)soup = BeautifulSoup(html, 'html.parser')paras_tmp = soup.select('.zw-title')+soup.select('p')paras = paras_tmp[0:]return paras

数据输出与动态保存

考虑名单是实时更新的,因此采用time.strftime随计算机时间重命名保存文件,代码如下:

def saveFile(text):datetimes = time.strftime("%Y-%m-%d-%H_%M_%S",time.localtime(time.time()))fname = "D:/01Study/07Pycharm01/YiQingData011401/"+datetimes+r"Webdata.txt"f = open(fname, 'w')for t in text:if len(t) > 0:f.writelines(t.get_text() + "\n\n")f.close()

附上完整代码

#Python爬取中高风险地区名单代码
import re
import requests
import time
from bs4 import BeautifulSoupdef getHTML(url):try:r = requests.get(url, timeout=30)r.raise_for_status()r.encoding = r.apparent_encodingreturn r.textexcept:return ""def getContent(url):html = getHTML(url)soup = BeautifulSoup(html, 'html.parser')paras_tmp = soup.select('.zw-title')+soup.select('p')paras = paras_tmp[0:]return parasdef saveFile(text):datetimes = time.strftime("%Y-%m-%d-%H_%M_%S",time.localtime(time.time()))fname = "D:/01Study/07Pycharm01/YiQingData011401/"+datetimes+r"Webdata.txt"f = open(fname, 'w')for t in text:if len(t) > 0:f.writelines(t.get_text() + "\n\n")f.close()def main():url = 'http://www.gd.gov.cn/gdywdt/zwzt/yqfk/content/mpost_3021711.html'text = getContent(url)saveFile(text)main()

实验结果


打开数据如下:

全国疫情中高风险地区名单(截至2021年1月17日18时)

高风险地区:

河北省石家庄市藁城区

黑龙江省绥化市望奎县惠七镇

河北省石家庄市新乐市长寿街道

中风险地区:

北京市顺义区高丽营镇东马各庄村

北京市顺义区高丽营镇张喜庄村

北京市顺义区南法信(地区)镇西杜兰村

北京市顺义区北石槽镇西赵各庄村

北京市顺义区北石槽镇北石槽村

北京市顺义区赵全营镇联庄村

河北省石家庄市高新区赵村新区小区

河北省石家庄市高新区主语城小区

河北省石家庄市无极县东北远村

河北省石家庄市无极县西郝庄村

河北省石家庄市正定县空港花园小区

河北省石家庄市正定县孔村

河北省石家庄市新乐市

河北省石家庄市新华区都市阳光小区

河北省石家庄市新华区丽都河畔小区

河北省石家庄市桥西区平安小区

河北省石家庄市行唐县滨河小区

河北省石家庄市裕华区天海誉天下小区

河北省石家庄市裕华区晶彩苑小区

河北省石家庄市裕华区众美廊桥四季A区

河北省石家庄市裕华区东方明珠小区

河北省石家庄市桥西区白金公寓

河北省石家庄市桥西区华润万象城

河北省石家庄市鹿泉区观峰嘉邸小区

河北省石家庄市正定县冯家庄村

河北省石家庄市正定县东平乐村

河北省石家庄市长安区博雅盛世小区E区

河北省石家庄市长安区国赫红珊湾小区

河北省石家庄市高新区太行嘉苑小区

河北省石家庄市裕华区卓东小区

河北省石家庄市裕华区新华苑小区

河北省石家庄市鹿泉区银山花园新区小区

河北省石家庄市新华区尚金苑小区

河北省邢台市南宫市天地名城小区

河北省邢台市南宫市天一和院小区

河北省邢台市南宫市凤岗街道办事处

河北省邢台市南宫市鸿兴小区

河北省邢台市南宫市文景名苑小区

河北省邢台市南宫市在水一方

河北省邢台市南宫市凤岗街道办事处十里铺居委会所辖区域

河北省邢台市南宫市大高村镇石家庄村

河北省邢台市南宫市青年街清旺胡同

河北省邢台市南宫市凤岗街道东胡居委会北小街

河北省廊坊市固安县英国宫5期

辽宁省沈阳市皇姑区长江南街197-1号楼

辽宁省沈阳市铁西区卫工北街22号楼

辽宁省沈阳市铁西区笃工街道纳帕阳光

辽宁省大连市沙河口区星海湾街道星海公园社区

辽宁省大连市金普新区光中街道胜利西社区

辽宁省大连市金普新区拥政街道古城甲区

黑龙江省黑河市爱辉区喇嘛台社区学府佳苑小区

黑龙江省黑河市爱辉区热电社区兴边集资楼(2号楼)

黑龙江省黑河市爱辉区人保财险社区水岸华府小区

黑龙江省绥化市望奎县(除惠七镇外)

黑龙江省齐齐哈尔市昂昂溪区大五福玛村

黑龙江省哈尔滨市香坊区香坊大街街道办事处香中社区古香街12号

黑龙江省哈尔滨市香坊区大庆路街道办事处电塔小区101栋7单元

黑龙江省哈尔滨市香坊区和平路街道办事处风华社区石化小区9栋6单元

黑龙江省哈尔滨市和平路街道办事处上东社区万象上东小区E栋2单元

吉林省长春市公主岭市范家屯镇兴华社区公安分局小区

吉林省长春市公主岭市东胜社区糖研小区

吉林省长春市公主岭市富民社区鑫鑫家园小区

吉林省长春市公主岭市和谐社区二鞋帽小区

吉林省长春市公主岭市东胜社区糖研所文明小区

吉林省长春市公主岭市永胜社区粮库家属楼小区

吉林省长春市公主岭市凯旋社区一水家属楼小区

吉林省长春市公主岭市和谐社区阳光小区

吉林省长春市绿园区蓉桥壹号C区

吉林省长春市绿园区大禹华邦B区

吉林省长春市二道区鲁辉国际城荷兰小镇小区

吉林省通化市东昌区新山社区林化科技楼

吉林省通化市东昌区怡星园小区6号楼

吉林省通化市东昌区铁道北三新社区701号楼

吉林省通化市东昌区铁道北三新社区705号楼

吉林省通化市东昌区师范学院家属楼2号楼

吉林省通化市东昌区血站中行家属楼

国务院客户端小程序已上线疫情风险等级查询,可订阅全国各地疫情风险等级变更通知。你订阅的地区风险等级如发生变更,将会收到微信通知。

感谢与展望

完成过程中参考了很多大佬的帖子,在此感谢。
生成的结果依旧不是方便使用,后续思考对爬取数据的深加工。

疫情并没有远去,请大家 少外出,勤洗手,戴口罩,多通风。

Python爬取疫情中高风险地区名单相关推荐

  1. 用python写了个全国疫情中高风险地区查询

    最近用python写了个全国疫情中高风险地区查询的爬虫代码,分享给大家一起交流,希望得到不同思路的指教,让代码更简洁,运行效率更高. 总体思路 1.找到可供查询的源网站 2.分析.获取查询的API 3 ...

  2. python爬取疫情数据并存入excel中(包括国内各省份,全球,国内外历史疫情数据)代码可以直接运行

    流程 1.进入获取疫情的url 例如: 腾讯新闻的疫情网站 https://news.qq.com/zt2020/page/feiyan.htm#/ 网易新闻:https://wp.m.163.com ...

  3. Python爬取六国家(地区)最流行的股票并保存到excel的不同的工作表中

    问题 爬取"英为财情"网站中最活跃股票数据. 网站url:https://cn.investing.com/equities/most-active-stocks 爬取括号内指定6 ...

  4. Python 爬取疫情期间全球股市走向,笑不出来......

    作者 | 徐麟 本文系作者投稿 前言 近期,受到新冠疫情的影响两周以来,全球股市都发生了大幅的下跌,其中美股市场更是在三月经历了四次熔断,堪称史诗级暴跌,虽然3月24日各国股市都有了大幅的回调,道琼斯 ...

  5. python爬各国疫情数据,存储并进行数据可视化

    实验内容: 编写程序采用爬虫技术爬取各国疫情数据,进行存储并进行数据可视化,要求可以看到各国今日新增确诊数.累计确诊数. 实验方法: 爬取数据 通过以下的步骤,获取到了各国和我国今日的新增确诊数.累计 ...

  6. Python爬虫爬取疫情数据并可视化展示

    这篇文章主要介绍了Python利用爬虫爬取疫情数据并进行可视化的展示,文中的示例代码讲解清晰,对工作或学习有一定的价值,需要的朋友可以参考一下.编程资料点击领取 目录 知识点 开发环境 爬虫完整代码 ...

  7. 练习:使用Python爬取COVID-19疫情国内当日数据

    练习:使用Python爬取COVID-19疫情国内当日数据 推荐公众号:数据酷客 (里面有超详细的教程) 代码来源数据酷客公众号教程 URL它是Uniform Resource Locator的缩写, ...

  8. 用python爬取全国和全球疫情数据,并进行可视化分析(过程详细代码可运行)

    用Python爬取最新疫情数据 这次重大疫情,每时每刻数据都有可能变化,这篇博文将为大家讲解如何爬取实时疫情数据,并且分析数据,作出数据可视化的效果. 报告梗概: 对中国疫情分析 1.1 展示各省疫情 ...

  9. python 爬虫爬取疫情数据,爬虫思路和技术你全都有哈(一)

    python 爬虫爬取疫情数据,爬虫思路和技术你全都有哈(二.数据清洗及存储) 爬起疫情数据,有两个网址: 1.百度:链接 2.丁香园疫情:链接 在这两个中,丁香园的爬虫相对简单一点,所以今天就展示一 ...

  10. python 爬虫爬取疫情数据,爬虫思路和技术你全都有哈(二)

    上一章: python 爬虫爬取疫情数据,爬虫思路和技术你全都有哈(一.爬虫思路及代码) 第三步:数据清洗 清洗数据很简单,就是数据太乱的话,就得花些时间,所以一定要有一个好的方法,才能避免在清洗数据 ...

最新文章

  1. line-height 行高
  2. hessian java php_探讨Hessian在PHP中的使用分析
  3. Spring Boot的Tomcat 启动详解
  4. intellij导入文件夹后各种红色cannot resolve symbol
  5. 讲讲大厂面试必考的假设检验
  6. 如何获取微信API的Access Token
  7. 任正非公开信:投入 20 亿美元全面提升华为软件质量
  8. AliOS Things 电源管理框架使用说明
  9. 斯皮尔 皮尔森 肯德尔_一起来学应用统计学(全部)(二)持续更新
  10. cpu负载转移内存_为什么将所有工作负载转移到云中是个坏主意
  11. HDU 4371 Alice and Bob
  12. ILSpy反编译工具之C#反汇编
  13. HTML当当图书馆作业介绍
  14. 给potplayer配置iptv源,看所有你想看的电视
  15. M1芯片MAC使用VMware Fusion安装Windows 11
  16. 立体栅格地图_三维栅格地图构建之三:点集到栅格的投射
  17. 微信公众号:我们可以用它来干什么?
  18. sqlmap渗透实战进阶技巧
  19. 物联网应用之现代档案馆环境智能化监控系统解决方案
  20. kernel源代码标记:mainline 、longterm、stable、linux-next、snapshot的含义

热门文章

  1. imagej得到灰度图数据_教你用免费软件Image J对WB结果进行灰度分析!
  2. 提高效率的十款Blender快捷键,更多快捷键等着你去探索
  3. 四元数与欧拉角(数学推导)
  4. 倍福--控制步进电机
  5. 计算机教室的网络拓扑结构,基于网络拓扑结构的校园计算机网络系统集成设计...
  6. 传google将要退出中国市场
  7. MTK6589反向修改拼包法操作流程
  8. PHP设计聊天室步步通
  9. 小行星项目第2部分测试驱动开发
  10. 主板检测卡c5_用诊断卡 搞定主板故障