python 网络爬虫 1.3 获取中国天气网8-15天的天气信息,包含: 日期,天气,温度,风力. 将数据存入文档。

题目：
获取中国天气网8-15天的天气信息,包含: 日期,天气,温度,风力. 将数据存入文档。
代码：

from requests_html import HTMLSessionurl = "http://www.weather.com.cn/weather15d/101190401.shtml"
# 获取请求对象
session = HTMLSession()
response = session.get(url)
html = response.html
div = html.xpath('//*[@class="t clearfix"]', first=True)
div_list = div.xpath('//li')
result_list = []
for d in div_list:time = d.xpath('//span[1]/text()', first=True)wea = d.xpath('//span[2]/text()', first=True)tem1 = d.xpath('//span[3]/em/text()', first=True)tem2 = d.xpath('//span[3]/text()', first=True)wind = d.xpath('//span[4]/text()', first=True)wind1 = d.xpath('//span[5]/text()', first=True)data = {"日期": time,"天气": wea,"温度": tem1 + tem2,"风向": wind,"风力等级": wind1,}result_list.append(data)
print(result_list)with open('data/weather.txt', 'w+', encoding='utf-8') as f:for i in result_list:f.write(str(i))f.write('\n')

输出结果：

python 网络爬虫 1.3 获取中国天气网8-15天的天气信息,包含: 日期,天气,温度,风力. 将数据存入文档。相关推荐

用java实现网络爬虫，实时获取中国地震台网数据
用java实现网络爬虫,实时获取中国地震台网数据 1.如何从网络中爬取相关数据 2.怎么进行数据处理 3.绘图设计 4. 存在问题: 5.java程序的源文件 5.1 爬虫程序 5.2 绘制柱状图程序 ...
python 网络爬虫 1.2 获取豆瓣TOP250电影的中英文名、港台名、导演、上映年份、电影分类以及评分，将数据存入文档。
题目: 获取豆瓣TOP250电影的中英文名.港台名.导演.上映年份.电影分类以及评分,将数据存入文档. 代码: import codecs import csv import refrom reque ...
Python网络爬虫与信息提取（中国大学mooc）
目录目录 Python网络爬虫与信息提取淘宝商品比价定向爬虫目标获取淘宝搜索页面的信息理解淘宝的搜索接口翻页的处理技术路线requests-refootnote 代码如下股票数据定向爬虫 ...
python网络爬虫与信息提取嵩天百度网盘_基于MOOC嵩天《Python网络爬虫与信息提取》视频学习记录——第一周：requests库...
1.requests库入门 requests的get( )方法爬取百度网页实例: import requests r = requests.get("http://www.baidu.co ...
python中国大学排名爬虫写明详细步骤-python网络爬虫入门实例：中国大学排名定向爬虫...
中国大学排名定向爬虫的设计和实现一.环境安装: 1.选择一个适合自己的IDE(以下代码用Jupyter Notebook编写) 2.打开cmd,安装requests库和beautifulsoup4 ...
Python网络爬虫8 - 爬取彼岸图网美图
彼岸图网收集了大量美图,是个不错的爬取对象.话不多说,直接上图. 分析站点分类列表爬取之前,自然要分析一波,这个站点的框架比较简单,从分类着手,共包含12个分类项. 4K人物 4K动漫 4K动物 ...
python爬虫可以爬取个人信息吗_手把手教你利用Python网络爬虫获取旅游景点信息...
爬虫系列: 当我们出去旅游时,会看这个地方有哪些旅游景点,景点价格.开放时间.用户的评论等. 本文基于Python网络爬虫技术,以hao123旅游网为例,获取旅游景点信息. 1.项目目标获取网站的景 ...
【读书笔记】Python网络爬虫从入门到实践（第2版）-唐松，爬虫基础体系巩固和常见场景练习
[概述] 书名:Python网络爬虫从入门到实践(第2版) 作者:唐松日期:2021年08月01日读书用时:1568页,100小时,59个笔记 [读书笔记] ◆ 1.2 网络爬虫是否合法爬虫协议 ...
利用python网络爬虫获取软科中国最好大学排名2019数据
本例程来源于中国大学慕课中北京理工大学嵩天老师所开设的<Python网络爬虫与信息提取> (https://www.icourse163.org/course/BIT-1001870001 ...

python 网络爬虫 1.3 获取中国天气网8-15天的天气信息,包含: 日期,天气,温度,风力. 将数据存入文档。

python 网络爬虫 1.3 获取中国天气网8-15天的天气信息,包含: 日期,天气,温度,风力. 将数据存入文档。相关推荐

最新文章

热门文章