python爬取天气与微博热搜自动发给微信好友
python爬取天气与微博热搜自动发给微信好友
- 前言
- 系统环境
- 正文
- 爬取中国天气网
- 爬取微博热搜
- 微信自动发送消息
- 源代码
- 总结
- github地址
前言
忙着毕设与打游戏之余,突然想着写个爬虫练练手,想了想,就写了一个爬虫爬取“中国天气网”与“微博热搜”并定时发送给微信好友,放到服务器上运行了几天算是正常。
系统环境
- python 3.8.2
- webdriver(用于驱动edge)
- 微信电脑版
- windows10
正文
爬取中国天气网
因为中国天气网的网页是动态生成的,所以不能直接爬取到数据,需要先使用webdriver打开网页并渲染完成,然后保存网页源代码,使用beautifulsoup分析数据。爬取的数据包括实时温度、最高温度与最低温度、污染状况、风向和湿度、紫外线状况、穿衣指南八项数据。
def getZZWeatherAndSendMsg():HTML1='http://www.weather.com.cn/weather1dn/101190201.shtml'driver=webdriver.Edge()driver.get(HTML1)soup=BeautifulSoup(driver.page_source,'html5lib')#获取实时温度tem=soup.find('span',class_='temp').string#获取最高温度与最低温度maxtem=soup.find('span',id='maxTemp').stringmintem=soup.find('span',id='minTemp').string#获取污染状况poll=soup.find('a',href='http://www.weather.com.cn/air/?city=101190201').string#获取风向和湿度win=soup.find('span',id='wind').stringhumidity=soup.find('span',id='humidity').string#获取紫外线状况sun=soup.find('div',class_='lv').find('em').string#获取穿衣指南cloth=soup.find('dl',id='cy').find('dd').stringHTML2='http://www.weather.com.cn/weathern/101190201.shtml'driver.get(HTML2)soup=BeautifulSoup(driver.page_source,'html5lib')#获取天气情况wea=soup.find_all('p',class_='weather-info')[1].stringweatherContent='实时温度:'+tem+'℃'+'\n'+'今日温度变化:'+mintem+'~'+maxtem+'\n'+'今日天气:'+wea+'\n'+'当前风向:'+win+'\n'+'相对湿度:'+humidity+'\n'+'紫外线:'+sun+'\n'+'污染指数:'+poll+'\n'+'穿衣指南:'+cloth+'\n'+'注意天气变化!!'driver.quit()return weatherContent
爬取微博热搜
相比于中国天气网,微博热搜要简单很多,直接request得到数据包,然后使用beautiful解析。解析数据后用for循环便利50次保存文本。
def getWeibo():url='https://s.weibo.com/top/summary'headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.72 Safari/537.36 Edg/90.0.818.41'}r=requests.get(url,headers=headers)r.raise_for_status()r.encoding = r.apparent_encodingsoup = BeautifulSoup(r.text, "html.parser")tr=soup.find_all('tr')weiboContent='今日微博热榜:'+'\n'for i in range(2,52):text=tr[i].find('td',class_='td-02').find('a').stringweiboContent=weiboContent+str(i-1)+'"'+text+'"'+'\n'return weiboContent
微信自动发送消息
使用win32gui自动化操作发送微信消息,首先使用微信的窗口名找到微信句柄,然后模拟键鼠搜索联系人,打开联系人窗口,发送消息并关闭窗口。同时发送多个联系人时可以直接重复这几步操作
if __name__=="__main__":target_a=['06:55','11:55','19:53']target_b=['07:00','12:00','19:54']name_list=['Squirrel B','Squirrel B']while True:now=time.strftime("%m月%d日%H:%M",time.localtime())print(now)if now[-5:] in target_a:base_weatherContent=getZZWeatherAndSendMsg()weiboContent=getWeibo()if now[-5:] in target_b:hwnd=win32gui.FindWindow("WeChatMainWndForPC", '微信')win32gui.ShowWindow(hwnd,win32con.SW_SHOW)win32gui.MoveWindow(hwnd,0,0,1000,700,True)time.sleep(1)for name in name_list:movePos(28,147)click()#2.移动鼠标到搜索框,单击,输入要搜索的名字movePos(148,35)click()time.sleep(1)setText(name)ctrlV()time.sleep(1) # 等待联系人搜索成功enter()time.sleep(1)now=time.strftime("%m月%d日%H:%M",time.localtime())weatherContent='现在是'+now+'\n'+base_weatherContentsetText(weatherContent)ctrlV()time.sleep(1)altS()time.sleep(1)setText(weiboContent)ctrlV()time.sleep(1)altS()time.sleep(1)win32gui.PostMessage(hwnd, win32con.WM_CLOSE, 0, 0)time.sleep(60)
源代码
import win32clipboard as w
import win32con
import win32api
import win32gui
import ctypes
import time
import requests
from urllib.request import urlopen
from bs4 import BeautifulSoup
from selenium import webdriver#把文字放入剪贴板
def setText(aString):w.OpenClipboard()w.EmptyClipboard()w.SetClipboardData(win32con.CF_UNICODETEXT,aString)w.CloseClipboard()#模拟ctrl+V
def ctrlV():win32api.keybd_event(17,0,0,0) #ctrlwin32api.keybd_event(86,0,0,0) #Vwin32api.keybd_event(86,0,win32con.KEYEVENTF_KEYUP,0)#释放按键win32api.keybd_event(17,0,win32con.KEYEVENTF_KEYUP,0)#模拟alt+s
def altS():win32api.keybd_event(18,0,0,0)win32api.keybd_event(83,0,0,0)win32api.keybd_event(83,0,win32con.KEYEVENTF_KEYUP,0)win32api.keybd_event(18,0,win32con.KEYEVENTF_KEYUP,0)
# 模拟enter
def enter():win32api.keybd_event(13,0,0,0)win32api.keybd_event(13,0,win32con.KEYEVENTF_KEYUP,0)
#模拟单击
def click():win32api.mouse_event(win32con.MOUSEEVENTF_LEFTDOWN, 0, 0, 0, 0)win32api.mouse_event(win32con.MOUSEEVENTF_LEFTUP, 0, 0, 0, 0)
#移动鼠标的位置
def movePos(x,y):win32api.SetCursorPos((x,y))def getZZWeatherAndSendMsg():HTML1='http://www.weather.com.cn/weather1dn/101190201.shtml'driver=webdriver.Edge()driver.get(HTML1)soup=BeautifulSoup(driver.page_source,'html5lib')#获取实时温度tem=soup.find('span',class_='temp').string#获取最高温度与最低温度maxtem=soup.find('span',id='maxTemp').stringmintem=soup.find('span',id='minTemp').string#获取污染状况poll=soup.find('a',href='http://www.weather.com.cn/air/?city=101190201').string#获取风向和湿度win=soup.find('span',id='wind').stringhumidity=soup.find('span',id='humidity').string#获取紫外线状况sun=soup.find('div',class_='lv').find('em').string#获取穿衣指南cloth=soup.find('dl',id='cy').find('dd').stringHTML2='http://www.weather.com.cn/weathern/101190201.shtml'driver.get(HTML2)soup=BeautifulSoup(driver.page_source,'html5lib')#获取天气情况wea=soup.find_all('p',class_='weather-info')[1].stringweatherContent='实时温度:'+tem+'℃'+'\n'+'今日温度变化:'+mintem+'~'+maxtem+'\n'+'今日天气:'+wea+'\n'+'当前风向:'+win+'\n'+'相对湿度:'+humidity+'\n'+'紫外线:'+sun+'\n'+'污染指数:'+poll+'\n'+'穿衣指南:'+cloth+'\n'+'注意天气变化!!'driver.quit()return weatherContentdef getWeibo():url='https://s.weibo.com/top/summary'headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/90.0.4430.72 Safari/537.36 Edg/90.0.818.41'}r=requests.get(url,headers=headers)r.raise_for_status()r.encoding = r.apparent_encodingsoup = BeautifulSoup(r.text, "html.parser")tr=soup.find_all('tr')weiboContent='今日微博热榜:'+'\n'for i in range(2,52):text=tr[i].find('td',class_='td-02').find('a').stringweiboContent=weiboContent+str(i-1)+'"'+text+'"'+'\n'return weiboContentif __name__=="__main__":target_a=['06:55','11:55','19:53']target_b=['07:00','12:00','19:54']name_list=['Squirrel B','Squirrel B']while True:now=time.strftime("%m月%d日%H:%M",time.localtime())print(now)if now[-5:] in target_a:base_weatherContent=getZZWeatherAndSendMsg()weiboContent=getWeibo()if now[-5:] in target_b:hwnd=win32gui.FindWindow("WeChatMainWndForPC", '微信')win32gui.ShowWindow(hwnd,win32con.SW_SHOW)win32gui.MoveWindow(hwnd,0,0,1000,700,True)time.sleep(1)for name in name_list:movePos(28,147)click()#2.移动鼠标到搜索框,单击,输入要搜索的名字movePos(148,35)click()time.sleep(1)setText(name)ctrlV()time.sleep(1) # 等待联系人搜索成功enter()time.sleep(1)now=time.strftime("%m月%d日%H:%M",time.localtime())weatherContent='现在是'+now+'\n'+base_weatherContentsetText(weatherContent)ctrlV()time.sleep(1)altS()time.sleep(1)setText(weiboContent)ctrlV()time.sleep(1)altS()time.sleep(1)win32gui.PostMessage(hwnd, win32con.WM_CLOSE, 0, 0)time.sleep(60)
总结
- 爬取中国天气网数据
- 爬取微博热搜
- 自动发送微信消息
- 打包为exe并写个简单的GUI
- 写的比较简单,不过也够用了,也懒得继续写下去了,希望可以供大家参考.
github地址
https://github.com/gudu12306/auto_for_wechat
python爬取天气与微博热搜自动发给微信好友相关推荐
- python爬取 过去的微博热搜(热搜神器)
python爬取热搜神器(可以查找关键字热搜or过去的热搜) hello,因为老师给了任务,希望我们爬取一些微博上的数据,所以就想到了要爬取热搜,再根据热搜爬取评论.因为微博对过往的热搜不能根据时间进 ...
- python爬取天气与每日一笑并通过微信发送
欢迎大家光临我的个人博客http://www.chenjingjiu.cn,大家一起交流学习.里面有很多类似的题材哦~ 最近在写一个跑在服务器上的脚本,需要实现的功能是每天九点同时给我和我的女朋友发送 ...
- python入门爬虫之爬取百度首页的热搜榜
博主的公众号:Java4y <<<<<<<<< 一个努力提高工作效率(增加摸鱼时间)的小白博主 >>>>>>& ...
- Python爬取南京地铁微博发布客流数据并进行分析
Python爬取南京地铁微博发布客流数据并进行分析 之前在网上看到了分析北京地铁客流数据的开源项目,就想试着分析一下南京地铁的客流数据,可是找了很久没有找到可以获得南京地铁客流数据的接口,就去南京地铁 ...
- Python爬取天气数据及可视化分析!
来源丨Python之王 Python爬取天气数据及可视化分析 说在前面 天气预报我们每天都会关注,我们可以根据未来的天气增减衣物.安排出行,每天的气温.风速风向.相对湿度.空气质量等成为关注的焦点.本 ...
- python爬取网易云音乐飙升榜音乐_python爬取网易云音乐热歌榜 python爬取网易云音乐热歌榜实例代码...
想了解python爬取网易云音乐热歌榜实例代码的相关内容吗,FXL在本文为您仔细讲解python爬取网易云音乐热歌榜的相关知识和一些Code实例,欢迎阅读和指正,我们先划重点:python,网易热歌榜 ...
- Python爬取网易云音乐热歌榜(爬虫)
Python爬取网易云音乐热歌榜歌曲,并下载到本地 找到要下载歌曲排行榜的链接,这里用的是: https://music.163.com/discover/toplist?id=3778678 然后更 ...
- Python爬取天气数据及可视化分析
Python爬取天气数据及可视化分析 文章目录 Python爬取天气数据及可视化分析 说在前面 1.数据获取 请求网站链接 提取有用信息 保存csv文件 2.可视化分析 当天温度变化曲线图 当天相对湿 ...
- python爬取天气数据山东_Python爬取天气预报数据,并存入到本地EXCEL中-Go语言中文社区...
近期忙里偷闲,搞了几天python爬虫,基本可以实现常规网络数据的爬取,比如糗事百科.豆瓣影评.NBA数据.股票数据.天气预报等的爬取,整体过程其实比较简单,有一些HTML+CSS+DOM树等知识就很 ...
最新文章
- 关于OPENGL的各个变换的顺序
- 3.1_栈_顺序存储结构(数组形式)
- 在 Element-UI 的 Table 组件上添加列拖拽效果
- 路径问题(如何正确写出文件路径)
- 【Linux】一步一步学Linux——hostname命令(73)
- StringBuilder的使用
- leetcode226. 翻转二叉树(dfs)
- Flutter Gzip 编码与解码 Dart Gzip 工具类操作
- 索尼发布工业设备用SWIR图像传感器 采用5微米像素尺寸
- 7-1 特殊a串数列求和 (20 分)
- Android自定义控件之TextView
- android怎么改变字体,如何修改安卓手机字体 详细安卓字体修改图文教程
- impala优化 COMPUTE STATS 与COMPUTE INCREMENTAL STATS
- 深入浅出mysql_深入浅出MySQL读书笔记(一)
- PSMN4R8-100BSE MOSFET管 N-CH 100V D2PAK
- 华为防火墙USG5500的配置方法
- bmp180气压传感器工作原理_40张动图揭示各种传感器工作原理
- [洛谷]P1010 [NOIP1998 普及组] 幂次方
- LMT and ASSM
- Java 连接数据库的几种方法
热门文章
- 基于Pix4Dmapper的运动结构恢复无人机影像三维模型重建
- 正态分布的期望与方差
- 2020年全球网络趋势报告
- 企业微信入群欢迎语怎么设置?企业微信入群欢迎语能发多少条?
- 老闪创业那些事儿(74)——互联网公司的锦衣卫
- # iphone手机 耳机模式 终极解决步骤
- 盘点2022年度A站UE神作top
- 并发编程思维导图分享(包含详细知识点)
- aspose.cad使用工具类,及遇到的问题
- 同款蓝牙耳机为什么会串联_同款蓝牙耳机为什么会串联_Q29双耳分离式蓝牙耳机,L和R不能串联,应该怎么解决?......