Python 爬取百度搜索风云榜新闻并自动推送到邮箱

本文将使用Python爬取百度新闻搜索指数排名前50的新闻，并通过服务器运行，每天定时发送到指定邮箱。

先上代码：

# -*- coding:utf-8 -*-
import requests,os,re,email,smtplib
EMAIL_ADDRESS='****@hotmail.com'
EMAIL_PASSWORD='***'
s=smtplib.SMTP(host='smtp.office365.com',port=587)
s.starttls()
s.login(EMAIL_ADDRESS,EMAIL_PASSWORD)
print('Connected~')
url='http://top.baidu.com/buzz?b=341&c=513&fr=topbuzz_b1'
r=requests.get(url)
txt=r.content.decode('GBK')
pt=re.compile('href_top=".*?">(.*?)<')
title=re.findall(pt,txt)
pt1=re.compile('href="(.*?)" href_top')
urls=re.findall(pt1,txt)
#print(len(urls))
pt2=re.compile('icon-....">(.*?)</span')
rise=re.findall(pt2,txt)
#print(title,rise,urls)
i=50
mss=''
for x in range(i):ma=(str(x+1),title[x],rise[x],urls[x])ms=',  '.join(ma)mss+=(ms+'\n')
msgs=mss
msg=email.message_from_string(msgs)
msg['From']=EMAIL_ADDRESS
msg['To']=EMAIL_ADDRESS # add who need receive the eamil
s.sendmail(EMAIL_ADDRESS,EMAIL_PASSWORD,msg.as_string())
s.quit()
print('Your data sent to %s',EMAIL_ADDRESS)

主要使用了requests，smtplib, re,email模块，只需要30几行代码就可以实现。

接下来我说下怎么在服务器上设置：

crontab -e这个命令可以搜索了解下怎么使用的，

在我们服务器下面输入这个命令 crontab -e

* * * * * program

进入编辑模式按 i 键

30 07 * * * /usr/local/bin/python3 /usr/temp/baidu.py 每天早上7：30分运行一次

然后:wq 保存，就可以执行了。另外需要注意的是一定要写成绝对路径，这样保证程序能运行。

最后上一张截图

Python 爬取百度搜索风云榜新闻并自动推送到邮箱相关推荐

Python爬取百度搜索风云榜实时热点.
Python爬虫实战源码合集(持续更新) 百度搜索风云榜:http://top.baidu.com/ 源码: import os import json from datetime import da ...
python爬取百度搜索_使用Python + requests爬取百度搜索页面
想学一下怎样用python爬取百度搜索页面,因为是第一次接触爬虫,遇到一些问题,把解决过程与大家分享一下 1.使用requests爬取网页首先爬取百度主页www.baidu.com import r ...
Python爬取百度搜索的标题和真实URL的代码和详细解析
网页爬取主要的是对网页内容进行分析,这是进行数据爬取的先决条件,因此博客主要对爬取思路进行下解析,自学的小伙伴们可以一起来学习,有什么不足也可以指出,都是在自学Ing,回归正题今天我们要来爬取百度搜索 ...
python爬取百度搜索_Python-Scrapy抓取百度数据并分析
抓取智联招聘和百度搜索的数据并进行分析,使用visual studio编写代码mongodb和SQLServer存储数据.使用scrapy框架结合 selenium爬取百度搜索数据,并进行简要的数据的 ...
python 爬取百度搜索结果url
简单的爬取百度搜索结果url 先用了requests库来访问百度,再通过xpath来提取搜索后的结果 import requests from lxml import etreefor i in ra ...
实战技巧：Python爬取OEM 12C上的告警信息并推送至微信企业号
关注我们获得更多精彩作者 | 徐美兰 ,邮政软件开发工程师,广东.湖南邮政金融数据中心任职多年,擅长Oracle数据库性能诊断与调优,对基于Python的数据分析与挖掘开发具有浓厚兴趣. 编者说明: ...
python爬取百度搜索答案题目和摘要
url就自行构造吧 # coding:utf-8 import urllib2 import re from bs4 import BeautifulSoup url = 'http://www.ba ...
python 广告牌_Python从百度搜索广告牌抓取新闻并自动推送到电子邮件中,爬取,风云榜,邮箱...
本文将使用Python爬取百度新闻搜索指数排名前50的新闻,并通过服务器运行,每天定时发送到指定邮箱. 先上代码: # -*- coding:utf-8 -*- import requests,os, ...
python爬虫代码实例-Python爬虫爬取百度搜索内容代码实例
这篇文章主要介绍了Python爬虫爬取百度搜索内容代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下搜索引擎用的很频繁,现在利用Python爬 ...

Python 爬取百度搜索风云榜新闻并自动推送到邮箱

Python 爬取百度搜索风云榜新闻并自动推送到邮箱相关推荐

最新文章

热门文章

Python 爬取百度 搜索风云榜 新闻并 自动推送 到邮箱

Python 爬取百度 搜索风云榜 新闻并 自动推送 到邮箱相关推荐

最新文章

热门文章

Python 爬取百度搜索风云榜新闻并自动推送到邮箱

Python 爬取百度搜索风云榜新闻并自动推送到邮箱相关推荐