爬取人民日报_python爬取新浪微博人民日报信息

首先构造请求头

base_url ='https://m.weibo.cn/api/container/getIndex?'

headers = {

'Host':'m.weibo.cn',

'Referer':'https://m.weibo.cn/u/2803301701',

'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.75 Safari/537.36',

'X-Requested-With':'XMLHttpRequest'

}

之后根据人民日报的Cookie数值(在审查元素的Network(getindex中uid以及containderid)

def get_page(page):

params = {

'type':'uid',

'value':'2803301701',

'containerid':'1076032803301701',

'page': page

}

构造网页

url = base_url + urlencode(params)

判断请求是否成功(200成功，404丢失，500服务器问题)

try:

response = requests.get(url, headers=

爬取人民日报_python爬取新浪微博人民日报信息相关推荐

python可以爬什么山_Python爬取13个旅游城市，告诉你五一大家最爱去哪玩？
今年五一放了四天假,很多人不再只是选择周边游,因为时间充裕,选择了稍微远一点的景区,甚至出国游.各个景点成了人山人海,拥挤的人群,甚至去卫生间都要排队半天,那一刻我突然有点理解灭霸的行为了. 今天,通 ...
python爬取流浪地球_python爬取《流浪地球》获十几万评论点赞，超给力！
原标题:python爬取<流浪地球>获十几万评论点赞,超给力! 我自己到现在其实还没看这部电影,毕竟这电影这么火,电影院现在都很难买到好的位置.所以我打算不如先看看大家是怎么评价这部电影的 ...
python爬取流浪地球_python爬取《流浪地球》16w评论
今年春节档电影<流浪地球>火的不要不要,截止到今天 2 月 17 日,上映 13 天,目前票房已达 36 亿,可喜可贺. 我自己到现在其实还没看这部电影,毕竟这电影这么火,电影院现在都很难 ...
python向上取整_python向上取整
广告关闭腾讯云11.11云上盛惠 ,精选热门产品助力上云,云服务器首年88元起,买的越多返的越多,最高返5000元! import math f = 11.2print math.ceil(f) # ...
python的取整和取余_Python中取余、除法、取整的操作逻辑
对于python而言,容易混淆的运算符有除(/),取余(%),取整(//). 取余(%) 对于这三种运算符而言,取余操作有时会令人费解.例如: 7 % 3 =1 1 % 10 = 1 0.3 % 1 ...
python向上取整_Python 向上取整的算法
一.初衷: 有时候我们分页展示数据的时候,需要计算页数.一般都是向上取整,例如counts=205 pageCouts=20 ,pages= 11 页. 一般的除法只是取整数部分,达不到要求. 二.方 ...
python标准库math中用来实现上取整_Python之取整
在编程过程中数据处理是不可避免的,很多时候都需要根据需求把获取到的数据进行处理,取整则是最基本的数据处理.取整的方式则包括向下取整.四舍五入.向上取整等等.下面就来看看在Python中取整的几种方法吧 ...
python标准库math中用来实现上取整_python中取整
向上取整定义:大于或等于 x 的最大整数 math.ceil(x) 向上取整运算为Ceiling,用数学符号??表示 1 2 3 4 5 6>>> import math # py ...
python怎么小数向上取整_python向上取整怎么还有小数部分
本文介绍Python的几种取整的方法数据处理是编程中不可避免的,很多时候都需要根据需求把获取到的数据进行处理,取整则是最基本的数据处理.取整的方式则包括向下取整.四舍五入.向上取整等等. 1.向下取 ...

爬取人民日报_python爬取新浪微博人民日报信息

爬取人民日报_python爬取新浪微博人民日报信息相关推荐

最新文章

热门文章