python 爬取豆瓣电影排名

任务要求

获取豆瓣电影排名前250信息
打包进文件夹

代码展示

代码如下

import requests#导入requests库
import redef GetHtml(url):try:RequestAddrss={'user-agent':'Mozilla/5.0'}#更改请求地址为Mozilla/5.0r=requests.get(url,headers = RequestAddrss)#获取网页源码r.raise_for_status()#捕获异常r.encoding=r.apparent_encoding#更换编码集return r.text#获得字符串形式网页源码except:return '请求错误'def GetRank(Html):#获取网页源码data_re=' <em class="">(?P<rank>.+?)</em>.+?<span class="title">(?P<title>.+?)</span>.+?\<span class="rating_num" property="v:average">(?P<score>.+?)</span>.+?\<span>(?P<count>.+?)评价</span>'data=re.compile(data_re,re.S)#re.S模式为.匹配所有字符return data.finditer(Html)def Save(rank):#获取当前源码所有电影排名,并储存在Movie_rankings.txt中for ele in rank:rank=ele.group('rank')name=ele.group('title')score=ele.group('score')number=ele.group('count')data_list=[{'rank':rank},{'name':name},{'score':score},{'number':number}]with open('Movie_rankings.txt','a',encoding='utf-8') as f:f.write('\n'+str(data_list))def main():N=0for i in range(10):#遍历所有排名页面url='https://movie.douban.com/top250?start=%s&filter='%NHtml=GetHtml(url)rank=GetRank(Html)Save(rank)N=N+25main()

运行结果

python 爬取豆瓣电影排名相关推荐

python爬虫（一）爬取豆瓣电影排名前50名电影的信息
python爬虫(一)爬取豆瓣电影排名前50名电影的信息在Python爬虫中,我们可以使用beautifulsoup对网页进行解析. 我们可以使用它来爬取豆瓣电影排名前50名的电影的详细信息,例如排 ...
利用python爬取豆瓣电影top250
利用python爬取豆瓣电影top250: 注:本内容只是作为个人学习记录 1.业务分析进入网页https://movie.douban.com/top250 可以看见每部电影都呈现在眼前,点击电影 ...
python爬取豆瓣电影榜单
python爬取豆瓣电影榜单 python爬取豆瓣电影榜单并保存到本地excel中,以后就不愁没片看了. 目标确定我们想要抓取的电影的相关内容. 抓取豆瓣top250电影的排名.电影名.评价(总结很 ...
Python爬取豆瓣电影top250的电影信息
Python爬取豆瓣电影top250的电影信息前言一.简介二.实例源码展示小结前言相信很多小伙伴在学习网络爬虫时,老师们会举一些实例案例讲解爬虫知识,本文介绍的就是经典爬虫实际案例–爬取豆 ...
python爬取豆瓣电影评论_python 爬取豆瓣电影评论，并进行词云展示及出现的问题解决办法...
def getHtml(url): """获取url页面""" headers = {'User-Agent':'Mozilla/5.0 ( ...
源码大公开！Python爬取豆瓣电影Top250源代码，赶紧收藏！
哈喽~大家好,我是恰恰.不知道是不是有很多小伙伴跟我一样,很喜欢看电影,尤其是那种别人推荐的豆瓣高分电影,所以学Python就有一个好处,用Python爬取豆瓣电影那是分分钟的事,再也不用因为有些电影 ...
python爬取豆瓣电影top250_Python爬虫——爬取豆瓣电影Top250代码实例
利用python爬取豆瓣电影Top250的相关信息,包括电影详情链接,图片链接,影片中文名,影片外国名,评分,评价数,概况,导演,主演,年份,地区,类别这12项内容,然后将爬取的信息写入Excel表中 ...
利用正则表达式爬取豆瓣电影排名
利用正则表达式爬取豆瓣电影排名一/正则表达式二/用正则表达式爬取豆瓣top250 一/正则表达式很多不太懂正则的朋友,在遇到需要用正则校验数据时,往往是在网上去找很久,结果找来的还是不很符合要求 ...
python爬取豆瓣电影top250的代码_Python爬虫——爬取豆瓣电影Top250代码实例
利用python爬取豆瓣电影Top250的相关信息,包括电影详情链接,图片链接,影片中文名,影片外国名,评分,评价数,概况,导演,主演,年份,地区,类别这12项内容,然后将爬取的信息写入Excel表中 ...

python 爬取豆瓣电影排名

python 爬取豆瓣电影排名

任务要求

代码展示

代码如下

运行结果

python 爬取豆瓣电影排名相关推荐

最新文章

热门文章