Python 爬取迷你MP4电影网，电影名称保存到本地，Requests+lxml框架

先上图：

movie.py

import requests
from lxml import etreefor page in range(10):url = "http://www.minimp4.com/movie/?page={}".format(page)r = requests.get(url)# print(r)# print(r.text)html = etree.HTML(r.text)hrefs = html.xpath('//div[@class="meta"]/h1/a/@href')# print(hrefs)for ur in hrefs:rr = requests.get(ur)hhtml = etree.HTML(rr.text)name = hhtml.xpath('//div[@class="movie-meta"]/h1/text()')print(name[0])with open('movie.txt','a',encoding='utf-8') as fp:fp.write(name[0]+'\n')

Python 爬取迷你MP4电影网，电影名称保存到本地，Requests+lxml框架相关推荐

Python 爬取淘宝商品的价格并保存到本地excel文件中
刚学Python爬虫没多久,老想着爬点什么.哈哈,刚好前段时间双11,就把淘宝爬了下. 不知道为什么,上次对淘宝进行页面读取不需要cookie就可以获取一些信息.现在需要cookie才能过去.话不多说 ...
使用Python爬取不同类别的豆瓣电影简介
使用Python爬取不同类别的豆瓣电影简介之前做过一点文本分类的工作,从豆瓣上爬取了不同类别的数千条电影的简介. 爬取目标我们爬取的目标是豆瓣影视,打开豆瓣网,随便点击一部电影,即可看到电影的介 ...
python实战（一）Python爬取猫眼评分排行前100电影及简单数据分析可视化python实战（一）Python爬取猫眼排行前一百电影及简单数据分析可视化
python实战(一)Python爬取猫眼排行前一百电影及简单数据分析可视化一.抓取数据需要的库 request库响应http请求 json库将文本保存成json形式 pyquery 类似JQ ...
Python爬取豆瓣正在上映的电影
Python爬取豆瓣正在上映的电影 #爬取豆瓣正在上映的电影 import requests from lxml import etree #1.将目标从网站上的页面抓取下来 headers = {' ...
python爬取2019年计算机就业_2019年最新Python爬取腾讯招聘网信息代码解析
原标题:2019年最新Python爬取腾讯招聘网信息代码解析前言初学Python的小伙们在入门的时候感觉这门语言有很大的难度,但是他的用处是非常广泛的,在这里将通过实例代码讲解如何通过Python ...
【考公人的福利】Python爬取中公官网资料
[考公人的福利]Python爬取中公官网资料一.简述二.代码三.运行结果一.简述写这个代码的目的是能够高效率提取中公官网的资料,例如:申论.行测.面试热点.公安基础知识等.大家可以根据个人需 ...
python爬取猫眼正在热映电影
用python写爬虫爬取需要的数据比较容易,以Python简洁的语法和一大波成熟的库,写起来相当的快 python的版本以及使用的库 Python 3.6.4 requests lxml 这次主要是爬 ...
用python爬取公众号推送图片并保存为PPT
文章目录一.前言二.开始 (一)获取推送URL链接 (二)爬取网页并提取图片保存 1.定义用于爬取推送图片的PictureSpider类 2.定义get_url_text()方法 3.定义sear ...
python爬取斗图啦表情包并下载到本地
迫于无聊,又刚好正在学习python,就来记录一篇关于python爬取图片链接下载本地的入门文章... 主要用到的模块: request 和 BeautifulSoup4 开发之前建议先看一下官方给出 ...

Python 爬取迷你MP4电影网，电影名称保存到本地，Requests+lxml框架

Python 爬取迷你MP4电影网，电影名称保存到本地，Requests+lxml框架相关推荐

最新文章

热门文章