爬虫python下载电影_python爬虫：抓取下载电影文件，合并ts文件为完整视频

目标网站：https://www.88ys.cc/vod-play-id-58547-src-1-num-1.html 反贪风暴4

对电影进行分析

我们发现，电影是按片段一点点加载出来的，我们分别抓取所有ts文件，然后合并成一个完整的文件即可下载到完整电影

代码如下：

# https://www.88ys.cc/vod-play-id-58547-src-1-num-1.html 电影地址

import requests

import os

import time

from multiprocessing import Pool

def run(i):

url = 'https://cn1.chinapellets.com/hls/20190406/ae64c4b38a00fb989546672c7d75c660/1554536039/film_0%04d.ts'%i

print("开始下载："+url)

headers = {"User-Agent": "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.92 Safari/537.36"}

r = requests.get(url, headers = headers)

# print(r.content)

with open('./mp4/{}'.format(url[-:]),'wb') as f:

f.write(r.content)

def merge(t,cmd):

time.sleep(t)

res=os.popen(cmd)

print(res.read())

if __name__ == '__main__':

# 创建进程池，执行10个任务

pool = Pool()

for i in range():

pool.apply_async(run, (i,)) #执行任务

pool.close()

pool.join()

#调用合并

merge(,"copy /b mp4\\*.ts mp4\\new.mp4")

print('ok！处理完成')

因为单个进程下载太慢了，这里用到了进程池，这样基本达到了，最大网速

运行过程：

下载完成：

Python爬虫----抓取豆瓣电影Top250

有了上次利用python爬虫抓取糗事百科的经验,这次自己动手写了个爬虫抓取豆瓣电影Top250的简要信息. 1.观察url 首先观察一下网址的结构 http://movie.douban.com/to ...

python爬虫抓取豆瓣电影

抓取电影名称以及评分,并排序(代码丑炸) import urllib import re from bs4 import BeautifulSoup def get(p): t=0 k=1 n=1 b ...

python 爬虫抓取心得

quanwei9958 转自 python 爬虫抓取心得分享 urllib.quote('要编码的字符串') 如果你要在url请求里面放入中文,对相应的中文进行编码的话,可以用: urllib.quo ...

Python爬虫抓取东方财富网股票数据并实现MySQL数据库存储

Python爬虫可以说是好玩又好用了.现想利用Python爬取网页股票数据保存到本地csv数据文件中,同时想把股票数据保存到MySQL数据库中.需求有了,剩下的就是实现了. 在开始之前,保证已经安装好 ...

Python小爬虫——抓取豆瓣电影Top250数据

python抓取豆瓣电影Top250数据 1.豆瓣地址:https://movie.douban.com/top250?start=25&filter= 2.主要流程是抓取该网址下的Top25 ...

python爬虫抓取哈尔滨天气信息（静态爬虫）

python 爬虫爬取哈尔滨天气信息 - http://www.weather.com.cn/weather/101050101.shtml 环境: windows7 python3.4(pip i ...

用python+selenium抓取豆瓣电影中的正在热映前12部电影并按评分排序

抓取豆瓣电影(http://movie.douban.com/nowplaying/chengdu/)中的正在热映前12部电影,并按照评分排序,保存至txt文件 #coding=utf-8 from ...

Python Spider 抓取猫眼电影TOP100

""" 抓取猫眼电影TOP100 """ import re import time import requests from bs4 im ...

Python爬虫 -- 抓取电影天堂8分以上电影

看了几天的python语法,还是应该写个东西练练手.刚好假期里面看电影,找不到很好的影片,于是有个想法,何不搞个爬虫把电影天堂里面8分以上的电影爬出来.做完花了两三个小时,撸了这么一个程序.反正蛮简单 ...

随机推荐

RobotFrameWork（三）数据类型

1.1 数字变量执行结果: 1.2 布尔变量和None/null 执行结果: 1.3 字符串.元组.list和字典执行结果: 1.4 space和empty 执行结果:

如何学习caffe

知乎上的讨论:https://www.zhihu.com/question/27982282 从0开始山寨caffe系列:http://www.cnblogs.com/neopenx/archive/ ...

css部分基础归纳--学习笔记

(1)css不区别大小写: (2)颜色值:颜色值可以写成RGB格式,如:color:rgb(255,100,0),也可以写成十六进制格式,如:color:#ff0000.如果十六进制的值是成对重复的可 ...

java 面向对象——进度1

面向对象:1,面向对象和面向过程思想. 面向对象强调的是对象实例. 面向过程强调的是动作. 对象将动作进行封装. 在问题领域中,我们先去找的都是涉及的对象, 然后 ...

参数计数不匹配，未处理System&period;Reflection&period;TargetParameterCountException

系统出现异常:参数计数不匹配,未处理System.Reflection.TargetParameterCountException, 系统会显示如下的异常信息,但异常信息往往与实际异常位置差十万八千量 ...

它们偷偷干了啥？教你监督APP的运行

由于Android系统的开放性,很多APP都会在后台运行各种我们不知道的权限,不仅泄露我们隐私,也给系统本身带来极大安全隐患.而且现在很普遍的是,在安装APP时它总会索取特别多的权限,又是拍照又是地理 ...

C语言函数及变量的声明与定义的区别

变量: 1.声明变量不需要建立存储空间,如:extern int a; 2.定义变量需要建立存储空间,如:int a:或者 int b=10:无论变量是否赋值,只要定义它,即占用空间. 3.int a ...

leetcode实战

leetcode记录两数之和题目给定一个整数数组 nums 和一个目标值 target,请你在该数组中找出和为目标值的那两个整数,并返回他们的数组下标. 你可以假设每种输入只会对应一个答案. ...

Unity 精灵物体的创建 Sprite&period;create

参考链接:http://www.cnblogs.com/BuladMian/p/6226744.html 创建预制体精灵优点:创建大量相同精灵,只用调用一个预制体精灵,避免了计算机大量重复创建会导 ...

Python把两个列表合成一个字典

简单粗暴上代码 A= [] B = [] C= dict(map(lambda x,y:[x,y],A,B)) 酱紫,就合成了一个字典

爬虫python下载电影_python爬虫：抓取下载电影文件，合并ts文件为完整视频相关推荐

爬虫python名词解释_python爬虫
Python爬虫是用Python编程语言实现的网络爬虫,主要用于网络数据的抓取和处理,相比于其他语言,Python是一门非常适合开发网络爬虫的编程语言,大量内置包,可以轻松实现网络爬虫功能. Pyth ...
python猫眼电影分析_抓取猫眼电影
注意:抓取内容之前一定要查看下Robots协议 1.准备工作 1>第一步,安装python,安装requests.json库. 2.抓取分析 1>接下来我们打开网页分析下猫眼电影排行榜 2 ...
Python爬虫实战（1）：抓取毒舌电影最新推送
update:6/11/2017 由于毒舌电影公众号被关闭账号,源码已失效,可参考并调整相关参数以适配网站上其他公众号文章的抓取,望周知. ~~~~~~~~~~~ 作为一个电影爱好者," ...
Project 2 ：Python爬虫源码实现抓取豆瓣电影爱情电影Top200并保存到文件
基于python3.6-pycharm编写的,都已经调试过了,欢迎大家提出交流意见. 关于一些基础的数据网页分析(比如为什么是这个url)没有过多赘述,看不懂的自行百度. 源码可以直接拷贝运行. 转载 ...
python 百度词典_python在线抓取百度词典的翻译结果翻译单词
这段代码通过抓取百度词典的翻译结果达到翻译单词的目的这个小工具使用Python语言编写完成,其中使用到这些类库(urllib,BeautifulSoup ),前者主要负责网络通讯方面,后者负责HT ...
python判断成语_python正则表达式抓取成语网站
#anthor jiqunpeng #time 20121124 import urllib import re def gethtml(url): #从url中读取html内容 page = url ...
梦幻西游python验证成语_python正则表达式抓取成语网站
#anthor jiqunpeng #time 20121124 import urllib import re def getHtml(url): #从URL中读取html内容 page = url ...
python登录斗鱼_Python实现抓取斗鱼实时弹幕
[Python] 纯文本查看复制代码''' 文件名:爬取斗鱼直播间信息到jsonline文件.py ''' from __future__ import unicode_literals impor ...
python天涯帖子_python多线程抓取天涯帖子内容示例
#coding:utf-8 import urllib import re import threading import os,time class Down_Tianya(threading.Th ...
爬虫python漏洞群_python爬虫之 wooyun公开漏洞
准备加上一些小功能. 重新写了一下代码,先保存在这里: import requests import re def first(): import sys reload(sys) sys.setdef ...

爬虫python下载电影_python爬虫：抓取下载电影文件，合并ts文件为完整视频

爬虫python下载电影_python爬虫：抓取下载电影文件，合并ts文件为完整视频相关推荐

最新文章

热门文章