Python的视频分析
很久都没在这个公众号进行更新了，分享一个最近折腾的东西吧。
此处声明，该文章仅做技术交流。
最近通过某个培训机构报名了一个课程，该课程的教学视频是通过xxx平台进行播放的。因为觉得这套课程讲的很不错，就想着把它搞下来，方便后期多次回看（视频有播放时效性）。一开始是设想着和小伙伴一人录播一个视频，分工合作，不过大家都懒，这个计划直接夭折了。后来又去淘宝问了下，发现有专门的商家是帮忙代下载的，声称登录账号后即可帮忙下载，本着勤（kou）俭（kou）持（sou）家（sou）的精神，就想自己动手爬下来。
言归正传，接下来大致分享我爬取的整个分析过程。
首先，这个课程是通过微信小程序登录xxx，在登录xxx后，点击我购买的课程中会看到所有的课程，打开其中一个课程，选中第一个课程内容进行播放。此时我们在fiddler中会发现时不时就有一个视频请求，如下图所示。
通过分析第一个视频请求的数据，我们可以较为清楚的看出每一次视频请求，返回的都是一个ts视频片段。如下图所示，请求链接中存在.ts的字样。
同时，我们可以在请求参数中看到start和end信息，几乎就能肯定这是一个视频片段，start和end代表这个片段在整个完整视频中的开始时间和结束时间。因此，我们可以大致猜测，这是基于m3u8索引文件，进行的分段式的播放。
基于这样的猜测，我们在该请求前仅找到了这样的一条请求信息。该请求是一个get请求，参数为m3u8，返回了一串字符串。
初步猜测，返回中的字符串就是我们寻找的m3u8索引信息，但是这样乱糟糟的一串字符，根本看不出什么有用的信息。对其进行一系列常见的解码操作，都没有得到有用的信息，其中进行base64解码时，还提示有非法字符。sad，此时我们的线索在此中断。
由于m3u8文件是有固定的格式，所以我们尝试从网上找了一份明文的m3u8文件，通过这份文件进行各种加密尝试，我们发现其中base64的加密和我们的请求结果中获取到的字符串有极高的相似度。
网上找的m3u8文件进行base64加密
爬取到的m3u8加密数据
通过简单比对即可断定，该网站对m3u8数据进行了base64的加密，但如果直接对爬取到的数据进行base64解码会提示编码错误。细心排查一下，我们就会发现，该加密字符串进行了一些特殊字符的替换，替换如下：
| 特殊字符 | 被替换的字符 |
| @ | 1 |
| # | 2 |
| ￥ | 3 |
| % | 4 |
将替换后的字符串再进行base64解密，即得到了我们明文m3u8文件。
得到m3u8文件后，我们就需要弄清楚，在这个请求中带的那一串字符是怎么来的，又代表什么含义呢，直接将这个字符串在所有的请求中进行搜索，并没有找到相同的字符串，但根据以往的经验，我们可以猜测出，相关的信息肯定就在这次请求的前几条中。
其中这条video/base_info的请求引起了我们的注意。在这条请求的返回数据中，存在video_urls和videoUrl的字段，但这字段也是加密过的，如下图所示。
通过上面替换特殊字符的方式，我们还原了video_urls字段信息，如下图所示。其中encrypt字段和我们的m3u8请求的链接一模一样，故我们找到了这个请求地址的由来了。
此处顺带提一下，这个请求中的m3u8所带的参数是什么意思呢？它的组成也是很有意思的。它是由两个字符串构成的，如下所示。
拆解后的第一部分字符串又暗藏着玄机，它是由两串子串交替出现，子串1为base64加密的一个网址，子串2是一句话，大致的意思可能是说xxx的视频加密是一个靓仔，是不是骚得很。
再往前面的一些请求包括微信扫码登录，已购课程列表获取等等操作，此次就省略一万字了，不再赘述了，留给各位读者自己去研究吧，基本难度不大。
当我们获取m3u8文件后，就可以逐个下载ts片段视频，随机播放一个ts片段，会发现，这个片段也是经过加密的，直接播放是行不通的，我们还需要逐个进行解密后才能播放。这边是通过这条请求发现的，在请求获取到m3u8文件后，又有一个get_video_key的请求了，如下图所示。
可以看出这个key也是加密的，而且有了密钥以后，我们对ts文件的加密方式也是一无所知的，此处再次省略一万字分析过程，直接说结论。这里的ts的加密采用了AES加密的CBC模式，iv偏移为0，key的密钥如上所示（每个课程的密钥是不一样），只要采用字节形式表示，无视所有乱码，直接通吃。因此这边的解密我们就不在话下了。对了这边的密钥获取的请求地址，是在m3u8文件中获取到的，具体可以查看解码后的m3u8文件。
当我们逐个进行视频解密后，我们就可以通过ffmpeg的concat命令进行视频合并了。此次留个小思考，若直接通过ffmpeg进行视频合并，会发现合并后的视频在片段拼接处存在声音卡顿现象，像是数据丢失的导致的，而网址上播放的课程是没有该问题，小伙伴们可以思考下如何可以解决该问题。
终于，万年一更的文章终于搞定了，如果觉得我的分享对你有收获的话，可以帮忙点赞分享一波，感谢我的小伙伴们。
Python的视频分析相关推荐
- 视频教程-Python爬虫视频课程：中国女性胸部大小分析-Python
Python爬虫视频课程:中国女性胸部大小分析 东北大学计算机专业硕士研究生,欧瑞科技创始人&CEO,曾任国内著名软件公司项目经理,畅销书作者,企业IT内训讲师,CSDN学院专家讲师,制作视频 ...
- Python爬虫视频课程：中国女性胸部大小分析-李宁-专题视频课程
Python爬虫视频课程:中国女性胸部大小分析-830人已学习 课程介绍 本课程使用Python3作为编程语言,通过Python爬虫技术从天猫和京东抓取了近20000条胸罩销售数据来分 ...
- OpenCV—python 视频分析背景提取与前景提取
文章目录 一.算法 二.代码 MOG2(Mixture of Gaussian) 与 KNN对比 Kmeans 行人检测代码 OpenCV中支持的两种背景提取算法都是 基于模型密度评估,然后在 像素级 ...
- NVIDIA DeepStream 5.0构建智能视频分析应用程序
NVIDIA DeepStream 5.0构建智能视频分析应用程序 无论是要平衡产品分配和优化流量的仓库,工厂流水线检查还是医院管理,要确保员工和护理人员在照顾病人的同时使用个人保护设备(PPE),就 ...
- NLP实战：利用Python理解、分析和生成文本 | 赠书
导读:本文内容参考自<自然语言处理实战:利用Python理解.分析和生成文本>一书,由Hobson Lane等人所著. 本书是介绍自然语言处理(NLP)和深度学习的实战书.NLP已成为深度 ...
- OpenCV视频分析背景提取与前景提取
点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 基本思想 OpenCV中支持的两种背景提取算法都是基于模型密度评估 ...
- python视频教学视频哪个好-Python入门视频看哪个好？适合初学者的教学视频推荐...
Python作为一门新手友好的编程语言,对于初学者来说,还是有一定的学习难度的.目前的Python学习资料在网上可以找到很多,那么Python入门视频看哪个好呢?本文就为大家推荐小编的免费Python ...
- 学python看谁的视频比较好-Python入门视频看哪个好？适合初学者的教学视频推荐...
Python作为一门新手友好的编程语言,对于初学者来说,还是有一定的学习难度的.目前的Python学习资料在网上可以找到很多,那么Python入门视频看哪个好呢?本文就为大家推荐小编的免费Python ...
- python入门视频教程推荐-Python入门视频看哪个好？适合初学者的教学视频推荐
Python作为一门新手友好的编程语言,对于初学者来说,还是有一定的学习难度的.目前的Python学习资料在网上可以找到很多,那么Python入门视频看哪个好呢?本文就为大家推荐博学谷的免费Pytho ...
- 想自学python看哪位的视频比较好-Python入门视频看哪个好？适合初学者的教学视频推荐...
Python作为一门新手友好的编程语言,对于初学者来说,还是有一定的学习难度的.目前的Python学习资料在网上可以找到很多,那么Python入门视频看哪个好呢?本文就为大家推荐小编的免费Python ...
最新文章
- Teaching Machines to Converse--阅读笔记1 摘要及介绍
- 用看门狗定时器做计时器，计算程序耗时，超声波测距，FL2440
- Server Core十大安装设置命令
- 机械师怎么打开计算机管理,机械师创物者-R笔记本智能控制中心使用教程
- list foreach方法_Java集合三兄弟List,Set,Map你分的清楚吗？
- 你以为面试官问的是分布式缓存，其实他想问……
- Android控件——TextView，EditText
- python怎么做q检验_python – 如何检测pyside2中Qwebengine内部的按钮单击
- 不会编程，就不会写测试案例，就不会测试
- 技嘉H81M-DS2 主板安装 XP方法,及网卡驱动安装
- Latex中文期刊论文模板
- 如何搭建运营级的网络直播平台
- tcp粘包问题以及处理方案
- 微信小程序消息通知-打卡考勤
- openerp/odoo 权限解析
- 牛顿下山法(C++版)
- 搭建Janus的HTTPS环境
- Golang开发新手常犯的50个错误
- Explorer注册表键值归纳
- 惠普服务器如何选择光驱启动不了系统,如何设置光盘启动,教您惠普笔记本如何设置光盘启动...