FFmpeg解码H264裸流并转换成opencv Mat

感谢雷霄骅博士的在中文视频编解码的付出,http://blog.csdn.net/leixiaohua1020

最近要搞一些视频推流的事情,要解析H264裸流并且获取opencv格式的Mat数据给算法工程师们跑算法.相关资源一直很难找到,经常都是太旧导致API版本都更新换代了,没办法让新人或者外行[比如我]快速验证代码是否可行.在参考多个博客,前人的代码东拼西凑总算是写出了这个H264解码器.算是尽我一点点的绵薄之力对这个社区进行回馈吧.

项目地址:
https://github.com/hirorogithub/ffmpeg_sample-H264_to_cv-Mat
环境依赖:
ffmpeg 3.3
opencv3.20(其实2.4应该也没啥问题)

文件简单介绍:
- H264Decoder.h H264Decoder.cpp:解码器本体,输入H264帧,(以0001开头),输出cv::Mat(如果遇到sps,pps则解码失败,当然第一次遇到的时候ffmpeg会记录下sps,pps的信息用于后面解码)
- H264Decoder_jni.cpp H264Decoder.java JNI文件以及对应java class 注意我在jni层返回的数组中拼凑了图片的长宽信息进去(2*sizeof(int)),所以获得这个数组时需要做相应的解析.由于这边的需求是java负责转发数据,实际跑cv算法还是在C++,所以有这么一个操作,不需要的可以自行处理掉

一些坑:
ffmpeg自己有个time.h,编译时加入头文件依赖什么的,很容易报错找不到time相关的基本类型,解决方法百度有.

一些完善:
我会考虑制作一点H264裸流的样例数据并且写个简单的调用example以供参考.

时间2017-07-18:已经upload了sample调用以及测试数据帧,没记错的话0号文件是H264裸流的整合文件,一个文件里面有很多帧.1号往后的文件是以0001作为分割的H264单帧文件,帧文件都打包上git了

FFmpeg解码H264裸流并转换成opencv Mat相关推荐

ffmpeg封装h264裸流为mp4文件，视频播放速度特别慢-解决
计算实际帧率时,需要从mp4的moov box中的mvhd中取得timescale和duration,将两者相除得到文件总时长, 再从stsz box中取得sample总数,即总帧数sample_co ...
ffmpeg封装h264裸流为mp4文件，视频播放速度特别慢
计算实际帧率时,需要从mp4的moov box中的mvhd中取得timescale和duration,将两者相除得到文件总时长, 再从stsz box中取得sample总数,即总帧数sample_co ...
ffmpeg解码H264缺少帧的解决办法
最近用ffmpeg解码H264裸码流文件,发现解码总是少几帧.上网查了些资料,解决了. 当使用avcodec_decode_video2时,如果第三个参数的值为1,则表示完成一帧的解码,如果为0,表示 ...
ffmpeg实现将H264裸流封装成.mp4或.avi文件
ffmpeg学习历程由于我是移植到arm-linux环境(海思HI3521A),H264裸流直接从海思的编码模块VENC获取. H264数据流序列: SPS, PPS, SEI, I, P, ...
h264 裸流打包成mp4 注意事项
需求: Android 端把网络摄像头的一段正在播放的视频流,截取保存成mp4(按录像按钮时开始录像). 实现: ffmpeg + x264 + sdl; h264 裸流打包成MP4,在网上也有一大 ...
RTSP再学习 -- 利用FFmpeg 将 rtsp 获取H264裸流并保存到文件中
如需转载请注明出处:https://blog.csdn.net/qq_29350001/article/details/78214267 既然已经可以通过 RTSP 获取h264 裸流了.那么通过 F ...
音视频开发（17）---RTSP再学习 -- 利用FFmpeg 将 rtsp 获取H264裸流并保存到文件中
RTSP再学习 -- 利用FFmpeg 将 rtsp 获取H264裸流并保存到文件中 https://blog.csdn.net/qq_29350001/article/details/7821426 ...
java rtp 分片_RTP 协议解包为 H264 裸流
RTP 协议解包为 H264裸流一. 为什么使用 RTP 协议? TCP 传输流媒体数据由于其可靠性,会造成很大的网络延时和卡顿. UDP 传输由于其不可靠性,会导致丢帧,如果是关键帧,则会花屏一个 ...
编码为H264裸流并写文件一
为什么说是裸流呢,因为这篇只讲到把视频编码后写入文件,得到的是一个后缀应该为".h264"的文件,只能用PotPlayer等功能强大的播放器才能打开,因为它没有容器信息,需要装在M ...

FFmpeg解码H264裸流并转换成opencv Mat

FFmpeg解码H264裸流并转换成opencv Mat相关推荐

最新文章

热门文章