调用宇视摄像机SDK获取IPC的音视频码流

2020年07月13日

| 萬仟网网络运营

| 我要评论

通过调取宇视摄像机SDK，获取的音视频码流，其格式为标准的h264 over rtp或h265 over rtp。需通过解析rtp从而提取出纯H264/H265及音频帧数据。获得的数据均是裸的视频帧或音频帧。第1步：调用sdk获取实况码流NETDEV_PREVIEWINFO_S stNetInfo;memset(&stNetInfo, 0, sizeof stNetInfo);stNetInfo.dwChannelID = m_nChannel;stNetInfo.hPlayWnd

通过调取宇视摄像机SDK，获取的音视频码流，其格式为标准的h264 over rtp或h265 over rtp。需通过解析rtp从而提取出纯H264/H265及音频帧数据。获得的数据均是裸的视频帧或音频帧。

第1步：调用sdk获取实况码流

NETDEV_PREVIEWINFO_S stNetInfo;

memset(&stNetInfo, 0, sizeof stNetInfo);

stNetInfo.dwChannelID = m_nChannel;

stNetInfo.hPlayWnd = NULL;

stNetInfo.dwStreamType = 0;//main

stNetInfo.dwLinkMode = NETDEV_TRANSPROTOCAL_RTPTCP;

m_lRealplayHandle = NETDEV_RealPlay(m_lpDevLoginHandle, &stNetInfo, RealDataCallBack, (LPVOID)this);

第2步：在码流回调函数中解析rtp

void CALLBACK RealDataCallBack(IN LPVOID lpPlayHandle,

IN const BYTE *pucBuffer,

IN INT32 dwBufSize,

IN INT32 dwMediaDataType,

IN LPVOID lpUserParam

)

{

RTP_HDR *pHdr = (RTP_HDR*)pucBuffer;//可通过其他方式解析得到rtp头部

/*

宇视摄像机的负载类型 pHdr->pt:

108 H265

105 H264

26MJPEG

8PCMA

0PCMU

104 AAC

*/

if (pHdr->pt == 105)

{

ProcessV_H264(lpPlayHandle, pucBuffer, dwBufSize);

}

else if (pHdr->pt == 108)

{

ProcessV_H265(lpPlayHandle, pucBuffer, dwBufSize);

}

if (pHdr->pt == 8)

{

ProcessA_PCMA(lpPlayHandle, pucBuffer, dwBufSize);

}

else if (pHdr->pt == 0)

{

ProcessA_PCMU(lpPlayHandle, pucBuffer, dwBufSize);

}

else if (pHdr->pt == 104)

{

ProcessA_AAC(lpPlayHandle, pucBuffer, dwBufSize);

}

}

第3步：解析rtp负载，获取H264/H265/AUDIO帧

获取H264依据：rfc3984 (最新的h264 over rtp 已经是rfc6184)

获取H265依据：rfc7798

一探究竟

其实我们也可以通过Wireshark抓包来一探宇视SDK这种回调数据包格式的秘密。从下图可以看出，宇视SDK取流其实就走的rtsp协议。因此说，SDK给回调函数RealDataCallBack()的buffer其实就是rtp。从这个思路讲，我们解析宇视的码流其实就跟解析rtsp是一个道理。我们费劲调用它的sdk获取并解析码流，还不如使用live555等库直接获取码流。毕竟我们自己研究解析h264/h265 over rtp肯定不如这些库的作者对它们的研究来的深入和全面。

本文地址：https://blog.csdn.net/aflyeaglenku/article/details/107245119

版权声明：本文内容由互联网用户贡献，该文观点仅代表作者本人。本站仅提供信息存储服务，不拥有所有权，不承担相关法律责任。

如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 2386932994@qq.com 举报，一经查实将立刻删除。

相关文章:

linux c中多线程与volatile变量

volatile 修饰的变量表示改变量的值是易变的，编译器不对其进行优化，访问该变量...

环境系统：ubuntu18.04 软件：qt5.12.8一、下载安装包下载地址点击需要的版本(我们这里选择.run的)会跳转到一个选择源的界面，国内选择(cn)...

/******************

* 内核的调试技术

******************/

(1)内核...

二元比较操作符,比较变量或者比较数字.注意数字与字符串的区别. 整数比较 -eq 等于,如:if [ "$a" -eq "$b" ]...

大多数人在使用 bash 时，都会对其进行改造，因为默认的设置真的好难用～

参考以下 ~/.inputrc 设置：

复制代码 代...

目标将命令iostat中的一项数据在zabbix前端监控中显示。iostat命令iostat命令被用于监视系统输入输出设备和cpu的使用情况这里取出磁盘sda的...

详解linux系统配置nginx的负载均衡

负载均衡的几种方式：

1.轮询：默认按照时间顺序对所有服务器一个一个的访问，如果...

一、准备工作： 1台pc机，安装linux操作系统 参考文档linux安装.docx 2 gcc的安装 参考文档gcc的安装.zip...

复制代码 代码如下:#!/bin/bash#this script is use for describle cpu hard me...

linux使用 iftop 实时监控网卡的流量,，具体内容如下所示：

iftop可以用来监控网卡的实时流量(可以指定网段)、反向解析ip、显示...

网友评论

验证码：