H.264中NAL、Slice与frame意思及相互关系

NAL nal_unit_type中的1(非IDR图像的编码条带)、2(编码条带数据分割块A)、3(编码条带数据分割块B)、4(编码条带数据分割块C)、5(IDR图像的编码条带)种类型

与

Slice种的三种编码模式：I_slice、P_slice、B_slice

还有frame的3种类型：I frame、P frame、 B frame之间有什么映射关系么？

最后，NAL nal_unit_type中的6(SEI)、7(SPS)、8(PPS)属于什么帧呢？

不好意思，文档看得头晕晕的了，问题比较多~~~

PS：偶是新人 没多少分，要是哪位达人帮忙下的话  我就给我所有的分，好像只有十几分

1 frame的数据可以分为多个slice.

每个slice中的数据，在帧内预测只用到自己slice的数据， 与其他slice 数据没有依赖关系。

NAL 是用来将编码的数据进行大包的。 比如，每一个slice 数据可以放在NAL 包中。

I frame 是自己独立编码，不依赖于其他frame 数据。

P frame 依赖 I frame 数据。

B frame 依赖 I frame, P frame 或其他 B frame 数据。

建议楼主看一点视频编码的书吧， 自己看标准还是很难懂的。

那NAL nal_unit_type中的哪几种类型是I frame，现在只能确定nal_unit_type==5(IDR图像的编码条带)是I frame

sps、pps、SEI算不算I frame呢？ 还有 属于编码条带分割的DPA、DPB、DPC呢？

能给个从视频流中提取I frame 和P frame的方法么？

谢谢楼上的回复，我也翻了两三本视频的书籍，感觉都是一个样的，都很少说到点的。楼主能推荐一两本好点的视频书籍么？

没人回答么？？

直接给你代码吧 ：)

//

// H.264 NAL type

enum H264NALTYPE{

H264NT_NAL = 0,

H264NT_SLICE,

H264NT_SLICE_DPA,

H264NT_SLICE_DPB,

H264NT_SLICE_DPC,

H264NT_SLICE_IDR,

H264NT_SEI,

H264NT_SPS,

H264NT_PPS,

};

int H264GetNALType(LPVOID pBSBuf, const LONG nBSLen)

{

if ( nBSLen < 5 )  // 不完整的NAL单元

return H264NT_NAL;

UINT8* pBS = (UINT8 *)pBSBuf;

ULONG nType = pBS[4] & 0×1F;  // NAL类型在固定的位置上

if ( nType <= H264NT_PPS )

return nType;

return 0;

}

其中 H264NT_SLICE_IDR 是关键帧，H264NT_SLICE 是P帧

一个frame是可以分割成多个Slice来编码的，而一个Slice编码之后被打包进一个NAL单元，不过NAL单元除了容纳Slice编码的码流外，还可以容纳其他数据，比如序列参数集SPS。

1、NAL、Slice与frame意思及相互关系

NAL指网络提取层，里面放一些与网络相关的信息

Slice是片的意思，264中把图像分成一帧(frame)或两场(field)，而帧又可以分成一个或几个片(Slilce)；片由宏块(MB)组成。宏块是编码处理的基本单元。

2、NAL nal_unit_type中的1(非IDR图像的编码条带)、2(编码条带数据分割块A)、3(编码条带数据分割块B)、4(编码条带数据分割块C)、5(IDR图像的编码条带)种类型

与 Slice种的三种编码模式：I_slice、P_slice、B_slice

NAL nal_unit_type 里的五种类型，代表接下来数据是表示啥信息的和具体如何分块。

I_slice、P_slice、B_slice 表示I类型的片、P类型的片，B类型的片.其中I_slice为帧内预测模式编码；P_slice为单向预测编码或帧内模式；B_slice 中为双向预测或帧内模式。

3、还有frame的3种类型：I frame、P frame、 B frame之间有什么映射关系么？

I frame、P frame、 B frame关系同 I_slice、P_slice、B_slice，slice和frame区别在问题1中已经讲明白。

4、最后，NAL nal_unit_type中的6(SEI)、7(SPS)、8(PPS)属于什么帧呢？

NAL nal_unit_type 为序列参数集(SPS)、图像参数集(PPS)、增强信息(SEI)不属于啥帧的概念。表示后面的数据信息为序列参数集(SPS)、图像参数集(PPS)、增强信息(SEI)。

能给个从视频流中提取I frame 和P frame的方法么？

可以看slice中的头信息。

查找NAL起始码，然后读取NAL类型不就可以了吗

pBS[4] & 0×1F

怎么是第5个字节的第五位啊  前面4字节分别是什么(值)？

NAL单元的第1个字节的低五位吧？

然后在问个问题，怎么在一段视频流中检测 NAL的开始和结束？

引用 5 楼 hugeice 的回复:

直接给你代码吧 ：)

//

// H.264 NAL type

enum H264NALTYPE{

H264NT_NAL = 0,

H264NT_SLICE,

H264NT_SLICE_DPA,

H264NT_SLICE_DPB,

H264NT_SLICE_DPC,

H264NT_SLICE_IDR,

H264NT_SEI,

H264NT_SPS,

H264NT_PPS,

};

int H264GetNALType(LPVOID pBSBuf, const LONG nBSLen)

{

if ( nBSLen < 5 )  // 不完整的NAL单元…

H.264视频流是以NAL单元传送的。。。但在一个NAL单元里面，可能既存放I-Slice(P-Slice或B-Slice)，同事也可能存放图像的其他信息

那么 是不是说 I frame， P frame，B frame是把收到的NAL单元中的VCL的信息先提取出，然后按内容进行I、P、B frame分类？

而我们只能通过NAL nal_unit_type来判别NAL单元中数据的类型哈~~~