区分一些概念
- MPEG-4 是一套用于音频、视频信息的压缩编码标准
- H.264,AVC,编码格式,是MPEG-4 的第10部分
- H.265,HEVC,编码格式,是MPEG-H的第2部分
- mp4,rmvb,mkv,avi是容器,是视频文件的封装格式,提供索引;
H.264
H.264视频码流由若干个GOP组成,GOP由1个I帧和多个P帧/B帧组成
几种帧类型:
- IDR帧:可以单独解码,会清空解码参数
- I帧:可以单独解码,不会清空解码参数
- P帧:前向参考编码帧,
- B帧:双向参考编码帧
每一帧又是由多个Nal单元组成(Nal Unit Header(起始码、Nal Type)、 Nal Unit Body(RBSP,Raw Byte Sequence Payload))
Nal 类型有:SPS、PPS、I Slice(0x67)、P slice(0x65)、B slice
SPS:Sequence Paramater Set 序列参数集;主要记录了编码视频的的 Profile、level、图像宽高等。
PPS:Picture Paramater Set 图像参数集;主要记录编码数据所依赖的参数,如参考帧,图像序列计算方法等。
Islice/Pslice/Bslice:编码帧片数据;在编码I帧、P帧或者B帧的时候会将待编码的图像分成一个或多个Slice(片),对每个Slice单独编码生成Slice编码数据;在多线程的时候多个Slice可以并行编码提高编码速度。
H.265
H.265比H.264多一个VPS(视频参数集)
码流结构一般如下:
启始码+VPS+启始码+SPS+启始码+PPS+启始码+SEI+启始码+I帧+启始码+P帧+启始码+P帧+…
VPS(视频参数集)NALU的头值为0x4001(十六进制),取出2-7位(40 & 0x7E)>>1 =32(十进制)
nalu头固定2字节 2到7位表示nalutype
SPS(序列参数集)NALU的头值为0x4201(十六进制),取出2-7位(42 & 0x7E)>>1 =33(十进制)
PPS(图像参数集)NALU的头值为0x4401(十六进制),取出2-7位(44 & 0x7E)>>1 =34(十进制)
SEI(补充增强信息)NALU的头值为0x4e01(十六进制),取出2-7位(4e & 0x7E)>>1 =39(十进制)
I帧 NALU的头值为0x2601(十六进制),取出2-7位(26 & 0x7E)>>1 =19(十进制)
P帧 NALU的头值为0x0201(十六进制),取出2-7位(02& 0x7E)>>1 =1(十进制)
参考
H.264和H.265(HEVC)深度解析及对比 - 知乎 (zhihu.com)
h264 - 搜索结果 - 知乎 (zhihu.com)