该博文是基于:
ffmpeg:V 5.1.2
FLV格式是H2.64视频和aac音频复用得到的格式,我们所说的FLV解复用就是将FLV格式的数据的H2.64视频帧和aac音频帧分离。
分离完成后,音频是纯数据无法播放,需要添加ADTS头,视频帧有的格式需要添加起始码。
ADTS头结构及代码实现参考:AAC音频格式ADTS头详解
起始码,pps sps等详细内容参考:H2.64和H2.65编码区别
解复用文件的一般流程:
// 分配上下文,创建一个AVFormatContext对象,需要avformat_free_context释放空间
ifmt_ctx = avformat_alloc_context();
// 打开输入文件,读取媒体文件的头信息,需要调用avformat_close_input关闭句柄
avformat_open_input(&ifmt_ctx, filename, NULL, NULL);
//获取媒体文件的流信息,不会改变文件的逻辑地址
int ret = avformat_find_stream_info(ifmt_ctx, 0);
//找到用户想要寻找的流的信息(音频流,视频流,字幕流等),并获取对应的索引
video_index = av_find_best_stream(ifmt_ctx, AVMEDIA_TYPE_VIDEO, -1, -1, NULL, 0);
//创建并且初始化pkt包
pkt = av_packet_alloc();
av_init_packet(pkt);
//将包数据读取到pkt中
av_read_frame(ifmt_ctx, pkt);
//将包信息送入过滤器进行过滤 获得有效数据
av_bsf_send_packet(bsf_ctx, pkt);
//将包信息从过滤器中读出,输入一个包可能输出多个包,所以需要while一直读取。
av_bsf_receive_packet(bsf_ctx, pkt);
ffmpeg对于文件的数据操作还有一个重要的函数:
int av_seek_frame(AVFormatContext *s, int stream_index, int64_t timestamp,int flags);
该函数类似于C库函数中文件操作函数seek是类似的,用于移动文件指针的偏移位置,该函数可以实现类似播放器中快进,快退的功能。接口应用参考:av_seek_frame接口详解。
ffmpeg解复用FLV的源码(源码已经过验证):