一 概括
FFMPEG 的libavcodec完成音视频编码或解码,H.264解码主要由H264.c实现,H.264.c 往下调用X264 实现编解码功能,H.264解码过程包含初始化/解码/关闭三个部分。
解码原理为:
将NAL 数据位流输入到H.264解码器中,熵解码模块解码后输出量化系数X;系数经过反量化和反变化得到残差数据R; 解码器使用从码流中解析的头信息生成预测块Pred,然后把Pred与残差R求和得到数据块DF;每个块df通过去除块效应滤波得到解码图像的重建块F。
二 FFMPEG 解码工作流程分析
如下为FFMPEG AVCodec 开出的解码API ,解码流程如下:
avcodec_find_decoder();
avcodec_alloc_context3();
avcodec_open2();//打开解码器
avcodec_send_packet();//send packet
avcodec_receive_frame();//receive frame
avcodec_free_context();
使用者无需区分具体的codec 类型,编写代码时,不用关注这些细节问题。在AVCodec 中,它对各种Codec 进行抽象化,屏蔽了不同编解码器的差异,我们需重点关注三个函数指针:
int (*init)(AVCodecContext *);
int (*decode)(AVCodecContext *, void *outdata, int *outdata_size, AVPacket *avpkt);
int (*close)(AVCodecContext *);
这三个函数指针指向具体的解码器API ,比如H264, 那么在H264dec.c 这个文件里会由如下一段定义:
AVCodec ff_h264_decoder = {
.name = "h264",
.type = AVMEDIA_TYPE_VIDEO,
.id = AV_CODEC_ID_H264,
.priv_data_size = sizeof(H264Context),
.init = h264_decode_init,
.close = h264_decode_end,
.decode = h264_decode_frame,
...
}
因此对于一个解码器使用而言,其实特别单纯的,初始化,解码,退出,当然里面具体实现非常复杂。
那么FFMPEG 解码部分对外开出的API ,与init/close/decode() 又是一个怎样的调用关系?
由上图可知avcodec_send_packet() / avcodec_receive_frame() 都往下call avctx->codec->decode(), 其实早期版本的FFMPEG 解码只有一支avcodec_decode_video2() 的,并没拆分成send/receive 两支。
领取音视频开发学习资料:https://docs.qq.com/doc/DQm1VTHBlQmdmTlN2
本文暂时没有评论,来添加一个吧(●'◡'●)