目录

  1. ffplay的断点调试
  2. (解封装部分)常用结构体以及之间的联络分析
  3. 资料
  4. 收成

工欲善其事,必先利其器,断点调试,对我们梳理流程排查问题十分重要,可以ffmpeg的调试可以在XCode、VS code以及QT等ide进步行方便的调试分析。本篇我们以XCode为例来先介绍下ffplay的断点调试,以ffmpeg4.4版原本进行分析。

一、ffplay的断点调试

首要下载和编译ffmpeg,具体可以参阅音视频开发之旅(33) -穿插编译android运用的FFmpeg(3.x和4.x)
差异在于,我们这次不是穿插编译,而是在Mac上编译装置调试。

./configure --enable-static --disable-shared --enable-debug --disable-doc --disable-x86asm --enable-nonfree  --enable-libvpx --enable-gpl  --enable-opengl --enable-libx264  --enable-libx265 --enable-libvmaf
make -j8
sudo make install

编译成功之后我们会看到几个重要的可执行文件ffmpeg_g、ffprobe_g以及ffplay_g,而接下来的运转和调试就会用到他们。
如安在Xcode下配备调试ffmpeg源码请参阅:www.jianshu.com/p/27a90b113…

我们在ffplay.c的main函数打断点进行进行分析ffplay解封装(read_thread)流程顶用的的结构体。

翻开媒体流

VideoState *stream_open(const char *filename,const AVInputFormat *iformat)

涉及到结构体:AVInputFormat

发动readthread开始读取

    is->read_tid     = SDL_CreateThread(read_thread, "read_thread", is);

分配AVFormatContext内存

 AVFormatContext   ic = avformat_alloc_context();

翻开流媒体文件

int avformat_open_input(AVFormatContext **ps, const char *filename,
                        const AVInputFormat *fmt, AVDictionary **options)

涉及到结构体:AVFormatContext、AVInputFormat、AVDictionary

获取流信息

int avformat_find_stream_info(AVFormatContext *ic, AVDictionary **options)

涉及到结构体:AVStream AVCodecParameters AVRational

循环读取frame数据

 for (;;) {
     ...
     int av_read_frame(AVFormatContext *s, AVPacket *pkt)
     ...
}

涉及到结构体:AVFormatContext、AVPacket等

解封装的流程先到这儿,可见假如想学习ffplay的源码,首要要搞清楚首要流程以及过程中涉及的要害结构体。
下一节我们来具体分析这些结构体。

三、(解封装部分)常用结构体以及之间的联络分析常用结构体以及之间的联络分析

3.1 常用结构体以及之间的联络

FFMPEG中结构体许多。最要害的结构体可以分红以下几类:
a)        解协议(http,rtsp,rtmp,mms)
AVIOContext,URLProtocol,URLContext首要存储视音频运用的协议的类型以及状态。URLProtocol存储输入视音频运用的封装格式。每种协议都对应一个URLProtocol结构。(注意:FFMPEG中文件也被作为一种协议“file”)
b)        解封装(flv,avi,rmvb,mp4)
AVFormatContext首要存储视音频封装格式中包括的信息;AVInputFormat存储输入视音频运用的封装格式。每种视音频封装格式都对应一个AVInputFormat 结构。
c)        解码(h264,mpeg2,aac,mp3)
每个AVStream存储一个视频/音频流的相关数据;每个AVStream对应一个AVCodecContext,存储该视频/音频流运用解码方法的相关数据;每个AVCodecContext中对应一个AVCodec,包括该视频/音频对应的解码器。每种解码器都对应一个AVCodec结构。
d) 存数据
视频的话,每个结构一般是存一帧;音频可能有好几帧
解码前数据:AVPacket
解码后数据:AVFrame
引证自: https://blog.csdn.net/leixiaohua1020/article/details/11693997

他们之间的联络如下:

音视频开发之旅(60) -调试分析FFmpeg (解封装部分的)常用结构体

图片来自:FFMPEG中最要害的结构体之间的联络

3.2。AVFormatContext
该结构体界说在libavformat/Avformat.h中,它是一个贯穿一直的数据结构,许多函数都要用到它作为参数。几个首要变量的作用如下:

struct AVInputFormat *iformat:输入数据的封装格式
struct AVOutputFormat *oformat:输出数据的封装格式
AVIOContext *pb:输入数据的缓存
unsigned int nb_streams:视音频流的个数
AVStream **streams:视音频流
char filename[1024]:文件名
int64_t duration:时长(单位:微秒us,转换为秒需求除以1000000int bit_rate:比特率(单位bps,转换为kbps需求除以1000AVDictionary *metadata:元数据

3.3 AVInputFormat
该结构体界说也在libavformat/Avformat.h中,是解封装器方针首要的变量的作用如下

const char *name: 格式的称号
const char *mime_type: mime类型如 video/avc video/hevc audio/aac等
以及一系列函数指针
int (*read_probe)(const AVProbeData *);
int (*read_packet)(struct AVFormatContext *, AVPacket *pkt);
int (*read_close)(struct AVFormatContext *);
int (*read_seek)(struct AVFormatContext *,
                     int stream_index, int64_t timestamp, int flags);
int (*read_play)(struct AVFormatContext *);
int (*read_pause)(struct AVFormatContext *);
int (*read_seek2)(struct AVFormatContext *s, int stream_index, int64_t min_ts, int64_t ts, int64_t max_ts, int flags);

3.4 AVStream
每个AVStream存储一个视频/音频流的相关数据;是解封装器分离出来的流方针,即解封装的产品,它保存在AVFormatcontext中。

该结构体界说也在libavformat/Avformat.h中, 首要变量如下:

int index;  流索引
int id; 流id
void *priv_data; 流数据
AVRational time_base; 时间基,经过该值可以把PTS,DTS转化为真实的时间;PTS*time_base=真实的时间
int64_t duration:流长度
AVRational sample_aspect_ratio; 采样率
AVRational avg_frame_rate:帧率
AVCodecContext *codec:指向该视频/音频流的AVCodecContext(它们是一一对应的联络)

AVStream是解封装环节的输出,同时也是解码环节的输入,每个AVStream对应一个AVCodecContext,存储该视频/音频流运用解码方法的相关数据;每个AVCodecContext中对应一个AVCodec,包括该视频/音频对应的解码器。每种解码器都对应一个AVCodec结构。
解码部分的数据结构分析我们下一篇再来分析学习。

3.5 AVPacket
存储压缩编码数据相关信息的结构体,保存了解封装之后,解码之前的数据以及PTS、DTS、Duration以及streamId等信息
该结构体界说位于libavcodec/Packet.h中,首要变量如下:

  uint8_t *data; 关于H.264来说。1个AVPacket的data一般对应一个NAL。
int   size:data的巨细
int64_t pts:显示时间戳
int64_t dts:解码时间戳
AVPacketSideData *side_data;附加信息

三、资料

《Android音视频开发》-第八章
Xcode调试ffmpeg源码(十五)
FFMPEG中最要害的结构体之间的联络
FFMPEG结构体分析:AVFormatContext
FFMPEG结构体分析:AVStream
FFMPEG结构体分析:AVPacket

四、收成

经过本篇的学习实践,我们学习到了

  1. 如安在Xcode下断点调试ffmpeg并进行ffplay解封装流程的分析
  2. 了解常用结构体之间的联络:解协议、解封装、解码对应的结构体以及之间的联络
  3. 了解解封装相关的几个要害结构的的首要变量和函数。AVFormatContext、AVInputFormat、AVStream、AVPacket

感谢你的阅览
下一篇我们分析ffmpeg解码部分的常用结构体,欢迎重视公众号“音视频开发之旅”,一同学习成长。
欢迎交流