播放器实战专题(一)

2022-03-21 17:49:15 浏览数 (1)

前言

大家周末好,最近一个月打算专门学习播放器相关的内容,偏实战化,也算是把这段时间学习的一些基础知识,综合起来,不然一直搞理论,没有实战,提高不了多少,所学的东西,终究还是要用到实际当中去,才能产生它的价值;所以下面的这个月加油!

在6月的时候,出去面试的时候,发现了一些问题,于是乎,在下班之余在弥补一些不足之处:

今天先从ffplay开始分享我的播放器学习笔记之路:

FFplay框架分析:

在FFmpeg源码工程里面有一个源文件是ffplay.c:

它是FFmpeg源码自带的播放器,调用FFmpeg和SDL API实现一个非常有用的播放器,我们经常逛的b站,它也有有一个开源项目ijkplayer就是基于ffplay.c进行二次开发的。

下面我们先来卡一下FFplay整体框架:

FFplay框架

1、播放器初始化:

  • 初始化packet queue
  • 初始化frame queue
  • 初始化clock

2、线程的划分:

  • 数据读取线程:
    • 打开媒体文件
    • 打开对应码流的decoder以及初始化对应的audio、video、subtitle(字幕)输出
    • 创建decoder线程,audio、video和subtitle的解码线程独立
    • 调用av_read_frame读取packet,并根据steam_index放入不同stream对应的packer队列
  • 音视解码:
    • 从packet queue读取packet,解出frame后放入frame queue
  • 视频解码:
    • 从packet queue读取packet,解出frame后放入frame queue
  • 字幕解码:
    • 从packet queue读取packet,解出frame后放入frame queue
  • 音频播放(或者回调函数):
    • 从frame queue读取frame进行播放
  • 视频播放(ffplay目前是在main主线程进行视频播放):
    • 从frame queue读取frame进行播放
  • 字幕播放(ffplay目前是在main主线程进行字幕播放):
    • 从frame queue读取frame进行播放
  • 控制响应(播放、暂停、快进、快退等)(ffplay目前是在main主线程进行播放控制)

3、packet队列的设计:

  • 线程安全、支持互斥、等待、唤醒
  • 缓存数据大小
  • 缓存包数
  • 队列播放可持续时间
  • 进队列、出队列

4、frame队列的设计:

  • 线程的安全、支持互斥、等待、唤醒
  • 缓存帧数
  • 支持读取数据而不出队列
  • 进队列、出队列

5、音视频同步:

  • 音频同步
  • 视频同步
  • 外部时钟同步

6、音频处理:

  • 音量调节
  • 静音
  • 重采样

7、视频处理:

  • 图像格式转换YUV->RGB
  • 图像缩放1280720(720p)->800480

8、播放器控制:

  • 播放
  • 暂停
  • 停止
  • 快进、快退
  • 逐帧
  • 静音

我是txp,我们下期见!

0 人点赞