stagefright概述「建议收藏」

2022-11-01 14:11:25 浏览数 (1)

大家好，又见面了，我是你们的朋友全栈君。

一、android结构图（上下文关系）

二、android目录结构

自从android4.2版本之后，媒体的相关代码都放到framework/av/的目录中,俗称”AV工作者”，呵呵（本地代码不是太健全，目录我手动敲，公司代码健全，直接导出目录树）

[plain] view plain copy print ?

  1. |—– media
  2. | |
  3. | |– libmedia_native //JNI交互部分，从名字可以看出来
  4. | |
  5. | |– libmedia //一个服务端的代理，对应用层提供相关的接口，和服务端交互
  6. | |
  7. | |– libmediaplayerservice //服务段 （分发器，交换机的作用，个人理解）
  8. | |
  9. | |– libstagefright //一个服务端的分支，支持工作
  10. | |
  11. | |– mediaserver //媒体进程，管理媒体一些相关信息，关注较少
  12. | |
  13. | |– mtp //文件夹操作媒体的相关东西
  14. | |

再进一步，我们看一下stagefright的里面包括什么东东

[plain] view plain copy print ?

  1. |– stagefright
  2. | |
  3. | |– codecs //提供解码器实现
  4. | |
  5. | |– colorconversion //颜色空间转换
  6. | |
  7. | |– foundation //基本数据结构的实现
  8. | |
  9. | |– httplive //m3u8解析
  10. | |
  11. | |– id3 // ID3 TAG解析（一般用于MP3格式的metadata容器）
  12. | |
  13. | |– include //基本头文件
  14. | |
  15. | |– matroska //matroska文件解析
  16. | |
  17. | |– mpeg2ts //mpeg2ts文件解析和数据获取一些处理
  18. | |
  19. | |– mp4 //MP4的格式解析
  20. | |
  21. | |– omx //IOMX接口实现
  22. | |
  23. | |– rtsp //rtsp文件解析
  24. | |
  25. | |– wifi-display //关于wifi的处理
  26. | |
  27. | |– yuv //YUV数据的处理
  28. | |

三、“演讲恐惧着”的接口事件

本地媒体的事件处理接口

stage fright 英文的意思就： 演讲恐惧者，AwesomePlayer 功能强大的播放器

在android中也是这个这样，“演讲恐惧者”有强大的接口和事件处理接口，但是，它不去实现，而是全部通过AwesomePlayer来完成的，在其初始化时，就直接实例化功能强大播放器并且对其设置监听。代码如下：

StageFrightPlayer.cpp

[cpp] view plain copy print ?

  1. StagefrightPlayer::StagefrightPlayer()
  2. : mPlayer(new AwesomePlayer) {
  3. ALOGV(“StagefrightPlayer”);
  5. mPlayer->setListener(this);
  6. }

接口基本调用流程：

1.Java层通过JNI调用C 侧的mediaplayer相关接口

2.mediaPlayerService中创建服务器端客户端，分别实例化相关播放器，这里会把接口事件调用到具体的播放器如：本地媒体调用stagefright，流媒体调用NuPlayerDriver

3.stagefright会调用AwesomePlayer相应接口,其实流媒体侧和本地媒体类似的，最后会调用Nuplayer

媒体事件类型

[cpp] view plain copy print ?

  1. enum media_event_type {
  2. MEDIA_NOP = 0, // interface test message
  3. MEDIA_PREPARED = 1, //媒体准备完毕
  4. MEDIA_PLAYBACK_COMPLETE = 2, //播放事件
  5. MEDIA_BUFFERING_UPDATE = 3, //Buffer更新事件，更新的值是百分比
  6. MEDIA_SEEK_COMPLETE = 4, //seek事件
  7. MEDIA_SET_VIDEO_SIZE = 5, //视频尺寸
  8. MEDIA_TIMED_TEXT = 99, //字幕相关的，基本不用
  9. MEDIA_ERROR = 100, //错误
  10. MEDIA_INFO = 200, //媒体详细信息
  11. };

stagefright模块结构

stagefright模块结构图

1.mediaPlayerservice调用Stagefright相应的接口

2.Stagefright调用AwesomePlayer相应的接口

3.AwesomePlayer调用OMXCode读取ES数据，并且进行解码的处理

4.OMXCodec调用MediaSource的read函数来获取音视频的数据

5.OMXCodec调用Android的IOMX接口，其实就是Stagefrightde中的 OMX实现

6. OMX调用OMXMaster，而OMXMaster调用OMXPluginBase的接口，这里也可以获取外部的Codec的插件，最终调用对应的解码组建来完成解码，不同解码组件不太相同，后面会做介绍

7.解码完成后，通过OMXcodec返回的裸码流数据会在Awesomeplayer中调用Render模块，实现渲染，从而给用户提供了画面

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 举报，一经查实，本站将立刻删除。

发布者：全栈程序员栈长，转载请注明出处：https://javaforall.cn/203974.html原文链接：https://javaforall.cn

android c#

0 人点赞