stagefright概述

最近杂七杂八的忙碌着,前几天看了下这部分主要是stagefright模块的,所以更改下名字

做了挺长时间的android平台的媒体开发,对之前的分析进行一个阶段性的总结。

一、android结构图(上下文关系)

二、android目录结构

自从android4.2版本之后,媒体的相关代码都放到framework/av/的目录中,俗称"AV工作者",呵呵(本地代码不是太健全,目录我手动敲,公司代码健全,直接导出目录树)

[plain] view
plain
copyprint?

  1. |----- media
  2. |       |
  3. |       |-- libmedia_native   //JNI交互部分,从名字可以看出来
  4. |       |
  5. |       |-- libmedia          //一个服务端的代理,对应用层提供相关的接口,和服务端交互
  6. |       |
  7. |       |-- libmediaplayerservice //服务段 (分发器,交换机的作用,个人理解)
  8. |       |
  9. |       |-- libstagefright  //一个服务端的分支,支持工作
  10. |       |
  11. |       |-- mediaserver     //媒体进程,管理媒体一些相关信息,关注较少
  12. |       |
  13. |       |-- mtp           //文件夹操作媒体的相关东西
  14. |       |

再进一步,我们看一下stagefright的里面包括什么东东

[plain] view
plain
copyprint?

  1. |-- stagefright
  2. |   |
  3. |   |-- codecs   //提供解码器实现
  4. |   |
  5. |   |-- colorconversion   //颜色空间转换
  6. |   |
  7. |   |-- foundation   //基本数据结构的实现
  8. |   |
  9. |   |-- httplive   //m3u8解析
  10. |   |
  11. |   |-- id3        // ID3 TAG解析(一般用于MP3格式的metadata容器)
  12. |   |
  13. |   |-- include    //基本头文件
  14. |   |
  15. |   |-- matroska   //matroska文件解析
  16. |   |
  17. |   |-- mpeg2ts    //mpeg2ts文件解析和数据获取一些处理
  18. |   |
  19. |   |-- mp4        //MP4的格式解析
  20. |   |
  21. |   |-- omx        //IOMX接口实现
  22. |   |
  23. |   |-- rtsp       //rtsp文件解析
  24. |   |
  25. |   |-- wifi-display //关于wifi的处理
  26. |   |
  27. |   |-- yuv         //YUV数据的处理
  28. |   |

三、“演讲恐惧着”的接口事件

本地媒体的事件处理接口

stage fright 英文的意思就: 演讲恐惧者,AwesomePlayer 功能强大的播放器

在android中也是这个这样,“演讲恐惧者”有强大的接口和事件处理接口,但是,它不去实现,而是全部通过AwesomePlayer来完成的,在其初始化时,就直接实例化功能强大播放器并且对其设置监听。代码如下:

StageFrightPlayer.cpp

[cpp] view
plain
copyprint?

  1. StagefrightPlayer::StagefrightPlayer()
  2. : mPlayer(new AwesomePlayer) {
  3. ALOGV("StagefrightPlayer");
  4. mPlayer->setListener(this);
  5. }

接口基本调用流程:

1.Java层通过JNI调用C++侧的mediaplayer相关接口

2.mediaPlayerService中创建服务器端客户端,分别实例化相关播放器,这里会把接口事件调用到具体的播放器如:本地媒体调用stagefright,流媒体调用NuPlayerDriver

3.stagefright会调用AwesomePlayer相应接口,其实流媒体侧和本地媒体类似的,最后会调用Nuplayer

媒体事件类型

[cpp] view
plain
copyprint?

  1. enum media_event_type {
  2. MEDIA_NOP               = 0, // interface test message
  3. MEDIA_PREPARED          = 1, //媒体准备完毕
  4. MEDIA_PLAYBACK_COMPLETE = 2, //播放事件
  5. MEDIA_BUFFERING_UPDATE  = 3, //Buffer更新事件,更新的值是百分比
  6. MEDIA_SEEK_COMPLETE     = 4, //seek事件
  7. MEDIA_SET_VIDEO_SIZE    = 5, //视频尺寸
  8. MEDIA_TIMED_TEXT        = 99, //字幕相关的,基本不用
  9. MEDIA_ERROR             = 100, //错误
  10. MEDIA_INFO              = 200, //媒体详细信息
  11. };

stagefright模块结构

stagefright模块结构图

1.mediaPlayerservice调用Stagefright相应的接口

2.Stagefright调用AwesomePlayer相应的接口

3.AwesomePlayer调用OMXCode读取ES数据,并且进行解码的处理

4.OMXCodec调用MediaSource的read函数来获取音视频的数据

5.OMXCodec调用Android的IOMX接口,其实就是Stagefrightde中的 OMX实现

6. OMX调用OMXMaster,而OMXMaster调用OMXPluginBase的接口,这里也可以获取外部的Codec的插件,最终调用对应的解码组建来完成解码,不同解码组件不太相同,后面会做介绍

7.解码完成后,通过OMXcodec返回的裸码流数据会在Awesomeplayer中调用Render模块,实现渲染,从而给用户提供了画面

版权声明:本文为博主原创文章,未经博主允许不得转载。

时间: 2024-10-18 17:09:45

stagefright概述的相关文章

android媒体--stagefright概述【一】

近期杂七杂八的忙碌着,前几天看了下这部分主要是stagefright模块的,所以更改下名字 做了挺长时间的android平台的媒体开发,对之前的分析进行一个阶段性的总结. 一.android结构图(上下文关系) 二.android文件夹结构 自从android4.2版本号之后,媒体的相关代码都放到framework/av/的文件夹中,俗称"AV工作者",呵呵(本地代码不是太健全,文件夹我手动敲,公司代码健全,直接导出文件夹树) |----- media | | | |-- libmed

第一课 MongoDB 概述与安装

1.课程大纲 本次课主要介绍 MongoDB 背景知识和 MongoDB 的安装与配置,让大家对 MongoDB 有一个初认识. 其基本的知识点包含: NoSQL数据库概述 MongoDB 数据库简单介绍 Linux 下安装 MongoDB 数据库 Mac 和 Windows 下安装 MongoDB 数据库 2.课程简单介绍 MongoDB是由MongoDB.inc研发的一款NoSQL类型的文档型数据库,MonogoDB名字来源于英文单词humongous,这个单词的意思是巨大无比.暗喻Mong

java面向对象:面向对象的思想和概述

1:面向对象思想 面向对象是基于面向过程的编程思想. 面向过程:强调的是每一个功能的步骤 面向对象:强调的是对象,然后由对象去调用功能 2:面向对象的思想特点 A:是一种更符合我们思想习惯的思想 B:可以将复杂的事情简单化 C:将我们从执行者变成了指挥者 开发,设计,特征 面向对象开发 就是不断的创建对象,使用对象,指挥对象做事情. 面向对象设计 其实就是在管理和维护对象之间的关系. 面向对象特征 封装(encapsulation) 继承(inheritance) 多态(polymorphism

java基础总结——概述

  一.java语言概述 来自维基百科 https://zh.wikipedia.org/wiki/Java Java是一种计算机编程语言,拥有跨平台.面向对象.泛型编程的特性,广泛应用于企业级Web应用开发和移动应用开发. 任职于太阳微系统的詹姆斯·高斯林等人于1990年代初开发Java语言的雏形,最初被命名为Oak,目标设置在家用电器等小型系统的程序语言,应用在电视机.电话.闹钟.烤面包机等家用电器的控制和通信.由于这些智能化家电的市场需求没有预期的高,Sun公司放弃了该项计划.随着1990

译-BMC Remedy Action Request System权限控制概述

原文链接:Access control overview 说明: BMC Remedy Action Request System是BMC ITSM产品平台,简称AR 或者Remedy,可实现基于ITIL标准的整个IT管理流程的实施定制.该平台可实现多种权限级别的管理,包括人员.组.角色,以及表.字段.行级别等.本文可以用作其他对权限要求比较精细的系统参考. 为了便于理解,部分名词翻译如下: Server:服务器Form (or table):表单Field (or column):字段Acti

Aircrack-ng: (1) 概述

作者:枫雪庭 出处:http://www.cnblogs.com/FengXueTing-px/ 欢迎转载 目录 一.概述 二.工具与命令介绍 Linux命令 (1) ifconfig (2) macchanger (3) iwconfig (4) iwlist Aircrack-ng 工具 (1) airmon-ng (2) airodump-ng (3) aireplay-ng (4) aircrack-ng 其他Aircrack-ng工具 一.概述 Aircrack-ng是一款用于破解无线

NHibernate框架与BLL+DAL+Model+Controller+UI 多层架构十分相似--『Spring.NET+NHibernate+泛型』概述、知识准备及介绍(一)

原文://http://blog.csdn.net/wb09100310/article/details/47271555 1. 概述 搭建了Spring.NET+NHibernate的一个数据查询系统.之前没用过这两个框架,也算是先学现买,在做完设计之 后花了一周搭建成功了.其中,还加上了我的一些改进思想,把DAO和BLL之中相似且常用的增删改查通过泛型T抽象到了DAO和BLL的父类中,其DAO 和BLL子类只需继承父类就拥有了这些方法.和之前的一个数据库表(视图)对应一个实体,一个实体对应一

排序算法--概述和参考

1 概述 排序有内部排序和外部排序,内部排序是数据记录在内存中进行排序,而外部排序是因排序的数据很大,一次不能容纳全部的排序记录,在排序过程中需要访问外存. 我们这里说说八大排序就是内部排序. 当n较大,则应采用时间复杂度为O(nlog2n)的排序方法:快速排序.堆排序或归并排序序. 快速排序:是目前基于比较的内部排序中被认为是最好的方法,当待排序的关键字是随机分布时,快速排序的平均时间最短: 2 参考 http://blog.csdn.net/hguisu/article/details/77

Css3之高级-7 Css动画(概述、关键帧、动画属性)

一.动画概述 动画概念 - 过渡属性只能模拟动画效果 - animation 属性可以制作类似 Flash 动画 - 通过关键帧控制动画的每一步 - 使元素从一种样式逐渐变化为另一种样式 - 实现复杂的动画效果 - 浏览器兼容性 - 最新版本支持良好 - Chrome 和 Safari 需要前缀 -webkit- - FireFox 需要前缀 -moz- - Opera 需要前缀 -o- 动画示例 - 声明动画 - 创建一个已命名的动画 - 使用 @keyframes 声明动画的关键帧 - 为元