android媒体--stagefright概述

2024-05-08 00:58

本文主要是介绍android媒体--stagefright概述,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

最近杂七杂八的忙碌着,前几天看了下这部分主要是stagefright模块的,所以更改下名字

做了挺长时间的Android平台的媒体开发,对之前的分析进行一个阶段性的总结。

 

一、android结构图(上下文关系)

 

 

 

二、android目录结构

自从android4.2版本之后,媒体的相关代码都放到framework/av/的目录中,俗称"AV工作者",呵呵(本地代码不是太健全,目录我手动敲,公司代码健全,直接导出目录树)

[plain]  view plain copy
print ?
  1. |----- media  
  2. |       |  
  3. |       |-- libmedia_native   //JNI交互部分,从名字可以看出来  
  4. |       |  
  5. |       |-- libmedia          //一个服务端的代理,对应用层提供相关的接口,和服务端交互  
  6. |       |  
  7. |       |-- libmediaplayerservice //服务段 (分发器,交换机的作用,个人理解)  
  8. |       |  
  9. |       |-- libstagefright  //一个服务端的分支,支持工作  
  10. |       |  
  11. |       |-- mediaserver     //媒体进程,管理媒体一些相关信息,关注较少  
  12. |       |  
  13. |       |-- mtp           //文件夹操作媒体的相关东西  
  14. |       |  

再进一步,我们看一下stagefright的里面包括什么东东

[plain]  view plain copy
print ?
  1. |-- stagefright  
  2. |   |  
  3. |   |-- codecs   //提供解码器实现  
  4. |   |  
  5. |   |-- colorconversion   //颜色空间转换  
  6. |   |  
  7. |   |-- foundation   //基本数据结构的实现  
  8. |   |  
  9. |   |-- httplive   //m3u8解析  
  10. |   |  
  11. |   |-- id3        // ID3 TAG解析(一般用于MP3格式的metadata容器)  
  12. |   |  
  13. |   |-- include    //基本头文件  
  14. |   |   
  15. |   |-- matroska   //matroska文件解析  
  16. |   |  
  17. |   |-- mpeg2ts    //mpeg2ts文件解析和数据获取一些处理  
  18. |   |  
  19. |   |-- mp4        //MP4的格式解析  
  20. |   |  
  21. |   |-- omx        //IOMX接口实现  
  22. |   |  
  23. |   |-- rtsp       //rtsp文件解析  
  24. |   |  
  25. |   |-- wifi-display //关于wifi的处理  
  26. |   |  
  27. |   |-- yuv         //YUV数据的处理  
  28. |   |  

 三、“演讲恐惧着”的接口事件

本地媒体的事件处理接口

 

 

 stage fright 英文的意思就: 演讲恐惧者,AwesomePlayer 功能强大的播放器

在android中也是这个这样,“演讲恐惧者”有强大的接口和事件处理接口,但是,它不去实现,而是全部通过AwesomePlayer来完成的,在其初始化时,就直接实例化功能强大播放器并且对其设置监听。代码如下:

 

StageFrightPlayer.cpp

[cpp]  view plain copy
print ?
  1. StagefrightPlayer::StagefrightPlayer()  
  2.     : mPlayer(new AwesomePlayer) {  
  3.     ALOGV("StagefrightPlayer");  
  4.   
  5.     mPlayer->setListener(this);  
  6. }  

接口基本调用流程:

1.Java层通过JNI调用C++侧的mediaplayer相关接口

2.mediaPlayerService中创建服务器端客户端,分别实例化相关播放器,这里会把接口事件调用到具体的播放器如:本地媒体调用stagefright,流媒体调用NuPlayerDriver

3.stagefright会调用AwesomePlayer相应接口,其实流媒体侧和本地媒体类似的,最后会调用Nuplayer

 

媒体事件类型

[cpp]  view plain copy
print ?
  1. enum media_event_type {  
  2.     MEDIA_NOP               = 0, // interface test message  
  3.     MEDIA_PREPARED          = 1, //媒体准备完毕  
  4.     MEDIA_PLAYBACK_COMPLETE = 2, //播放事件  
  5.     MEDIA_BUFFERING_UPDATE  = 3, //Buffer更新事件,更新的值是百分比  
  6.     MEDIA_SEEK_COMPLETE     = 4, //seek事件  
  7.     MEDIA_SET_VIDEO_SIZE    = 5, //视频尺寸  
  8.     MEDIA_TIMED_TEXT        = 99, //字幕相关的,基本不用  
  9.     MEDIA_ERROR             = 100, //错误  
  10.     MEDIA_INFO              = 200, //媒体详细信息  
  11. }; 

stagefright模块结构

 

                                                                                             stagefright模块结构图

 

1.mediaPlayerservice调用Stagefright相应的接口

2.Stagefright调用AwesomePlayer相应的接口

3.AwesomePlayer调用OMXCode读取ES数据,并且进行解码的处理

4.OMXCodec调用MediaSource的read函数来获取音视频的数据

5.OMXCodec调用Android的IOMX接口,其实就是Stagefrightde中的 OMX实现

6. OMX调用OMXMaster,而OMXMaster调用OMXPluginBase的接口,这里也可以获取外部的Codec的插件,最终调用对应的解码组建来完成解码,不同解码组件不太相同,后面会做介绍

7.解码完成后,通过OMXcodec返回的裸码流数据会在Awesomeplayer中调用Render模块,实现渲染,从而给用户提供了画面

这篇关于android媒体--stagefright概述的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/968872

相关文章

Android NDK版本迭代与FFmpeg交叉编译完全指南

《AndroidNDK版本迭代与FFmpeg交叉编译完全指南》在Android开发中,使用NDK进行原生代码开发是一项常见需求,特别是当我们需要集成FFmpeg这样的多媒体处理库时,本文将深入分析A... 目录一、android NDK版本迭代分界线二、FFmpeg交叉编译关键注意事项三、完整编译脚本示例四

Android与iOS设备MAC地址生成原理及Java实现详解

《Android与iOS设备MAC地址生成原理及Java实现详解》在无线网络通信中,MAC(MediaAccessControl)地址是设备的唯一网络标识符,本文主要介绍了Android与iOS设备M... 目录引言1. MAC地址基础1.1 MAC地址的组成1.2 MAC地址的分类2. android与I

Python datetime 模块概述及应用场景

《Pythondatetime模块概述及应用场景》Python的datetime模块是标准库中用于处理日期和时间的核心模块,本文给大家介绍Pythondatetime模块概述及应用场景,感兴趣的朋... 目录一、python datetime 模块概述二、datetime 模块核心类解析三、日期时间格式化与

Android 实现一个隐私弹窗功能

《Android实现一个隐私弹窗功能》:本文主要介绍Android实现一个隐私弹窗功能,本文通过实例代码给大家介绍的非常详细,感兴趣的朋友一起看看吧... 效果图如下:1. 设置同意、退出、点击用户协议、点击隐私协议的函数参数2. 《用户协议》、《隐私政策》设置成可点击的,且颜色要区分出来res/l

Android实现一键录屏功能(附源码)

《Android实现一键录屏功能(附源码)》在Android5.0及以上版本,系统提供了MediaProjectionAPI,允许应用在用户授权下录制屏幕内容并输出到视频文件,所以本文将基于此实现一个... 目录一、项目介绍二、相关技术与原理三、系统权限与用户授权四、项目架构与流程五、环境配置与依赖六、完整

Android 12解决push framework.jar无法开机的方法小结

《Android12解决pushframework.jar无法开机的方法小结》:本文主要介绍在Android12中解决pushframework.jar无法开机的方法,包括编译指令、框架层和s... 目录1. android 编译指令1.1 framework层的编译指令1.2 替换framework.ja

Android开发环境配置避坑指南

《Android开发环境配置避坑指南》本文主要介绍了Android开发环境配置过程中遇到的问题及解决方案,包括VPN注意事项、工具版本统一、Gerrit邮箱配置、Git拉取和提交代码、MergevsR... 目录网络环境:VPN 注意事项工具版本统一:android Studio & JDKGerrit的邮

Android实现定时任务的几种方式汇总(附源码)

《Android实现定时任务的几种方式汇总(附源码)》在Android应用中,定时任务(ScheduledTask)的需求几乎无处不在:从定时刷新数据、定时备份、定时推送通知,到夜间静默下载、循环执行... 目录一、项目介绍1. 背景与意义二、相关基础知识与系统约束三、方案一:Handler.postDel

Android使用ImageView.ScaleType实现图片的缩放与裁剪功能

《Android使用ImageView.ScaleType实现图片的缩放与裁剪功能》ImageView是最常用的控件之一,它用于展示各种类型的图片,为了能够根据需求调整图片的显示效果,Android提... 目录什么是 ImageView.ScaleType?FIT_XYFIT_STARTFIT_CENTE

Android实现在线预览office文档的示例详解

《Android实现在线预览office文档的示例详解》在移动端展示在线Office文档(如Word、Excel、PPT)是一项常见需求,这篇文章为大家重点介绍了两种方案的实现方法,希望对大家有一定的... 目录一、项目概述二、相关技术知识三、实现思路3.1 方案一:WebView + Office Onl