android多媒体框架精品.pptVIP

android多媒体框架 讲解人：罗彧成 2010年12月 android体系结构 媒体层结构 opencore基本概念 a、目录结构 b、编译 c、调度器(OsclExecScheduler) d、节点(Node) e、端口(Port) f、消息通讯(Msg) Android体系结构 媒体层结构 媒体层结构 Android-MediaPlayer上层应用程序使用JAVA语言编写，实现逻辑处理；JAVA程序通过调用底层媒体库来实现具体的音视频文件和网络视频播放； JAVA程序通过JNI接口实现对底层媒体库libmedia.so的调用； MediaPlayer在运行的时候，可以大致上分成Client和Server两个部分，它们分别在两个进程中运行，它们之间使用Binder机制实现IPC通讯，图中libmediaplayerservice.so是服务端的实现库。 对于视频文件的播放，MediaPlayer通过调用Opencore提供的功能媒体播放功能来负责实现； 在opencore中负责媒体文件格式解析、音视频数据的解码、以及媒体数据的输出； Opencore通过调用SurfaceFlinger的接口实现视频数据的显示；通过调用AudioFlinger的接口来实现音频数据的回放； 媒体层结构 媒体播放器 功能 MIDIFile-Player 主要负责midi音频文件的播放（*.mid、*.midi、*.smf、*.xmf、*.imi、*.rtttl、*.rtx、*.ota） Vorbis-Player 主要负责ogg格式的音频文件的播放(*.ogg、*.oga) PVPlayer 负责除以上2种播放器之外的所有媒体的播放 媒体层结构-目录结构 目录名 代码描述 media/java 存放java层媒体相关代码 media/jni 媒体层jni接口代码库 media/libmedia 媒体层client端代码库 media/libmediaplayerservice 媒体层server端代码库 media/mediaserver 媒体层服务端应用程序 libs/audioflinger 媒体层audioFlinger代码库 libs/surfaceflinger 媒体层surfaceFlinger代码库 注：以上目录均是基于frameworks/base MediaPlayer-类层次结构图 MediaPlayer类说明 1、上层的JAVA程序通过JNI调用到底层C++代码中的MediaPlayer类来实现媒体流播放； 2、MediaPlayer类首先通过IServiceManager的getService接口获取一个名称为“media.player”的服务，然后通过调用IMediaPlayerService的create接口创建一个mediaplayer播放器，之后所有的操作均通过新创建的这个mediaplayer播放器进行处理，接口为IMediaPlayer； 3、图中所有的以BpXXXX的类均是一个代理类，负责将客户端的请求通过Binder机制发送到服务端实现消息功能的转发，在服务端都有对应的一个BnXXXX的子类负责实现具体的功能； 4、最终的媒体流的播放是通过MediaPlayerInterface接口，调用底层的opencore库来实现的； opencore-目录结构 目录名 说明 android/ 存放opencore与android系统接口代码主要是一些MIO的实现代码 fileformats/ 文件格式解析与合成相关代码 nodes/ opencore节点源码 oscl/ 系统api接口库 pvmi/ opencore媒体框架代码 build_config/ 编译makefile文件 codecs_v2/ 编解码相关代码，其中的omx目录是openMAX的实现代码 engines/ 媒体相关引擎实现代码（player, author,2way） extern_libs_v2/ openMAX头文件 pvplayer.cfg opencore配置文件，配置编解码库 opencore-编译 编译opencore的代码需要到opencore的根目录下执行mm命令编译，不能在opencore的子目录下执行mm编译。 重新编译所有代码： find . -name “*.cpp” –o name “*.h”|xargs touch opencore-调度器 OsclExecScheduler是opencore中一个用户级的调度器，其主要功能如下： A、该调度器负责实现opencore主线程循环 B、调度需要运行的活动对象（ActiveObject） C、负责对象的定时处理 D、在没有对象