stagefright简介.docxVIP

1、 StageFright介绍 Android froyo版本多媒体引擎做了变动，新添加了stagefright框架，并且默认情况android选择stagefright，并没有完全抛弃 opencore，主要是做了一个OMX层，仅仅是对 opencore的omx-component部分做了引用。stagefright是在MediaPlayerService这一层加入的，和 opencore是并列的。Stagefright在 Android中是以shared library的形式存在(libstagefright.so)，其中的module -- AwesomePlayer可用来播放video/audio。 AwesomePlayer提供许多API，可以让上层的应用程序(Java/JNI)来调用。2、 StageFright数据流封装 2.1》由数据源DataSource生成MediaExtractor。通过MediaExtractor::Create(dataSource)来 实现。Create方法通过两步来生成相应的 MediaExtractor（MediaExtractor.cpp）： 通过dataSource-sniff来探测数据类型 生成相应的Extractor： if (!strcasecmp(mime, MEDIA_MIMETYPE_CONTAINER_MPEG4) || !strcasecmp(mime, audio/mp4)) { return new MPEG4Extractor(source); } else if (!strcasecmp(mime, MEDIA_MIMETYPE_AUDIO_MPEG)) { return new MP3Extractor(source, meta); } else if (!strcasecmp(mime, MEDIA_MIMETYPE_AUDIO_AMR_NB) || !strcasecmp(mime, MEDIA_MIMETYPE_AUDIO_AMR_WB)) { return new AMRExtractor(source); } else if (!strcasecmp(mime, MEDIA_MIMETYPE_CONTAINER_WAV)) { return new WAVExtractor(source); } else if (!strcasecmp(mime, MEDIA_MIMETYPE_CONTAINER_OGG)) { return new OggExtractor(source); } else if (!strcasecmp(mime, MEDIA_MIMETYPE_CONTAINER_MATROSKA)) { return new MatroskaExtractor(source); } else if (!strcasecmp(mime, MEDIA_MIMETYPE_CONTAINER_MPEG2TS)) { return new MPEG2TSExtractor(source); } 2.2》把音视频轨道分离，生成mVideoTrack和mAudioTrack两个MediaSource。代码如下（AwesomePlayer.cpp）： if (!haveVideo !strncasecmp(mime, video/, 6)) { setVideoSource(extractor-getTrack(i)); haveVideo = true; } else if (!haveAudio !strncasecmp(mime, audio/, 6)) { setAudioSource(extractor-getTrack(i)); haveAudio = true; } 2.3》得到的这两个MediaSource，只具有parser功能，没有decode功能。还需要对这两个MediaSource做进一步的包装，获取了两个MediaSource（具有parse和decode功能）：mVideoSource = OMXCodec::Create( mCerface(), mVideoTrack-getFormat(), false, // createEncoder mVideoTrack, NULL, flags);mAudioSource = OMXCodec::Create( mCerface(), mAudioTrack-getFormat(), false, // createEncoder mAudioTrack); 当调用MediaSource.start()方法后，它的内部就会开始从数据源获取数据并解析，等到缓冲区满后便停