Staggright AudioPlayerフロー

20029 ワード
ロゾー実験室：http://www.rosoo.net/a/201111/15264.html
Staggrightのaudioに関する部分はAudioPlayerによって処理され、出力はAudioSinkまたはAudioTrackを使用する。
TAG:オーディオ再生   Stage Fright  
Staggrightのaudioに関する部分はAudioPlayerによって処理され、出力はAudioSinkまたはAudioTrackを使用する。

       
       
       
       
    
        
        
        
        
  1. status_t AwesomePlayer::play_l() { 
    2. 
        
        
        
        
  2.     ... 
    3. 
        
        
        
        
  3.     if (mAudioSource != NULL) { 
    4. 
        
        
        
        
  4.         if (mAudioPlayer == NULL) { 
    5. 
        
        
        
        
  5.             if (mAudioSink != NULL) { 
    6. 
        
        
        
        
  6.                 mAudioPlayer = new AudioPlayer(mAudioSink, this); 
    7. 
        
        
        
        
  7.                 mAudioPlayer->setSource(mAudioSource); 
    8. 
        
        
        
        
  8.        ... 
    9. 
        
        
        
        
  9.     } 
    10. 
        
        
        
        
  10.     ... 
    11. 
        
        
        
        
  11. } 
    12.
AwesomePlayerは、init AudioDecoder方法において、audio decoderを確立する。
status_t AwesomePlayer::initAudioDecoder() {
    ...
    if (!strcasecmp(mime, MEDIA_MIMETYPE_AUDIO_RAW)) {
        mAudioSource = mAudioTrack;
    } else {
        mAudioSource = OMXCodec::Create(
                mClient.interface(), mAudioTrack->getFormat(),
                false, // createEncoder
                mAudioTrack);
    }    
    ...
}
プレイを呼び出すとlメソッドの場合はAudioPlayerを確立し、Audio Decoder[mAudioSource]をAudioPlayerに転送します。startメソッドを呼び出したときはaudio Sinkを開いて、AudioSicallback 

       
       
       
       
    
        
        
        
        
  1. status_t AudioPlayer::start(bool sourceAlreadyStarted) { 
    2. 
        
        
        
        
  2.     ... 
    3. 
        
        
        
        
  3.     if (mAudioSink.get() != NULL) { 
    4. 
        
        
        
        
  4.         status_t err = mAudioSink->open( 
    5. 
        
        
        
        
  5.             mSampleRate, numChannels, AudioSystem::PCM_16_BIT, 
    6. 
        
        
        
        
  6.             DEFAULT_AUDIOSINK_BUFFERCOUNT, 
    7. 
        
        
        
        
  7.             &AudioPlayer::AudioSinkCallback, this); 
    8. 
        
        
        
        
  8.     ... 
    9. 
        
        
        
        
  9.     mAudioSink->start(); 
    10. 
        
        
        
        
  10.     ... 
    11. 
        
        
        
        
  11. } 
    12.
の後にAudioSinkがSampleデータを必要とするときはAudioSink Cazeckにデータをフィードバックします。ここでfillBuffer関数を呼び出して、audio decoderから復号後のSampleデータを読みだします。

       
       
       
       
    
        
        
        
        
  1. size_t AudioPlayer::AudioSinkCallback( 
    2. 
        
        
        
        
  2.         MediaPlayerBase::AudioSink *audioSink, 
    3. 
        
        
        
        
  3.         void *buffer, size_t size, void *cookie) { 
    4. 
        
        
        
        
  4.     AudioPlayer *me = (AudioPlayer *)cookie; 
    5. 
        
        
        
        
  5.   
    6. 
        
        
        
        
  6.     LOGI("[%s:%d]_____ enter AudioPlayer::AudioSinkCallback size = %d"
    7. 
        
        
        
        
  7. , __FUNCTION__, __LINE__, size); 
    8. 
        
        
        
        
  8.     
    9. 
        
        
        
        
  9.     return me->fillBuffer(buffer, size); 
    10. 
        
        
        
        
  10. } 
    11. 
        
        
        
        
  11.  
    12. 
        
        
        
        
  12. void AudioPlayer::AudioCallback(int event, void *info) { 
    13. 
        
        
        
        
  13.     if (event != AudioTrack::EVENT_MORE_DATA) { 
    14. 
        
        
        
        
  14.         return; 
    15. 
        
        
        
        
  15.     } 
    16. 
        
        
        
        
  16.     AudioTrack::Buffer *buffer = (AudioTrack::Buffer *)info; 
    17. 
        
        
        
        
  17.     size_t numBytesWritten = fillBuffer(buffer->raw, buffer->size); 
    18. 
        
        
        
        
  18.     buffer->size = numBytesWritten; 
    19. 
        
        
        
        
  19. } 
    20. 
        
        
        
        
  20.  
    21. 
        
        
        
        
  21. size_t AudioPlayer::fillBuffer(void *data, size_t size) { 
    22. 
        
        
        
        
  22.     ... 
    23. 
        
        
        
        
  23.     size_t size_done = 0; 
    24. 
        
        
        
        
  24.     size_t size_remaining = size; 
    25. 
        
        
        
        
  25.     while (size_remaining > 0) { 
    26. 
        
        
        
        
  26.         ... 
    27. 
        
        
        
        
  27.         err = mSource->read(&mInputBuffer, &options); 
    28. 
        
        
        
        
  28.         ... 
    29. 
        
        
        
        
  29.         memcpy((char *)data + size_done, 
    30. 
        
        
        
        
  30.               (const char *)mInputBuffer->data() + mInputBuffer->range_offset(), 
    31. 
        
        
        
        
  31.               copy); 
    32. 
        
        
        
        
  32.   mInputBuffer->set_range(mInputBuffer->range_offset() + copy, 
    33. 
        
        
        
        
  33.                           mInputBuffer->range_length() - copy); 
    34. 
        
        
        
        
  34.         size_done += copy; 
    35. 
        
        
        
        
  35.         size_remaining -= copy; 
    36. 
        
        
        
        
  36.         ... 
    37. 
        
        
        
        
  37.     } 
    38. 
        
        
        
        
  38.     ... 
    39. 
        
        
        
        
  39. } 
    40.
ここのmSourceは実はdecoderであり、そのread方法はmAudioTrackのread方法を呼び出してDataSourceの復号されていないデータを取得し、復号したデータを返す。総プロセスは以下の通りです。

       
       
       
       
    
        
        
        
        
  1. AudioSink 
    2. 
        
        
        
        
  2.     | 
    3. 
        
        
        
        
  3.     +- AudioPlayer#AudioSinkCallback 
    4. 
        
        
        
        
  4.                         | 
    5. 
        
        
        
        
  5.                         +- AudioDecoder#read 
    6. 
        
        
        
        
  6.                                          | 
    7. 
        
        
        
        
  7.                                          +- Extractor::MediaSource#read 
    8.
を参照してください。
  • stagefrightフレーム（六）-Audio Playbackのフロー
    •  
    AudioTrackを使ってPCMのオーディオ数を再生します。
    MediaPlayerは完全なオーディオファイルのみを操作できます。直接にPCMのオーディオデータを操作することはできません。もし私たちが復号を通じてPCMデータソースを得たら、どうやってそれらを再生しますか？そうです。AudioTrackというクラス（MediaPlayer内部でもこのクラスを呼び出して本格的にオーディオストリームを再生します。）のDEMOでAudioTrackの使い方をデモンストレーションしました。
    TAG:オーディオ再生   AudioTrack   PCMを再生  
    AndroidのMediaPlayerはAudioとvideoの再生機能を含み、AndroidのインターフェイスではMusicとVideoの両方のアプリケーションがMediaPlayerを呼び出して実現される。MediaPlayerは、最下階にOpenCore（PacketVideo）のライブラリに基づいて実現され、MediaPlayerプログラムを構築するために、プロセス間通信などの内容も含まれています。このようなプロセス間通信の基礎はAndroidベースライブラリにおけるBinderメカニズムです。しかし、このクラスは完全なオーディオファイルのみを操作できます。直接にPCMのオーディオデータを操作することはできません。もし私たちが復号を通じてPCMデータソースを得たら、どうやってそれらを再生しますか？そうです。AudioTrackというカテゴリー（MediaPlayer内部でもこのクラスを呼び出して本格的にオーディオストリームを再生します。）のDEMOを使って、AudioTrackをどのように使うかをデモしました。
    2011-5-21 07:04:17アップロード
    添付ファイルをダウンロード(28.48 KB)
    このクラスはAudioTrackに対して簡単にカプセル化されました。
    
            
            
            
            
      
             
             
             
             
    1. public class MyAudioTrack {
      2. 
             
             
             
             
    2.         int mFrequency;//     
      3. 
             
             
             
             
    3.         int mChannel;//    
      4. 
             
             
             
             
    4.         int mSampBit;//      
      5. 
             
             
             
             
    5.         AudioTrack mAudioTrack;
      6. 
             
             
             
             
    6.         public MyAudioTrack(int frequency, int channel, int sampbit){ 
      7. 
             
             
             
             
    7.                 mFrequency = frequency; 
      8. 
             
             
             
             
    8.                 mChannel = channel; 
      9. 
             
             
             
             
    9.                 mSampBit = sampbit; 
      10. 
             
             
             
             
    10.         }
      11. 
             
             
             
             
    11.         public void init(){ 
      12. 
             
             
             
             
    12.                 if (mAudioTrack != null){ 
      13. 
             
             
             
             
    13.                         release(); 
      14. 
             
             
             
             
    14.                 } 
      15. 
             
             
             
             
    15.  
      16. 
             
             
             
             
    16. //                
      17. 
             
             
             
             
    17. int minBufSize = AudioTrack.getMinBufferSize(mFrequency,  
      18. 
             
             
             
             
    18. mChannel, mSampBit); 
      19. 
             
             
             
             
    19.                  
      20. 
             
             
             
             
    20. //STREAM_ALARM：    
      21. 
             
             
             
             
    21. //STREAM_MUSCI：   ，  music  
      22. 
             
             
             
             
    22. //STREAM_RING：   
      23. 
             
             
             
             
    23. //STREAM_SYSTEM：     
      24. 
             
             
             
             
    24. //STREAM_VOCIE_CALL：     
      25. 
             
             
             
             
    25. mAudioTrack = new AudioTrack(AudioManager.STREAM_MUSIC, 
      26. 
             
             
             
             
    26. mFrequency,mChannel,mSampBit,minBufSize, AudioTrack.MODE_STREAM); 
      27. 
             
             
             
             
    27. //AudioTrack  MODE_STATIC MODE_STREAM    。
      28. 
             
             
             
             
    28. //STREAM              write            audiotrack 。
      29. 
             
             
             
             
    29. //      socket       ，            ，
      30. 
             
             
             
             
    30. //         PCM  ，  write audiotrack。
      31. 
             
             
             
             
    31. //            JAVA  Native   ，      。
      32. 
             
             
             
             
    32. // STATIC            ，             buffer，      audiotrack，
      33. 
             
             
             
             
    33. //         write 。AudioTrack       buffer    。 
      34. 
             
             
             
             
    34. //               ，              。 
      35. 
             
             
             
             
    35.                 mAudioTrack.play();         
      36. 
             
             
             
             
    36.         } 
      37. 
             
             
             
             
    37. public void release(){ 
      38. 
             
             
             
             
    38.                 if (mAudioTrack != null){ 
      39. 
             
             
             
             
    39.                         mAudioTrack.stop();                                                
      40. 
             
             
             
             
    40.                         mAudioTrack.release(); 
      41. 
             
             
             
             
    41.                 } 
      42. 
             
             
             
             
    42.         } 
      43. 
             
             
             
             
    43.          
      44. 
             
             
             
             
    44.         public void playAudioTrack(byte []data, int offset, int length){ 
      45. 
             
             
             
             
    45.                 if (data == null || data.length == 0){return ;} 
      46. 
             
             
             
             
    46.                 try { 
      47. 
             
             
             
             
    47.                         mAudioTrack.write(data, offset, length); 
      48. 
             
             
             
             
    48.                 } catch (Exception e) { 
      49. 
             
             
             
             
    49.                         Log.i("MyAudioTrack", "catch exception..."); 
      50. 
             
             
             
             
    50.                 } 
      51. 
             
             
             
             
    51.         } 
      52. 
             
             
             
             
    52.          
      53. 
             
             
             
             
    53.         public int getPrimePlaySize(){ 
      54. 
             
             
             
             
    54.                 int minBufSize = AudioTrack.getMinBufferSize(mFrequency,  
      55. 
             
             
             
             
    55. mChannel, mSampBit);
      56. 
             
             
             
             
    56.                 return minBufSize * 2; 
      57. 
             
             
             
             
    57.         } 
      58. 
             
             
             
             
    58. } 
      59.
    m AudioTrack.write（data，off set，length）；この関数は、ハードウエアの再生にデータを書き込む鍵です。
    Windows CMDコマンドラインバッチ処理でDNSアドレスを修正します。
    Android異常android.os.Network OnMainThreadException