Android MediaCodec解码h264原始帧

Question

我正在使用Android MediaCodec API来解码h264帧。我可以解码和渲染视图上的帧。我的问题是解码器错过了很多帧，尤其是第一些帧。 DecodeMediaCodec.dequeueOutputBuffer（）返回-1。 a约150 h264帧，仅解码43帧。我找不到问题所在。这是我的代码。

/** 
* init decoder 
*/ 
private void initDecodeMediaCodec() 
{ 
    mDecodeMediaCodec = MediaCodec.createDecoderByType(MIME_TYPE); 
    MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, 
      VIDEO_WIDTH_640, 
      VIDEO_HEIGHT_480); 

    mDecodeMediaCodec.configure(format, 
      new Surface(mRemoteVideoView.getSurfaceTexture()), 
      null, 
      0); 
    mDecodeMediaCodec.start(); 
    mDecodeInputBuffers = mDecodeMediaCodec.getInputBuffers(); 
    System.out.println("decode-----" 
      + mDecodeMediaCodec.getCodecInfo().getName()); 
} 

解码器初始化后，我将启动解码器线程。

/** 
* 
* @param frameData 
*/ 
private void decode() 
{ 
    new Thread(new Runnable() 
    { 
     @Override 
     public void run() 
     { 
      while (true) 
      { 
       ByteBuffer decodeDataBuffer = null; 
       try 
       { 
        //take h264 frame from cache queue 
        decodeDataBuffer = decodeDataQuene.take(); 
       } 
       catch (InterruptedException e) 
       { 
        e.printStackTrace(); 
       } 


       BufferInfo info = new BufferInfo(); 
       int inputBufferIndex = mDecodeMediaCodec.dequeueInputBuffer(-1); 
       System.out.println("inputBufferIndex: " + inputBufferIndex); 
       if (inputBufferIndex >= 0) 
       { 
        ByteBuffer buffer = mDecodeInputBuffers[inputBufferIndex]; 
        buffer.clear(); 
        buffer.put(decodeDataBuffer.array()); 
        mDecodeMediaCodec.queueInputBuffer(inputBufferIndex, 
          0, 
          decodeDataBuffer.array().length, 
          0, 
          0); 
        decodeDataBuffer.clear(); 
        decodeDataBuffer = null; 
       } 

       int outputBufferIndex = mDecodeMediaCodec.dequeueOutputBuffer(info, 
         1000); 
       System.out.println("outputBufferIndex: " 
         + outputBufferIndex); 
       do 
       { 

        if (outputBufferIndex == MediaCodec.INFO_TRY_AGAIN_LATER) 
        { 
         //no output available yet 
        } 
        else if (outputBufferIndex == MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED) 
        { 
         //encodeOutputBuffers = mDecodeMediaCodec.getOutputBuffers(); 
        } 
        else if (outputBufferIndex == MediaCodec.INFO_OUTPUT_FORMAT_CHANGED) 
        { 
         MediaFormat formats = mDecodeMediaCodec.getOutputFormat(); 
         //mediaformat changed 
        } 
        else if (outputBufferIndex < 0) 
        { 
         //unexpected result from encoder.dequeueOutputBuffer 
        } 
        else 
        { 
         mDecodeMediaCodec.releaseOutputBuffer(outputBufferIndex, 
           true); 

         outputBufferIndex = mDecodeMediaCodec.dequeueOutputBuffer(info, 
           0); 
         System.out.println("inner outputBufferIndex: " 
           + outputBufferIndex); 
        } 
       } while (outputBufferIndex > 0); 
      } 
     } 
    }).start(); 
} 

任何人都知道这是为什么呢？我希望你help.My Android设备的Nexus 7

Answer 1

获得-1从MediaCodec#dequeueOutputBuffer()回是正常的。这仅表示它尚未准备好任何输出。

并非如此，您可以将MediaCodec缓冲区中的编码数据传回并立即获得解码缓冲区。您将数据缓冲区发送到mediaserver进程，该进程会将其馈送到硬件AVC解码器中，该解码器可能仍在初始化或可能只是坐在几个帧上。解码过程完成后，解码后的数据将通过mediaserver传回给您的应用程序进程。

诀窍是，queueInputBuffer()调用立即返回。在正常操作中，解码器的输入端将在输出端之前运行数帧。当您完成喂料输入时，您设置了流尾标志，并且当您在输出中看到EOS时，您知道您已达到最后。

您可以在bigflake和Grafika中找到各种工作示例。 DecodeEditEncodeTest和EncodeDecodeTest示例仅使用原始H.264，其他使用MediaExtractor和MediaMuxer来处理MP4文件包装。