AVFrame到RGB - 解码文物

Question

我想以编程方式将mp4视频文件（使用h264编解码器）转换为单个RGB图像。使用命令行，这看起来像：

​​

使用这个命令产生了很好的图片集。但是，当我尝试以编程方式做同样的一些图像（可能B和P帧）看起来很奇怪（例如，有不同的信息等扭曲的区域）。读取和转换的代码如下：

AVFrame *frame = avcodec_alloc_frame(); 
AVFrame *frameRGB = avcodec_alloc_frame(); 

AVPacket packet; 

int buffer_size=avpicture_get_size(PIX_FMT_RGB24, m_codecCtx->width, 
    m_codecCtx->height); 
uint8_t *buffer = new uint8_t[buffer_size]; 

avpicture_fill((AVPicture *)frameRGB, buffer, PIX_FMT_RGB24, 
    m_codecCtx->width, m_codecCtx->height); 

while (true) 
{ 
    // Read one packet into `packet` 
    if (av_read_frame(m_formatCtx, &packet) < 0) { 
     break; // End of stream. Done decoding. 
    } 

    if (avcodec_decode_video(m_codecCtx, frame, &buffer_size, packet.data, packet.size) < 1) { 
     break; // Error in decoding 
    } 

    if (!buffer_size) { 
     break; 
    } 

    // Convert 
    img_convert((AVPicture *)frameRGB, PIX_FMT_RGB24, (AVPicture*)frame, 
     m_codecCtx->pix_fmt, m_codecCtx->width, m_codecCtx->height); 

    // RGB data is now available in frameRGB for further processing 
} 

我如何转换视频流，使每个最终图像显示所有图像数据，使信息从B和P帧包含在所有的帧？

[编辑：]表示伪像的样本图像是在这里：http://imageshack.us/photo/my-images/201/sampleq.jpg/

问候，

Answer 1

如果avcodec_decode_video第三个参数返回一个空值，这并不意味着该错误。这意味着该框架还没有准备好。您需要继续阅读框架，直到值变为非零。

if (!buffer_size) { 
    continue; 
} 

UPD

尝试添加了检查，并只显示关键帧，这将有助于隔离问题。

while (true) 
{ 
    // Read one packet into `packet` 
    if (av_read_frame(m_formatCtx, &packet) < 0) { 
    break; // End of stream. Done decoding. 
    } 

    if (avcodec_decode_video(m_codecCtx, frame, &buffer_size, 
     packet.data, packet.size) < 1) 
    { 
    break; // Error in decoding 
    } 

    if (!buffer_size) { 
    continue; // <-- It's important! 
    } 

    // check for key frame 
    if (packet.flags & AV_PKT_FLAG_KEY) 
    { 
    // Convert 
    img_convert((AVPicture *)frameRGB, PIX_FMT_RGB24, (AVPicture*)frame, 
     m_codecCtx->pix_fmt, m_codecCtx->width, m_codecCtx->height); 
    } 
}