用C语言从MPEG-TS的H264中提取I帧

Question

我正在试验视频，想知道如何从MPEG-TS容器中包含的H264中提取I帧。我想做的是从视频流中生成预览图像。由于I帧被认为是P帧和B帧从中派生的完整图片，是否有可能只提取图片的数据而不必使用编解码器对其进行解码？

我已经做了一些MPEG-TS容器格式的工作，但我不太擅长编解码器。

我是在寻找信息。

非常感谢。

Answer 1

我不是这个领域的专家，但我相信你的问题的答案是否定的。

如果您想将I帧保存为JPEG图像，您仍然需要对视频帧进行“代码转换”，即首先需要使用H264解码器对I帧进行解码，然后使用JPEG编码器对其进行编码。这是因为JPEG编码器不理解H264帧，它只接受未压缩的视频帧作为输入。

另外，由于JPEG编码器的输入是未压缩的帧，因此您可以从任何类型的帧(I/P/B)生成JPEG图像，因为在馈送到编码器之前，JPEG图像已经解码(如果需要，使用参考I帧)。

Answer 2

正如其他人所指出的，解码h.264是很复杂的。您可以编写自己的解码器，但这是一项主要的工作。为什么不使用现有的解码器呢？

英特尔的IPP库包含解码器和示例解码器的基本构建块：

Code Samples for the Intel® Integrated Performance Primitives

这里有libavcodec：

Using libavformat and libavcodec

Revised avcodec_sample.0.4.9.cPP

Answer 3

我也不是这个领域的专家。但我玩过解码游戏。使用这个gstreamer管道从video.mp4中提取预览：

gst-launch -v filesrc location=./video.mp4 ! qtdemux name=demux demux.video_00 ! ffdec_h264 ! videorate ! 'video/x-raw-yuv,framerate=1/1' ! jpegenc ! multifilesink location=image-%05d.jpeg

如果你想写一些代码，用appsrc/appsink元素替换videorate。将控制程序写入管线(见example)：

filesrc location=./video.mp4 ! qtdemux name=demux demux.video_00 ! ffdec_h264 ! appsink
appsrc ! 'video/x-raw-yuv,framerate=1/1' ! jpegenc ! multifilesink location=image-%05d.jpeg

未设置GST_BUFFER_FLAG_DELTA_UNIT标志的缓冲区为I帧。您可以安全地跳过许多帧，并从任何I帧开始解码流。