执行失败: 0x80070057，当使用dxva2通过ffmpeg解码视频时

Question

我已经成功地使用ffmpeg实现了一个视频播放器。我现在试图使用硬件解码，但我面临一些问题。我在这里找到了一个作为起点的帖子：https://ffmpeg.org/pipermail/libav-user/2014-August/007323.html

我已经更新了代码，为解码器设置了必要的东西。更新后的代码可在这里获得：https://drive.google.com/file/d/0B5ufHdoDzA4ieVk5UVpxcDNzRHc/view?usp=sharing

我就是这样用它来初始化解码器的：

// Prepare the decoding context
AVCodec *codec = nullptr;
_codecContext = _avFormatContext->streams[_streamIndex]->codec;
if ((codec = avcodec_find_decoder(_codecContext->codec_id)) == 0)
{
    std::cout << "Unsupported video codec!" << std::endl;
    return false;
}

_codecContext->thread_count = 1;  // Multithreading is apparently not compatible with hardware decoding
InputStream *ist = new InputStream();
ist->hwaccel_id = HWACCEL_AUTO;
ist->hwaccel_device = "dxva2";
ist->dec = codec;
ist->dec_ctx = _codecContext;
_codecContext->coded_width = _width;
_codecContext->coded_height = _height;

_codecContext->opaque = ist;
dxva2_init(_codecContext);

_codecContext->get_buffer2 = ist->hwaccel_get_buffer;
_codecContext->get_format = GetHwFormat;
_codecContext->thread_safe_callbacks = 1;

if (avcodec_open2(_codecContext, codec, nullptr) < 0)
{
    std::cout << "Video codec open error" << std::endl;
    return false;
}

下面是上面提到的GetHwFormat的定义：

AVPixelFormat GetHwFormat(AVCodecContext *s, const AVPixelFormat *pix_fmts)
{
    InputStream* ist = (InputStream*)s->opaque;
    ist->active_hwaccel_id = HWACCEL_DXVA2;
    ist->hwaccel_pix_fmt = AV_PIX_FMT_DXVA2_VLD;
    return ist->hwaccel_pix_fmt;
}

当我打开一个高清分辨率或更低的mp4 (用h264编码)视频时，一切似乎都很好。然而，当我尝试像3840x2160这样的更高分辨率的视频时，我会反复地看到以下错误：

Failed to execute: 0x80070057
Hardware accelerator failed to decode picture

几秒钟后，我还会得到以下错误：

co located POCs unavailable

而且视频没有被正确显示:我在视频中得到了大量的人工制品，而且它是滞后的。我检查了ffmpeg源代码中的第一个错误。由于参数无效，IDirectXVideoDecoder_Execute似乎失败了。既然这一切都发生了，我肯定错过了什么，但我想不出是什么。我发现的唯一与此错误相关的帖子是因为多线程，但在打开编解码器之前，我将thread_count设置为1。

此问题发生在我的主计算机上，它有以下规格：

• i7-4790 CPU @ 3.6GHz
• RAM 16 GB
• 英特尔高清图形4600
• Windows 8.1

同样的问题不会发生在我的第二台计算机上，它有以下规格：

• i7 4510U @2 2GHz
• RAM 8GB
• NVIDIA GeForce GTX 750 GTX
• Windows 10

如果我在主计算机上使用DXVAChecker，它会说我的显卡支持DXVA2 for H264_VLD_*，我可以看到在播放视频时正在调用Microsoft (DXVA2_DecodeDeviceCreated、DXVA2_DecodeDeviceBeginFrame、DXVA2_DecodeDeviceGetBuffer、DXVA2_DecodeDeviceExecute、DXVA2_DecodeDeviceEndFrame)。

我也没有看到在有硬件解码的版本和非硬件解码的版本之间GPU使用量(在这两台计算机上)有任何增加；但是，我确实看到CPU使用率下降了(但没有我预期的那么多)。这也很奇怪。

请注意，我尝试了FFmpeg网站上提供的Windows版本，以及我用--启用-dxva2 2编译的版本。我已经找了很多东西了，但是我找不到我做错了什么。

希望有人能帮我，或者给我举个更好的例子？

Answer 1

我终于发现了我的问题所在。调用avcodec_decode_video2之后，我没有像这样更新数据包的大小和数据指针：

int r = avcodec_decode_video2(_codecContext, frame, &frameDecoded, &pkt);
pkt.size -= r;
pkt.data += r;

现在，视频被正确地解码了，我再也没有人工制品了。

另外，关于延迟问题，我认为这是一个单独的问题，与错误消息无关，而且由于将映像复制回CPU内存所需的时间。如果您需要这样做，而不是像我在上面的问题中一样在代码中使用av_image_copy_plane，您可能想看看VLC做了什么，或者在这个链接https://software.intel.com/en-us/articles/copying-accelerated-video-decode-frame-buffers上。我在我的机器上做了一个快速测试，它减少了7或8倍的时间。