具有IBasicVideoEffect亚型的NV12

Question

我正在编写UWP应用程序，让用户有机会添加视频效果的视频流接收到一些相机。我使用C# MediaFrameReader在C++/CX OpenCV中发送SoftwareBitmap以添加效果。之后，我注意到C#有IBasicVideoEffect接口，可以直接向CaptureElement添加效果。(https://learn.microsoft.com/en-us/windows/uwp/audio-video-camera/custom-video-effects)

但是根据MSDN，IBasicVideEffect实现只有在ARGB32子类型下才能很好地实现。不幸的是，我的相机只有NV12子类型。有没有一种方法可以将context.OutputFrame.SoftwareBitmap转换为ARGB32格式，然后在屏幕上显示它而不将其转换回NV12？

Answer 1

我找到了解决方案。如果文章说有这些方法来实现视频效果。第二个是Win2D.uwp和IDirect3DDevice。这对我来说是有效的，没有来自NV12的任何转换。此外，我通过使用GPU资源来达到性能，就像MSDN所说的那样。

我的代码示例：

public async Task<bool> TryStartAsync()
    if (Ready == false)
    {
        return false;
    }
    if (_effectDefinition is null)
    {
        _effectDefinition = new VideoEffectDefinition(
            typeof(VideoEffectProcessor).FullName
        );
    }
    var effect = await Capture.AddVideoEffectAsync(
        _effectDefinition, 
        MediaStreamType.VideoPreview
    );
    effect.SetProperties(Settings);

    Destination.Source = Capture;
    await Capture.StartPreviewAsync();
    InProcess = true;
    return true;
}