多线程处理实时照片

Question

我正在处理一个使用.frameProcessor修改每个帧的PHLivePhoto。这些帧似乎是按顺序处理的，这很慢。我可以让PHLivePhotoEditingContext.frameProcessor利用多个内核吗？

func processLivePhoto(input: PHContentEditingInput) {
    guard let context = PHLivePhotoEditingContext(livePhotoEditingInput: input)
        else { fatalError("not a Live Photo editing input") }
    context.frameProcessor = { frame, _ in
        let renderedFrame = expensiveOperation(using: frame.image)
        return renderedFrame
    }
    // ...logic for saving
}

Answer 1

在这种情况下，恐怕没有办法并行化帧处理。你必须牢记：

• 视频帧需要按顺序写入。
• 并行处理的帧越多，所需的内存就越多。
• 核心图像正在GPU上处理这些帧，而GPU通常一次只能处理一帧。
• 您的expensiveOperation无论如何都不会在frameProcessor块中真正发生，因为实际呈现是由此作用域之外的框架处理的。