在iOS上使用HEVC编码器输出巨大的视频

Question

我有一个项目，目前使用H.264编码器记录视频在iOS上。我想尝试使用iOS 11中新的HEVC编码器来减少文件大小，但发现使用HEVC编码器会导致文件大小急剧膨胀。这是一个GitHub上的项目，它展示了这个问题--它同时使用H.264和H.265 (HEVC)编码器将帧从摄像机写入文件，并将产生的文件大小打印到控制台。

AVFoundation类的设置如下：

class VideoWriter {
    var avAssetWriterInput: AVAssetWriterInput
    var avAssetWriter: AVassetWriter
    init() {
        if #available(iOS 11.0, *) {
            avAssetWriterInput = AVAssetWriterInput(mediaType: AVMediaType.video, outputSettings: [AVVideoCodecKey:AVVideoCodecType.hevc, AVVideoHeightKey:720, AVVideoWidthKey:1280])
        }
        avAssetWriterInput.expectsMediaDataInRealTime = true
        do {
            let url = directory.appendingPathComponent(UUID.init().uuidString.appending(".hevc"))
            avAssetWriter = try AVAssetWriter(url: url, fileType: AVFileType.mp4)
            avAssetWriter.add(avAssetWriterInput)
            avAssetWriter.movieFragmentInterval = kCMTimeInvalid
        } catch {
            fatalError("Could not initialize AVAssetWriter \(error)")
        }
    }
...

然后帧写成这样：

    func write(sampleBuffer buffer: CMSampleBuffer) {
        if avAssetWriter.status == AVAssetWriterStatus.unknown {
            avAssetWriter.startWriting()
            avAssetWriter.startSession(atSourceTime: CMSampleBufferGetPresentationTimeStamp(buffer))
         }
        if avAssetWriterInput.isReadyForMoreMediaData {
            avAssetWriterInput.append(buffer)
        }
    }

当他们进入AVCaptureVideoDataOutputSampleBufferDelegate时。按照我录制的质量(720 p或1080 p)，HEVC编码视频的文件大小应该是相同H.264编码视频的40-60%，当我在iOS上使用默认的相机应用程序时，我看到了这一点，但是当我使用上面提到的AVAssetWriter (或者在上面链接的项目中)时，我看到HEVC的文件大小大约是H.264的三倍。要么我做错了什么，要么HEVC编码器工作不正常。我是遗漏了什么，还是有办法让HEVC通过AVFoundation工作？

Answer 1

您是否尝试过指定比特率等？详情如下：

NSUInteger bitrate = 50 * 1024 * 1024;  // 50 Mbps
NSUInteger keyFrameInterval = 30;
NSString *videoProfile = AVVideoProfileLevelH264HighAutoLevel;
NSString *codec = AVVideoCodecH264;
if (@available(iOS 11, *)) {
    videoProfile = (NSString *)kVTProfileLevel_HEVC_Main_AutoLevel;
    codec = AVVideoCodecTypeHEVC;
}

NSDictionary *codecSettings = @{AVVideoAverageBitRateKey: @(bitrate),
                              AVVideoMaxKeyFrameIntervalKey: @(keyFrameInterval),
                              AVVideoProfileLevelKey: videoProfile};
NSDictionary *videoSettings = @{AVVideoCodecKey: codec,
                              AVVideoCompressionPropertiesKey: codecSettings,
                              AVVideoWidthKey: @((NSInteger)resolution.width),
                              AVVideoHeightKey: @((NSInteger)resolution.height)};

AVAssetWriterInput *videoWriterInput = [AVAssetWriterInput assetWriterInputWithMediaType:AVMediaTypeVideo outputSettings:videoSettings];
...

据我所知，在相同的比特率下，H264和HEVC的文件大小应该是相同的，但是HEVC的质量应该更好。

Answer 2

使用exportSession.fileLengthLimit = 1048576 * 10 //10 MB

10 is是硬编码数字。根据您所需的比特率使用。