AVMutableComposition中的黑框

Question

这个问题与AVMutableComposition - Blank/Black frame between videos assets非常相关，但由于我没有使用AVAssetExportSession，所以答案并不适合我的问题。

我正在使用AVMutableComposition创建视频合成，并且我正在使用AVAssetReader读取它(我需要帧数据，我不能使用AVPlayer)，但我的视频块之间经常有黑色帧(音频中没有明显的毛刺)。

我将我的组合创建为

AVMutableCompositionTrack *compositionVideoTrack = [composition addMutableTrackWithMediaType:AVMediaTypeVideo preferredTrackID:kCMPersistentTrackID_Invalid];
AVMutableCompositionTrack *compositionAudioTrack = [composition addMutableTrackWithMediaType:AVMediaTypeAudio preferredTrackID:kCMPersistentTrackID_Invalid];

NSMutableArray* durationList = [NSMutableArray array];
NSMutableArray* videoList= [NSMutableArray array];
NSMutableArray* audioList= [NSMutableArray array];

for (NSInteger i = 0; i < [clips count]; i++)
{
    AVURLAsset *myasset = [clips objectAtIndex:i];
    AVAssetTrack *clipVideoTrack = [[myasset tracksWithMediaType:AVMediaTypeVideo] objectAtIndex:0];
    [videoList addObject:clipVideoTrack];

    AVAssetTrack *clipAudioTrack = [[myasset tracksWithMediaType:AVMediaTypeAudio] objectAtIndex:0];
    [audioList addObject:clipAudioTrack];

    CMTime clipDuration = [myasset duration];
    CMTimeRange clipRange = CMTimeRangeMake(kCMTimeZero, clipDuration);
    [durationList addObject:[NSValue valueWithCMTimeRange:clipRange]];
}

[compositionVideoTrack insertTimeRanges:durationList ofTracks:videoList atTime:kCMTimeZero error:nil];
[compositionAudioTrack insertTimeRanges:durationList ofTracks:audioList atTime:kCMTimeZero error:nil];

我也试着在我的作曲中手动插入每首曲目，但我也有同样的现象。

谢谢

Answer 1

经过几个小时的测试，我终于解决了这个问题。有两件事我需要改变。1)在创建资产时添加'precise‘选项。

 NSDictionary *options = @{AVURLAssetPreferPreciseDurationAndTimingKey:@YES};
 AVURLAsset *videoAsset3 = [AVURLAsset URLAssetWithURL:clip3URL options:options];

2)不要使用

CMTime duration3 = [videoAsset3 duration];

改为使用

AVAssetTrack *videoAsset3Track = [[videoAsset3 tracksWithMediaType:AVMediaTypeVideo] objectAtIndex:0];
CMTime duration3 = videoAsset3Track.timeRange.duration;

在我将AVPlayer的背景颜色设置为蓝色后，我发现了这一点，然后我注意到出现了蓝色的框架，所以问题出在计时上。一旦我更改到上面的设置，不同的视频在使用时可以很好地对齐：

 AVMutableCompositionTrack *videoTrack = [mixComposition addMutableTrackWithMediaType:AVMediaTypeVideo
                                                                        preferredTrackID:kCMPersistentTrackID_Invalid];

[videoTrack insertTimeRange:CMTimeRangeMake(kCMTimeZero, duration3)
                        ofTrack:videoAsset3Track
                         atTime:kCMTimeZero error:&error];

Answer 2

尝试创建两个视频轨道，然后在添加剪辑时在这两个轨道之间交替。

Answer 3

calculate Last CMTime对于insertTimeRange:非常重要对于新的AVAsset我遇到了同样的问题，并用以下方法解决了它：

 func addChunk(media: AVAsset) throws {
    let duration = self.mutableComposition.tracks.last?.timeRange.end
    try mutableComposition.insertTimeRange(CMTimeRange(start: .zero, duration: media.duration), of: media, at: duration ?? .zero)
}