如何用AVAssetReader播放声音

Question

我正在使用AVAssetReader从视频文件中获取各个帧。我想知道如何播放Mp4文件中的音频。

方法player play的返回值为false，所以没有声音可以播放，但是为什么呢

谢谢。

创建AVAssetReader

  NSURL *url = [NSURL fileURLWithPath:[[NSBundle mainBundle] pathForResource:@"zhang" ofType:@"mp4"]];
    AVURLAsset *avasset = [[AVURLAsset alloc] initWithURL:url options:nil];
    AVAssetTrack *track1 = [[avasset tracksWithMediaType:AVMediaTypeAudio] objectAtIndex:0];

NSMutableDictionary *dic2 = [NSMutableDictionary dictionaryWithObjectsAndKeys:[NSNumber numberWithInt:kAudioFormatLinearPCM], AVFormatIDKey,  [NSNumber numberWithInt:16],AVLinearPCMBitDepthKey,
                             [NSNumber numberWithBool:NO],AVLinearPCMIsBigEndianKey,
                             [NSNumber numberWithBool:NO],AVLinearPCMIsFloatKey,
                             [NSNumber numberWithBool:NO],AVLinearPCMIsNonInterleaved, nil]; 

output1 = [[AVAssetReaderTrackOutput alloc] initWithTrack:track1 outputSettings:dic2];

AVAssetReader *reader = [[AVAssetReader alloc] initWithAsset:avasset error:nil];

[reader addOutput:output1];
[reader startReading];

输出代码如下：

  CMSampleBufferRef sample = [output1 copyNextSampleBuffer];
    CMBlockBufferRef blockBufferRef = CMSampleBufferGetDataBuffer(sample);

    size_t length = CMBlockBufferGetDataLength(blockBufferRef);
    UInt8 buffer[length];
    CMBlockBufferCopyDataBytes(blockBufferRef, 0, length, buffer);

    NSData * data = [[NSData alloc] initWithBytes:buffer length:length];
    NSString *docDirPath = [NSSearchPathForDirectoriesInDomains(NSDocumentDirectory, NSUserDomainMask, YES) objectAtIndex:0];
    NSString *filePath = [NSString stringWithFormat:@"%@/test.mp3", docDirPath];
    [data writeToFile:filePath atomically:YES];
    [data release];

    NSError *error;
    NSURL *fileURL = [NSURL fileURLWithPath:filePath];
    AVAudioPlayer *player = [[AVAudioPlayer alloc] initWithContentsOfURL:fileURL error:&error];
    player.numberOfLoops = 0;
    [player play];

Answer 1

一种选择是避免使用AVAudioPlayer，而是使用您解码的PCM数据来填充AudioQueue以进行输出。

理想的方法是根据从源mp4文件创建的AVAsset的音频轨道创建一个AVComposition。该AVComposition (作为AVAsset的子类)可以在AVPlayer中使用，然后它将只为您播放音轨。

您不能简单地将PCM数据块写到一个扩展名为".mp3“的文件中--这是一种编码格式。AVAudioPlayer将在文件中查找特定的编码数据，而您编写的文件将是不兼容的，这就是为什么您会收到返回值false的原因。如果您打算将音频输出到文件中，请使用具有适当设置的AVAssetWriter。这可以写出为核心音频文件，以获得最大的性能。此步骤还可以将音频编码为另一种格式(例如，mp3或AAC)，但是这将带来沉重的性能成本，并且很可能不适合实时回放。

Answer 2

资产不能立即播放。需要使用键值观察来观察状态的值。请参考苹果的AVCam示例。