音视频

音频

如图所示，在iOS平台上，所有的音频框架底层都是基于AudioUnit实现的。较高层次的音频框架包括：MediaPlayer、AVFoundation、OpenAL和AudioToolBox，这些框架都封装了AudioUnit，为特定的任务提供专用且简化的 API。

在iOS开发中，主要可以使用五种⽅式来播放音频：

• System Sound Services ：系统声音服务。使用AudioToolbox播放。主要用于播放短促的音效，官方要求不超过30秒。音频文件格式主要是.caf、.aif、.wav等。注意，这种方式直接使用的C语言接口，API都是C语言的函数，性能高，但播放方式单一，同一时刻只能播放一个音频，且不能控制播放的进度，没有循环播放和立体声控制，只能使用系统音量，不能修改播放音量。
• AVAudioPlayer ：高级音频播放器，是 AVFoundation.framework 中定义的一个类。它支持广泛的音频格式，可以播放任意长度的音频文件、支持循环播放、可以同步播放多个音频文件、控制播放进度以及从音频文件的任意一点开始播放等。但要注意，相比AudioToolbox，它消耗更多内存，且只能播放本地音频，无法播放在线音频。
• AVPlayer：通常用来播放网络音乐和网络视频。它支持流媒体播放，并且可以自己缓存网络数据，因此可用来做边下别播功能。
• Audio Queue Services： 播放和录制音频服务。主要用来播放音频，录音，它比较底层，会有更多的控制权。
• OpenAL：跨平台开源的音频处理接口。它与图形处理的 OpenGL类似，它为音频播放提供了一套更加优化的方案。最适合开发游戏的音效。

AudioToolbox

是一套基于 C 语言的框架，本质是将短音频注册到系统的声音服务中来播放

- (void)viewDidLoad {
    [super viewDidLoad];

    NSString *path = [[NSBundle mainBundle] pathForResource:@"pistol.wav" ofType:nil];
    if(path){
        NSURL *url = [NSURL fileURLWithPath:path];
        OSStatus err = AudioServicesCreateSystemSoundID((__bridge CFURLRef)url, &soundId);

        if(err != kAudioServicesNoError){
            NSLog(@"Could not load %@,error code is %d",url,err);
        }
    }else{
        NSLog(@"Could not load %@",path);
    }
}


- (IBAction)play:(UIButton *)sender {
    if(soundId != 0){
        AudioServicesPlaySystemSound(soundId);

        // 带回调的播放接口
//        AudioServicesPlaySystemSoundWithCompletion(soundId, ^{
//            NSLog(@"播放完成");
//            AudioServicesDisposeSystemSoundID(soundId);
//        });
    }
}

除了直接使用AudioServicesPlaySystemSound函数播放，还可以使用带有回调的函数播放，总结如下：

• AudioServicesPlaySystemSound：无震动无回调的播放
• AudioServicesPlaySystemSoundWithCompletion：无震动有回调的播放
• AudioServicesPlayAlertSound：有震动无回调的播放
• AudioServicesPlayAlertSoundWithCompletion：有震动有回调的播放

此外，还可以调用AudioServicesPlaySystemSound(kSystemSoundID_Vibrate);单独发出震动

预定义的声音

系统已经预定义了一些音效，其ID在1000到2000范围内（十进制），如下表所示（从2.0到5.0测试版）。这些系统声音都储存在/System/Library/Audio/UISounds/。

AVAudioPlayer

从文件或缓冲区播放音频数据的对象。

- (IBAction)play:(UIButton *)sender {
    [player play];
}

-(void)initAudioPlayer{
    NSString *path = [[NSBundle mainBundle] pathForResource:@"music.mp3" ofType:nil];
    if(path){
        NSURL *audioURL = [NSURL fileURLWithPath:path];
        player = [[AVAudioPlayer alloc]initWithContentsOfURL:audioURL error:nil];
        // 设置音量
        player.volume = 0.5f;
        // 准备播放
        [player prepareToPlay];
    }
}

初始化一个AVAudioPlayer有四种方式：

• initWithContentsOfURL:(NSURL *)url error:(NSError * _Nullable *)outError;

• initWithContentsOfURL:(NSURL *)url fileTypeHint:(NSString *)utiString error:(NSError * _Nullable *)outError;

• initWithData:(NSData *)data error:(NSError * _Nullable *)outError;

• initWithData:(NSData *)data fileTypeHint:(NSString *)utiString error:(NSError * _Nullable *)outError;

主要是通过文件路径（NSURL）来初始化，或者通过音频数据（NSData）来初始化。另外也可以指定音频文件的UTI类型。

AVAudioPlayer对象的一些常用方法：

• - (BOOL)prepareToPlay：将音频数据提前加载到缓冲区
• - (BOOL)play：可异步开始播放音频
• - (BOOL)playAtTime:(NSTimeInterval)time：在指定时刻开始播放音频。可设置成当前时间之后的多少秒播放
• - (void)pause：暂停播放
• - (void)stop：停止播放。会撤销prepareToPlay所做的准备

AVAudioPlayer对象的一些属性：

• playing：当前是否正在播放音频，返回一个BOOL值
• volume：获取当前播放的音量大小，范围为浮点数0~1之间
• pan：设置用哪个扬声器播放。-1.0表示只使用左扬声器，1.0表示只使用右扬声器，0.0表示同时使用左右扬声器。
• rate：设置播放速度，取值范围是0.5~2.0。默认为1.0，表示正常的播放速度。0.5表示半速。2.0表示两倍。在使用此属性之前，必须先调用enableRate启用播放速度功能
• enableRate：开启播放速度。在创建播放器之后，调用prepareToPlay之前，将这个属性设置为YES
• numberOfLoops：设置循环播放的次数。例如设置为1，表示在播放结束之后，再播放一次。 如果设置为负数，表示一直循环
• delegate：设置代理

需要注意，如果我们想监听播放过程的一些回调，可以在当前类中遵守AVAudioPlayerDelegate协议，并设置代理。目前该协议中许多接口已过时，可用的只有两个回调函数：

• - (void)audioPlayerDidFinishPlaying:(AVAudioPlayer *)player successfully:(BOOL)flag：音频播放完毕后回调此方法
• - (void)audioPlayerDecodeErrorDidOccur:(AVAudioPlayer *)player error:(NSError *)error：在播放过程中遇到解码错误时回调

AVPlayer

使用和AVAudioPlayer很类似，可用于播放本地或在线的音视频：

NSURL *url = [NSURL URLWithString:@"http://music.163.com/song/media/outer/url?id=1426649237.mp3"];

AVPlayerItem *item = [[AVPlayerItem alloc]initWithURL:url];
player = [[AVPlayer alloc]initWithPlayerItem:item];
[player play];

需要注意的是，iOS中限制了http请求。如果你是https请求可以忽略，否则需要配置允许http请求。打开项目的Info.plist文件，添加如下配置：

    <key>NSAppTransportSecurity</key>
    <dict>
        <key>NSAllowsArbitraryLoads</key>
        <true/>
    </dict>

视频

• MediaPlayer：iOS9被被苹果废弃
• AVPlayer：它只提供单纯的播放,需要自定义UI进行控制（进度,暂停,播放等按钮）

    NSURL *url = [NSURL URLWithString:@"https://v-cdn.zjol.com.cn/276996.mp4"];
    AVPlayer *player = [AVPlayer playerWithURL:url];
    AVPlayerLayer *layer = [AVPlayerLayer playerLayerWithPlayer:player];
    layer.frame = CGRectMake(0, 0, self.view.bounds.size.width, self.view.bounds.size.height*9/16);

    [self.view.layer addSublayer:layer];
    [player play];

公众号“编程之路从0到1”