iOS 音频开发经验汇总

一.音乐播放类概念

iOS 下能支持歌曲和声音播放的的类有几个:

  1. SystemSound
  2. AVFoundtion库中的AVAudioPlayer #重要
  3. MediMPMusicPlayerController

常用音频控件 
3. MPMediaPickerController 本地音乐库选择器 
5. MPVolumeView 播放进度条

这里有一个PPT在解释几种概念:

https://ccrma.stanford.edu/~jsanchez/NSSpain.pdf 
这教程中同时用不同机制播放例子: 
https://github.com/jsanchezsierra/AudioLab

声音可视化的设计

如果想要程序中输出声音,波形,频谱以及其它特效, 
一定要看一下这一篇教程:

iPodVisualizer

http://www.raywenderlich.com/36475/how-to-make-a-music-visualizer-in-ios

它是种用AVAudioPlayer 的averagePowerForChannel 这样接口来输出波形文件。 
MPMusicPlayerController没有发现支持这一功能 

aurioTouch

另外Apple官方给出一个输出例子:aurioTouch 录音数据的波形,其中带普通波形文件,以及经过FFT运算得到频谱数据。可以参考。

源码在此:https://developer.apple.com/library/prerelease/ios/samplecode/aurioTouch/Introduction/Intro.html

以及更新版(苹果已经移走这个版本) 
https://github.com/caseytcaprice/aurioTouch2

根据 
https://github.com/irtemed88/PitchDetector

PitchDetector

画得更加完美的波形文件: 
https://github.com/irtemed88/PitchDetector

SpeakHere

Apple官方给的例子,显示录音实时波开: 
https://developer.apple.com/library/ios/samplecode/SpeakHere/Introduction/Intro.html

AvTouch

更简单的声音转波形的例子 
https://developer.apple.com/library/ios/samplecode/avTouch/Introduction/Intro.html

选择系统歌曲文件

音乐App的歌曲来源有三种,一个是本地沙盒自带歌曲,另一个网络歌曲,

选择系统音乐库

第三个就系统音乐库带的歌曲,

它可以由 MPMediaPickerController 类来调用

- (IBAction)addPressed:(id)sender {
    MPMediaType mediaType = MPMediaTypeMusic;
    MPMediaPickerController *picker = [[MPMediaPickerController alloc] initWithMediaTypes:mediaType];
    picker.delegate = self;
    [picker setAllowsPickingMultipleItems:YES];
    picker.prompt = NSLocalizedString(@"Select items to play", @"Select items to play");
    [self presentViewController:picker animated:YES completion:nil];
}

它通过MPMediaPickerControllerDelegate接口返回一个 
MPMediaItemCollection 选择的歌曲列列表,只需对MPMediaPickerController调用如下接口即可进行播放,以及上一首,下一首

[self.player setQueueWithItemCollection:self.collection];

如果是AVAudioPlayer来播放需要做得更多一点。即可把MPMediaItemCollection里歌曲URL取出来,直接传给AVAudioPlayer即可,这个URL格式类似于

ipod-library://item/item.m4a?id=1529654720874100371

- (void) mediaPicker: (MPMediaPickerController *) mediaPicker didPickMediaItems: (MPMediaItemCollection *) collection {

    MPMediaItem *item = [[collection items] objectAtIndex:0];
    NSURL *url = [item valueForProperty:MPMediaItemPropertyAssetURL];

    // Play the item using AVPlayer
    self.avAudioPlayer = [[AVAudioPlayer alloc] initWithContentsOfURL:url error:nil];
    [self.avAudioPlayer play];
}

列表播放

MMMediaPlayer是自动支持,播放下一首,上一首可用如下方法:

上一首:

- (IBAction)rewindPressed:(id)sender {
    if ([self.player indexOfNowPlayingItem] == 0) {
        [self.player skipToBeginning];
    } else {
        [self.player endSeeking];
        [self.player skipToPreviousItem];
    }
}

下一首:

- (IBAction)fastForwardPressed:(id)sender {
    NSUInteger nowPlayingIndex = [self.player indexOfNowPlayingItem];
    [self.player endSeeking];
    [self.player skipToNextItem];
    if ([self.player nowPlayingItem] == nil) {
        if ([self.collection count] > nowPlayingIndex+1) {
            // added more songs while playing
            [self.player setQueueWithItemCollection:self.collection];
            MPMediaItem *item = [[self.collection items] objectAtIndex:nowPlayingIndex+1];
            [self.player setNowPlayingItem:item];
            [self.player play];
        }
        else {
            // no more songs
            [self.player stop];
            NSMutableArray *items = [NSMutableArray arrayWithArray:[self.toolbar items]];
            [items replaceObjectAtIndex:3 withObject:self.play];
            [self.toolbar setItems:items];
        }
    }
}

暂停和恢复播放:

- (IBAction)playPausePressed:(id)sender {
    [self.pause setTintColor:[UIColor blackColor]];
    MPMusicPlaybackState playbackState = [self.player playbackState];
    NSMutableArray *items = [NSMutableArray arrayWithArray:[self.toolbar items]];
    if (playbackState == MPMusicPlaybackStateStopped || playbackState == MPMusicPlaybackStatePaused) {
        [self.player play];
        [items replaceObjectAtIndex:3 withObject:self.pause];
    } else if (playbackState == MPMusicPlaybackStatePlaying) {
        [self.player pause];
        [items replaceObjectAtIndex:3 withObject:self.play];
    }
    [self.toolbar setItems:items animated:NO];
}

AVAudioPlayer 有播放结束的调用,因此在的上一首播完,重设一下一首歌即可

音乐后台播放

如果需要后台播放音乐,需要在应有的info.plist声明 
否则会被系统强行干掉。

网络音频播放

AVAudioPlayer 不直接支持网络音频播放,可以先下载数据到一个NSData ,然后进行播放。

NSData *mydata=[[NSDataalloc]initWithContentsOfURL:[NSURLURLWithString:command]];

    AVAudioPlayer *player=[[AVAudioPlayeralloc]initWithData:mydata error:nil];

    [player prepareToPlay];

    [player play];

但这种对于流媒体就无能为例了。因此可以使用更新的AVPlayer,它能直接播放(但是底层接口较少)

AVPlayer * _player = [[AVPlayer alloc] initWithURL:[NSURL URLWithString:@"http://stream.jewishmusicstream.com:8000"]];

音乐按键控制

AudioPlayer 可以接收 线控及蓝牙耳机的按键控制, 
前题的要真的有一首的歌曲播放时,才能捕获按键。

这个可以在AppDelegate 中remoteControlReceivedWithEvent来捕获各种按键。

- (void)remoteControlReceivedWithEvent:(UIEvent *)event
{
    NSLog(@"remoteControlReceivedWithEvent %d",event.subtype);

    switch (event.subtype) {
        case UIEventSubtypeRemoteControlPlay:
            [self postNotificationWithName:remoteControlPlayButtonTapped];
            break;
        case UIEventSubtypeRemoteControlPause:
            [self postNotificationWithName:remoteControlPauseButtonTapped];
            break;
        case UIEventSubtypeRemoteControlStop:
            [self postNotificationWithName:remoteControlStopButtonTapped];
            break;
        case UIEventSubtypeRemoteControlNextTrack:
            [self postNotificationWithName:remoteControlForwardButtonTapped];
            break;
        case UIEventSubtypeRemoteControlPreviousTrack:
            [self postNotificationWithName:remoteControlBackwardButtonTapped];
            break;
        default:
            [self postNotificationWithName:remoteControlOtherButtonTapped];
            break;
    }
}

理论上,可以在后台不断播放一段音频(音量设为0)来实现在应用中捕获耳机按键。比如蓝点工坊就用这个方法把蓝牙耳机充当自拍器用。

但是这种用法是过不了App Store 的审核 ,所以只能用Ad hoc发行方法。

具体参考: 
https://github.com/MosheBerman/ios-audio-remote-control

它是在后台不断播放一个网络电台节目来达到目的,实际蓝点工坊测试测放App自带一个声音文件,如caf效果是一样的。

时间: 2024-12-20 04:43:39

iOS 音频开发经验汇总的相关文章

iOS视频开发经验

iOS视频开发经验 手机比PC的优势除了便携外,我认为最重要的就是可以快速方便的创作多媒体作品.照片分享,语音输入,视频录制,地理位置.一个成功的手机APP从产品形态上都有这其中的一项或多项,比如instagram,微信.如果把Web2.0的交互体验照搬到手机上就是死路一条. 当智能手机遇上视频就像潘金莲遇上西门庆,各取所需一拍即合,想不发生点事情都难.他们的结晶就是微视频.微视频可以说把手机的视频录制和碎片时间两个特点发挥到了极致,视频相关的APP现在无温不火的原因我认为跟坑爹的运营商有关.虽

iOS第三方库汇总[转载]

iOS第三方库汇总[转载] 字数2179 阅读334 评论0 喜欢29 简介 此文用于总结,本人使用过或者收藏过的Github第三方类库,以便日后查阅,也便他人借鉴. 资料整理中不定期更新... 开源项目 CodeHub browse and maintain your GitHub repositories on any iOS device! Open-Source iOS Apps 开源iOS apps列表 APP相关 iVersion 提示版本更新 BonMot 字体相关的库,设置字体样

IOS 音频播放

iOS音频播放 (一):概述 Audio Playback in iOS (Part 1) : Introduction 前言 从事音乐相关的app开发也已经有一段时日了,在这过程中app的播放器几经修改我也因此对于iOS下的音频播放实现有了一定的研究.写这个系列的博客目的一方面希望能够抛砖引玉,另一方面也是希望能帮助国内其他的iOS开发者和爱好者少走弯路(我自己就遇到了不少的坑=.=). 本篇为<iOS音频播放>系列的第一篇,主要将对iOS下实现音频播放的方法进行概述. 基础 先来简单了解一

iOS音频播放 (一):概述 转

今天看到非常好的介绍音频开发的文章,转载一下 原文地址:http://msching.github.io/blog/2014/07/07/audio-in-ios/ 前言 从事音乐相关的app开发也已经有一段时日了,在这过程中app的播放器几经修改我也因此对于iOS下的音频播放实现有了一定的研究.写这个系列的博客目的一方面希望能够抛砖引玉,另一方面也是希望能帮助国内其他的iOS开发者和爱好者少走弯路(我自己就遇到了不少的坑=.=). 本篇为<iOS音频播放>系列的第一篇,主要将对iOS下实现音

iOS音频的后台播放总结(后台网络请求歌曲,Remote控制,锁屏封面,各种打断)

iOS音频的后台播放总结(后台网络请求歌曲,Remote控制,锁屏封面,各种打断) 2013-12-11 21:13 1416人阅读 评论(0) 收藏 举报  分类: cocoa SDK(139)  目录(?)[+] 在没有网络的情况下,音频的后台播放比较简单,google一下可以搜到很多资料,但是如果每次歌曲的请求都是通过网络,就不成了,有时可以也扛不了几首,这里总结下实现方法,可以实现像电台一样的功能,后台播放,网络请求歌曲,Remote控制,锁屏有封面,电话和听歌打断处理等.   初始化A

iOS音频处理

ios音频处理 1. iOS底层音频处理技术(带源代码) http://www.cocoachina.com/ios/20111122/3563.html 2.ios 音频入门 http://blog.sina.com.cn/s/blog_7a162d000101b9w3.html 3.IOS 音频API介绍 http://www.cnblogs.com/kenshincui/p/4186022.html#audioQueueServices 4. FFMPEG 入门简介 http://blog

iOS 音频缓存播放思路

基础 先来简单了解一下一些基础的音频知识. 目前我们在计算机上进行音频播放都需要依赖于音频文件,音频文件的生成过程是将声音信息采样.量化和编码产生的数字信号的过程,人耳所能听到的声音,最低的频率是从20Hz起一直到最高频率20KHZ,因此音频文件格式的最大带宽是20KHZ.根据奈奎斯特的理论,只有采样频率高于声音信号最高频率的两倍时,才能把数字信号表示的声音还原成为原来的声音,所以音频文件的采样率一般在40~50KHZ,比如最常见的CD音质采样率44.1KHZ. 对声音进行采样.量化过程被称为脉

超全!iOS 面试题汇总

超全!iOS 面试题汇总 2015-10-20 CocoaChina 作者:Job_Yang 之前看了很多面试题,感觉要不是不够就是过于冗余,于是我将网上的一些面试题进行了删减和重排,现在分享给大家.(题目来源于网络,侵删) 1. Object-c的类可以多重继承么?可以实现多个接口么?Category是什么?重写一个类的方式用继承好还是分类好?为什么? 答: Object-c的类不可以多重继承;可以实现多个接口,通过实现多个接口可以完成C++的多重继承;Category是类别,一般情况用分类好

iOS音频播放 (五):AudioQueue

码农人生 ChengYin's coding life 主页 Blog 分类 Categories 归档 Archives 关于 About Weibo GitHub RSS Where there is a will, there is a way. -- Thomas Edison Aug 2nd, 2014 Audio, iOS, iOS Audio iOS音频播放 (五):AudioQueue Audio Playback in iOS (Part 5) : AudioQueue 在第三