Android IOS WebRTC 音视频开发总结（八）

这篇文章主要介绍ios webrtcdemo的实现及相关注意事项(本系列文章转载请说明出处:http://www.cnblogs.com/lingyunhu).

前面很多人问webrtc android下有webrtcdemo, ios上怎么找不到,放在哪里呢?

答案:webrtcdemo在ios上没有实现,如果要实现也很简单,既然安卓都有了,依葫芦画瓢即可移植到ios上,不过可能要求您熟悉android语法,这里给出ios上的参考代码:

  1 -(BOOL)initWebrtcObjects
  2 {　　　　　//转载请说明出处:　RTC_Blacker http://www.cnblogs.com/lingyunhu
  3     if ((voE = webrtc::VoiceEngine::Create()) == NULL) {
  4         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
  5         return FALSE;
  6     }
  7     if ((voeBase = webrtc::VoEBase::GetInterface(voE)) == NULL) {
  8         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
  9         return FALSE;
 10     }
 11     if ((voeCodec = webrtc::VoECodec::GetInterface(voE)) == NULL) {
 12         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 13         return FALSE;
 14     }
 15     if ((voeFile=webrtc::VoEFile::GetInterface(voE))==NULL) {
 16         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 17     }
 18     if ((voeHardware = webrtc::VoEHardware::GetInterface(voE)) == NULL) {
 19         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 20         return FALSE;
 21     }
 22     if ((voeNetwork = webrtc::VoENetwork::GetInterface(voE)) == NULL) {
 23         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 24         return FALSE;
 25     }
 26     if ((voeAudioProccessing = webrtc::VoEAudioProcessing::GetInterface(voE)) == NULL) {
 27         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 28         return FALSE;
 29     }
 30     if ((voeRtpRtcp = webrtc::VoERTP_RTCP::GetInterface(voE)) == NULL) {
 31         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 32         return FALSE;
 33     }
 34
 35     if(voeBase->Init()!=0){
 36         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 37     }
 38
 39     if ((viE = webrtc::VideoEngine::Create()) == NULL) {
 40         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 41         return FALSE;
 42     }
 43     if ((vieBase = webrtc::ViEBase::GetInterface(viE)) == NULL) {
 44         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 45         return FALSE;
 46     }
 47     if ((vieCapture = webrtc::ViECapture::GetInterface(viE)) == NULL) {
 48         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 49         return FALSE;
 50     }
 51     if ((vieRender = webrtc::ViERender::GetInterface(viE)) == NULL) {
 52         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 53         return FALSE;
 54     }
 55     if ((vieCodec = webrtc::ViECodec::GetInterface(viE)) == NULL) {
 56         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 57         return FALSE;
 58     }
 59     if ((vieNetwork = webrtc::ViENetwork::GetInterface(viE)) == NULL) {
 60         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 61         return FALSE;
 62     }
 63     if ((vieRtpRtcp = webrtc::ViERTP_RTCP::GetInterface(viE)) == NULL) {
 64         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 65         return FALSE;
 66     }
 67
 68     if (vieBase->Init() != 0) {
 69         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
 70         return FALSE;
 71     }
 72
 73     [self initAudioCodec];
 74     [self initVideoCodec];
 75
 76     captureID = 0;
 77     videoChannel = -1;
 78
 79     return TRUE;
 80 }
 81
 82 -(void)initAudioCodec
 83 {
 84     memset(&voeCodecInst, 0, sizeof(webrtc::CodecInst));
 85
 86     if (voeCodec != NULL) {
 87         for (int index=0; index < voeCodec->NumOfCodecs(); index++) {
 88             webrtc::CodecInst ci;
 89             voeCodec->GetCodec(index, ci);
 90             if (strncmp(ci.plname, "ISAC", 4) == 0) {
 91                 memcpy(&voeCodecInst, &ci, sizeof(webrtc::CodecInst));
 92                 break;
 93             }
 94         }
 95         //voeCodecInst.channels = 1;
 96         //voeCodecInst.rate = -1;
 97     }
 98 }
 99
100 -(BOOL)start
101 {
102    f ((audioChannel = voeBase->CreateChannel())!=0) {
103         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
104         return FALSE;
105     }
106     if (vieBase->CreateChannel(videoChannel) != 0) {
107         DebugLog(@"AVErr: %d %s at line %d", vieBase->LastError(),__FUNCTION__, __LINE__);
108         return FALSE;
109     }
110     DebugLog(@"AVInfo: CreateChannel success! %d, %d",videoChannel,audioChannel);
111
112     //vieCodec->SetReceiveCodec(videoChannel,videoCodec);
113
114     if(voeAudioProccessing->SetAecmMode()!=0){
115         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
116         return FALSE;
117     }
118     voeAudioProccessing->SetAgcStatus(TRUE, webrtc::kAgcDefault);
119     voeAudioProccessing->SetNsStatus(TRUE, webrtc::kNsHighSuppression);
120     _voice_capture_device_index = -1;
121     voeHardware->SetRecordingDevice(_voice_capture_device_index);
122     voeHardware->SetPlayoutDevice(_voice_playback_device_index);
123     if(voeHardware->SetLoudspeakerStatus(true)!=0){
124         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
125     }
126     voeCodec->SetSendCodec(audioChannel, voeCodecInst);
127
128     RtpRtcpStreamStruct streamStruct=[self createRtpStreamStruct];
129     voeChannelTransport=new webrtc::test::VoiceChannelTransport(voeNetwork, audioChannel);
130     voeChannelTransport->SetLocalReceiver2(localARtpPort.rtp,streamStruct );
131     voeChannelTransport->SetSendDestination2([remoteIPAddress UTF8String], remoteARtpPort.rtp, remoteARtpPort.rtcp);
132
133     if(vieCodec->SetSendCodec(videoChannel, videoCodec) != 0)
134     {
135         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
136         return FALSE;
137     }
138     vieRtpRtcp->SetNACKStatus(videoChannel, TRUE);
139     vieRtpRtcp->SetRTCPStatus(videoChannel, webrtc::kRtcpNonCompound_RFC5506);
140     vieRtpRtcp->SetKeyFrameRequestMethod(videoChannel, webrtc::kViEKeyFrameRequestPliRtcp);
141
142     vieBase->SetVoiceEngine(voE);
143     if (vieBase->ConnectAudioChannel(videoChannel, audioChannel)) {
144         DebugLog(@"AVErr:%s at line %d",__FUNCTION__,__LINE__);
145         return FALSE;
146     }
147
148     if (deviceUniqueID == nil) {
149         DebugLog(@"AVInfo NumberOfCaptureDevices is %d", vieCapture->NumberOfCaptureDevices());
150         int list_count=vieCapture->NumberOfCaptureDevices();
151         if ( list_count> 0) {
152             int list_number=0;
153             if (list_count>1) {
154                 list_number=1;//[[AVShareData instance] isUseFrontCamera]?0:1;
155             }
156             char device_name[KMaxDeviceNameLength];
157             char unique_id[KMaxUniqueIdLength];
158             memset(unique_id, 0, KMaxUniqueIdLength);
159             vieCapture->GetCaptureDevice(list_number, device_name, KMaxDeviceNameLength, unique_id, KMaxUniqueIdLength);
160             deviceUniqueID = [NSString stringWithFormat:@"%s", unique_id];
161         }
162     }
163     DebugLog(@"AVInfo deviceUniqueID is %@", deviceUniqueID);
164
165     if ((vieCapture->AllocateCaptureDevice([deviceUniqueID UTF8String], deviceUniqueID.length, captureID)) != 0) {
166         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
167         return FALSE;
168     }
169
170     DebugLog(@"AVInfo captureID is %d", captureID);
171
172     if (vieCapture->ConnectCaptureDevice(captureID, videoChannel) != 0) {
173         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
174         return FALSE;
175     }
176
177     webrtc::CaptureCapability captureCapability;
178     captureCapability.width=352;
179     captureCapability.height=288;
180     captureCapability.codecType=webrtc::kVideoCodecVP8;
181     captureCapability.maxFPS=DEFAULT_VIDEO_CODEC_MAX_FRAMERATE;
182     //vieCapture->SetRotateCapturedFrames(captureID, <#const webrtc::RotateCapturedFrame rotation#>)
183     if (vieCapture->StartCapture(captureID,captureCapability) != 0) {
184         //if (vieCapture->StartCapture(captureID) != 0) {
185         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
186         return FALSE;
187     }
188     if((vieRender->AddRenderer(captureID, [self localRenderView], 0, 0.0, 0.0, 1.0, 1.0)) != 0){
189         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
190         return FALSE;
191     }
192     /*
193     if((vieRender->AddRenderer(captureID, [self localRenderView2], 0, 0.0, 0.0, 1.0, 1.0)) != 0){
194         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
195         return FALSE;
196     }
197     */
198
199     if (vieRender->StartRender(captureID) != 0) {
200         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
201         return FALSE;
202     }
203     if(vieRender->AddRenderer(videoChannel, [self remoteRenderView], 1, 0.0f, 0.0f, 1.0f, 1.0f)!=0){
204         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
205         return FALSE;
206     }
207     if(vieRender->StartRender(videoChannel)!=0){
208         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
209         return FALSE;
210     }
211
212     if (vieBase->StartReceive(videoChannel)!=0) {
213         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
214         return FALSE;
215     }
216     if (vieBase->StartSend(videoChannel)!=0) {
217         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
218         return FALSE;
219     }
220     if(voeBase->StartReceive(audioChannel) != 0)
221     {
222         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
223         return FALSE;
224     }
225     if(voeBase->StartPlayout(audioChannel) != 0)
226     {
227         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
228         return FALSE;
229     }
230     if(voeBase->StartSend(audioChannel) != 0)
231     {
232         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
233         return FALSE;
234     }
235
236     //webrtc::CodecInst ci;
237     //voeFile->StartRecordingMicrophone(@"a.avi",ci,1000);
238
239     DebugLog(@"AVInfo: %s at line %d success!", __FUNCTION__, __LINE__);
240     return TRUE;
241 }
242
243 -(BOOL)stop
244 {
245     if(voeBase->StopSend(audioChannel)!=0){
246         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
247         return FALSE;
248     }
249     if(voeBase->StopReceive(audioChannel)!=0){
250         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
251         return FALSE;
252     }
253     if(voeBase->StopPlayout(audioChannel)!=0){
254         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
255         return FALSE;
256     }
257
258     if(vieBase->StopSend(videoChannel)!=0){
259         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
260         return FALSE;
261     }
262     if(vieBase->StopReceive(videoChannel)!=0){
263         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
264         return FALSE;
265     }
266     if(vieCapture->StopCapture(captureID)!=0){
267         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
268         return FALSE;
269     }
270     if(vieCapture->ReleaseCaptureDevice(captureID)!=0){
271         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
272         return FALSE;
273     }
274     if(vieRender->StopRender(videoChannel)!=0){
275         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
276         return FALSE;
277     }
278     if(vieRender->RemoveRenderer(videoChannel)!=0){
279         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
280         return FALSE;
281     }
282
283     if(voeBase->DeleteChannel(audioChannel)!=0){
284         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
285         return FALSE;
286     }
287     if(vieBase->DeleteChannel(videoChannel)!=0){
288         DebugLog(@"AVErr: %s at line %d", __FUNCTION__, __LINE__);
289         return FALSE;
290     }
291
292     DebugLog(@"AVInfo: %s at line %d success", __FUNCTION__, __LINE__);
293
294     return TRUE;
295 }

Android IOS WebRTC 音视频开发总结（八）的相关文章

Android IOS WebRTC 音视频开发总结（八十五）-- 使用WebRTC广播网络摄像头视频（下）

本文主要介绍WebRTC (我们翻译和整理的,译者:weizhenwei,校验:blacker),最早发表在[编风网] 支持原创,转载必须注明出处,欢迎关注我的微信公众号blacker(微信ID:blackerteam 或 webrtcorgcn). 回顾:Android IOS WebRTC 音视频开发总结(八十三)-- 使用WebRTC广播网络摄像头视频(上) 连接网络摄像头正如上文所提,我们选用一款简单的D-Link DCS-7010L网络摄像头.关键原因在于它支持RTSP协议,因此服务

Android IOS WebRTC 音视频开发总结（六八）-- Google: What's next for WebRTC

本文主要从用户,公司和技术角度分析美女视频直播这个行业,文章最早发表在我们的微信公众号上,支持原创,详见这里, 欢迎关注微信公众号blackerteam,更多详见www.rtc.help Justion和Sarah是google webrtc项目的主要负责人,下面的图片是根据他们分享的内容进行整理的,涉及webrtc进展.优化等方方面面.整理这些资料的过程中我们发现他们对待webrtc还是挺用心的,为webrtc的完善做了很多的工作,谢谢他们! 原始视频时长53分13秒,全英文的,所以我们考虑做

转：?Android IOS WebRTC 音视频开发总结（系列文章集合）

随笔分类 - webrtc Android IOS WebRTC 音视频开发总结(七八)-- 为什么WebRTC端到端监控很关键? 摘要: 本文主要介绍WebRTC端到端监控(我们翻译和整理的,译者:weizhenwei,校验:blacker),最早发表在[编风网] 支持原创,转载必须注明出处,欢迎关注我的微信公众号blacker(微信ID:blackerteam 或 webrtcorgcn). callstats是一家做实时通讯性能测阅读全文 posted @ 2016-07-22 08:24

Android IOS WebRTC 音视频开发总结（六）

前段时间在搞IOS的音视频版本,所以将标题改为了Android IOS WebRTC 音视频开发总结, 下面总结一下开发过程中的一些经验: 1. IOS WebRTC音视频编译和下载: 有过android WEBRTC编译下载经验再去弄IOS,你会发现简单多了,再有问题,可以参考:http://www.cnblogs.com/ProbeStar/p/3411510.html 记住有MAC和IOS两个版本,要指定好你想要哪个版本. 2. 正确区分armv7 armv7s i386平台: 编译的时

Android IOS WebRTC 音视频开发总结（二四）

本文主要分析webrtc音视频点对点部分的代码结构,文章来自博客园RTC.Blacker,转载请说明出处. 前段时间在查一个偶尔断线的问题(这种问题最蛋疼,不好重现,只能凭经验去搞),所以理了下webrtc的P2P代码结构,总结如下: 先来张图显示实际会话过程中的两种通讯路径:P2P或转发,92%的情况下是通过P2P实现. 注意:实际通讯过程中每个客户端都会不停地发送和接收Stun包,这样做是为了维护响应的连接和端口. 实际通讯过程中的核心组件为P2PTransportChannel,他代表着本

Android IOS WebRTC 音视频开发总结（八十一）-- WebRTC靠谱吗？有没有适合的SDK推荐？

作者:blaker,最早发表在我们的微信公众上,详见[这里] 支持原创,转载必须注明出处,欢迎关注我的微信公众号blacker(微信ID:blackerteam 或 webrtcorgcn). 靠不靠谱这个问题一直被问到,其实很难一两句话说清楚,因为答案不是一个靠谱或不靠谱可以回答好的,既然被反复问到,今天就系统地整理参考答案. 从大的方向看WebRTC是非常靠谱的,原因如下: 1.使跨平台.跨浏览器通讯成为可能,而且大大加速了这个进程,这就是GoogleWebRTC大受欢迎的主要原因: 2.大

Android IOS WebRTC 音视频开发总结（八十七）-- WebRTC中丢包重传NACK实现分析

本文主要介绍WebRTC中丢包重传NACK的实现,作者:weizhenwei ,文章最早发表在编风网,微信ID:befoio 支持原创,转载必须注明出处,欢迎关注我的微信公众号blacker(微信ID:blackerteam 或 webrtcorgcn). 在WebRTC中,前向纠错(FEC)和丢包重传(NACK)是抵抗网络错误的重要手段.FEC在发送端将数据包添加冗余纠错码,纠错码连同数据包一起发送到接收端:接收端根据纠错码对数据进行检查和纠正.RFC5109[1]定义FEC数据包的格式.NA

Android IOS WebRTC 音视频开发总结（八十六）-- WebRTC中RTP/RTCP协议实现分析

本文主要介绍WebRTC中的RTP/RTCP协议,作者:weizhenwei ,文章最早发表在编风网,微信ID:befoio 支持原创,转载必须注明出处,欢迎关注我的微信公众号blacker(微信ID:blackerteam 或 webrtcorgcn). 一前言 RTP/RTCP协议是流媒体通信的基石.RTP协议定义流媒体数据在互联网上传输的数据包格式,而RTCP协议则负责可靠传输.流量控制和拥塞控制等服务质量保证.在WebRTC项目中,RTP/RTCP模块作为传输模块的一部分,负责对发送端

Android IOS WebRTC 音视频开发总结（四八）-- 从商业和技术的角度看视频行业的机会

本文主要从不同角度介绍视频行业的机会,文章来自博客园RTC.Blacker,支持原创,转载必须说明出处,欢迎关注个人微信公众号blacker ------------------------------------------------------------- 这段时间在北京呆了10天左右,相对深圳,这边有点冷,也比较干燥,期间发生了两件大事: 1,优酷和土豆被阿里招安了 2,搜狐出品人大会召开了第一件事是大事,但跟我们关系不大,第二件事不算大事,但跟我们关系不小,原因如下: 1,优酷土豆

Android IOS WebRTC 音视频开发总结（二十）---- 自由职业与高端猎聘

咋看标题感觉与WebRTC和音视频无关,其实有着很大的关联,文章来自博客园RTC.Blacker,转载请说明出处. 背景: 一方面因为对开发人员比较了解,不喜欢约束,喜欢自由自在,所以我们向往自由职业. 另一方面企业老总总是让推荐人才,同时有些真正的人才却很难找到好的企业. 基于以上两点我决定发表这篇文章,下面那提供三种类型的工作供您选择: 一.自由职业: 1.职位1: 1.1.熟悉XMPP和openfire,客户想将IM功能外包给熟悉的人士完成,如果觉得您能胜任该职位,我帮您推荐,价格你们自己