破解實(shí)時(shí)互動直播難點(diǎn) 超低延遲與連麥 陶思明

1、破破解解實(shí)時(shí)互動直播難實(shí)時(shí)互動直播難點(diǎn)點(diǎn) 超低延遲與連超低延遲與連麥麥陶思明陶思明CTO05年開始做網(wǎng)絡(luò)音視頻通話技術(shù)研究“骨灰級”直播、實(shí)時(shí)互動技術(shù)專家對音視頻通信技術(shù)實(shí)踐、通信網(wǎng)絡(luò)架構(gòu)部署有些理解 曾任YY技術(shù)委員會主席，全面負(fù)責(zé)整體技術(shù)架構(gòu)、流媒體、點(diǎn)播直播等 后來加入聲網(wǎng)Agora.io到底搞不搞直播？到底搞不搞直播？實(shí)時(shí)互動直播怎么搞？實(shí)時(shí)互動直播怎么搞？ 如如何何破解破解實(shí)時(shí)互動直播主要難點(diǎn)？實(shí)時(shí)互動直播主要難點(diǎn)？問題問題1: 到底搞不搞直播？到底搞不搞直播？秀場秀場直播不直播不是新是新玩玩意意移動直播App，無差異化直播回歸商業(yè)本質(zhì)新聞直播游戲直播 教育直播 體育直播 電商直播演

2、唱會直播VR直播多場景直播對真實(shí)的渴望對參與的渴望搞不搞直播搞！ 怎么搞？搞和場景緊密結(jié)合的實(shí)時(shí)互動直播g 支持最多6個(gè)主播 實(shí)時(shí)互動大小流和對話視窗可以隨時(shí)切換。 想看誰就看誰。問題問題2: 實(shí)實(shí)時(shí)時(shí)互動直播怎么搞？互動直播怎么搞？ 沒做過直播的公司：先做出來不實(shí)時(shí)互動的，然后再說 做過直播的公司：基于現(xiàn)在不實(shí)時(shí)互動的，改一個(gè)出來 不實(shí)時(shí)不互動的直播不實(shí)時(shí)不互動的直播首先，搞定主播端的上行，和觀眾端的下行然后，搞定流分發(fā)CDNVDN 基于基于RTMP+CDN，改一個(gè)實(shí)時(shí)互動直播出，改一個(gè)實(shí)時(shí)互動直播出來來先直接搞兩路上行，兩個(gè)主播同時(shí)推流？提問：“我們用RTMP做的直播產(chǎn)品，觀眾提問主播回

3、答?，F(xiàn)在經(jīng)常是觀眾還沒有問，主播回答的聲音已 經(jīng)出來了”回答：TCP stream要改成UDP！為什么非改不可？ a) TCP是一種可靠的傳輸協(xié)議。但是太靠譜了，實(shí)時(shí)性不夠。 b) UDP是不可靠的，但能滿足實(shí)時(shí)性傳輸。 c) 幾乎所有的互聯(lián)網(wǎng)鏈路都會丟包，特別是移動互聯(lián)網(wǎng)丟包率TCP延時(shí)0%400ms左右30%10分鐘以上50%容易斷開TCP的延時(shí)從幾百毫秒到幾十分鐘，甚至斷開的延時(shí)從幾百毫秒到幾十分鐘，甚至斷開在同樣的鏈路上，在同樣的鏈路上，UDP的延時(shí)可以從幾十毫秒到一兩的延時(shí)可以從幾十毫秒到一兩秒秒改成UDP之后，還有12個(gè)難點(diǎn)直播質(zhì)量 51. 全網(wǎng)改造UDP2. 跨運(yùn)營商傳輸3. 跨

4、國傳輸4. 用戶終端網(wǎng)絡(luò)差5. 用戶終端設(shè)備差直播功能 56. 觀眾與主播的切換7. 多主播的畫面分布選擇8. 跨平臺互通9. 音視頻錄制旁路直播10.旁路直播11. 幾萬人同時(shí)在線？幾十萬？幾百萬？直播性能 212. 如何保證至少4個(gè)9（99.99%）可用性？破解實(shí)時(shí)互動直播難破解實(shí)時(shí)互動直播難點(diǎn)點(diǎn)難點(diǎn)1全網(wǎng)改造UDP 改造已有CDN 改造5個(gè)平臺下客戶端的實(shí)現(xiàn) 實(shí)現(xiàn)傳輸控制協(xié)議和信令協(xié)議 基于UDP重新實(shí)現(xiàn)信令控制難點(diǎn)2 跨運(yùn)營商傳輸質(zhì)量沒好過Agora機(jī)房的smokeping真實(shí)數(shù)據(jù) 第一張圖是東北某聯(lián)通機(jī)房到西北某電信機(jī)房Agora機(jī)房的smokeping真實(shí)數(shù)據(jù) 第二張圖是東北某聯(lián)通

5、機(jī)房到西北某聯(lián)通機(jī)房CTEL用戶 _._ , 回 陽 市 cucc用戶 ， ，C GTIC GTIC GTIC G飛 ！C GTIC GTIC GTIC GTIC GTIC GTIC HlIC GTIC GTIC GTcucc線路CTEL線路多線機(jī)房直播場景下，架構(gòu)成本過高單線接入，多線路由難點(diǎn)3 跨國傳輸根據(jù)骨干網(wǎng)拓?fù)浣Y(jié)構(gòu)，能夠歸納出每個(gè)地區(qū)的進(jìn)出口機(jī)房大陸：有國際專線帶寬 東南亞：香港、新加坡，日本，韓國 北美：西海岸加州地區(qū)，東海岸紐約，南部邁阿密 南美：圣保羅澳洲：悉尼歐洲：西部法蘭克福，巴黎，阿姆斯特丹 等等根據(jù)骨干網(wǎng)拓?fù)浣Y(jié)構(gòu)，再歸納出兩兩地區(qū)之間的路由機(jī)房大陸與亞洲其他國家的路由節(jié)

6、點(diǎn)：香港大陸與北美的路由節(jié)點(diǎn)：香港、東京 大陸與歐洲的路由節(jié)點(diǎn)：香港 北美與南美的路由節(jié)點(diǎn)：邁阿密 等等 i .N費(fèi)WJ ，、.V，萃，6、r，23i/雯.”4虧,電館” 協(xié)gAg、 言住罩 草莓吁k注煙部隊(duì)事，、難點(diǎn)4 用戶終端網(wǎng)絡(luò)差WIFI信號互相干擾局域網(wǎng)內(nèi)有其他程序搶占帶寬 2G/3G帶寬不夠 距離接入的路由器或者基站過遠(yuǎn) 小運(yùn)營商有的是均勻丟包有的是突發(fā)burst丟包 有的是周期性丟包 有的是不丟包但是抖動非常大如何對抗丟包 對抗丟包有一些經(jīng)典手段： FEC 丟包重傳 一包多幀 etc.音效問題（回聲噪音）硬件問題（發(fā)燙發(fā)熱）難點(diǎn)5 用戶終端設(shè)備差純手工適配公版統(tǒng)配算法硬件編解碼服務(wù)

7、器轉(zhuǎn)碼難點(diǎn)6多主播的畫面分布選擇 觀眾與主播的切換 跨平臺互通：5個(gè)平臺合適的視頻分辨率與編解碼性能各不 相同 音視頻錄制：工信部要求直播業(yè)務(wù)需要保存最近6個(gè)月以上 的錄像 旁路直播：直播的視頻流支持分享到微信朋友圈、QQ群等難點(diǎn)7-10 直播功能難點(diǎn)11-12 直播性能11. 幾萬人同時(shí)在線？幾十萬？幾百萬？12. 如何保證至少4個(gè)9（99.99%）可用性？1周？還是1年？自建全球虛擬通信網(wǎng)創(chuàng)始人創(chuàng)始人趙斌先生趙斌先生20年通信和互聯(lián)網(wǎng)經(jīng)驗(yàn)?zāi)晖ㄐ藕突ヂ?lián)網(wǎng)經(jīng)驗(yàn)Webex創(chuàng)始創(chuàng)始工工程師程師 市值最高市值最高$32億，億，YY CTO 市值最市值最高高$50億億 2014年創(chuàng)立聲網(wǎng)年創(chuàng)立聲網(wǎng)Agora.io，開創(chuàng)實(shí)時(shí)云通信。，開創(chuàng)實(shí)時(shí)云通信。前Apple 視頻核心算法工程師前Vidyo全球高級產(chǎn)品總監(jiān)前YY技術(shù)委員會主席前YY音頻流媒體平臺專家前YY音頻流媒體平臺專家團(tuán)隊(duì)平均行業(yè)經(jīng)驗(yàn)團(tuán)隊(duì)平均行業(yè)經(jīng)驗(yàn)10年以上，有年以上，有N名國內(nèi)最早從事直播