您现在的位置: IOS教程網 >> IOS系統 >  >> iOS 使用技巧 >> iOS 技巧大全

七牛直播培訓筆記:流暢度、低延時與連麥的技術取捨

編輯:iOS 技巧大全

這次培訓的主題是 iOS SDK 的使用細節,SDK 本身的接入方式官方文件已經寫得很完整,這裡不多贅述。以下記錄幾個 SDK 之外、更偏向直播系統設計層面的收穫。

如何保證直播流暢度

直播的流暢度,主要取決於推流端推得是否穩定。

推流端的影響因素

影響推流端流暢度的因素,除了硬體設備與編碼參數設定之外,最主要的就是網路,特別是弱網環境。因此第一步是「如何判定目前處於弱網」。

慢啟動機制。 慢啟動是 TCP 的擁塞控制機制之一。基本思路是:當 TCP 開始在網路上傳輸資料,或偵測到丟包而進入重傳時,先以較小的視窗慢慢試探實際可用頻寬,避免因一次送出過量資料而造成阻塞。具體做法是主機送出一個封包後先停下等待 ACK,每收到一個 ACK 就把擁塞視窗增加一段長度,直到達到設定的閾值。

由於慢啟動的行為會反映當前鏈路的實際狀況,我們就能藉此判斷是否處於弱網。一旦確認弱網,就可以啟用後續的一系列優化策略。

弱網丟幀策略

在弱網環境下,推流端會主動丟棄部分視訊影格,只把處理後的內容繼續推送出去。關鍵在於這不是隨機丟幀,而是有規律的選擇性丟幀——目標是在降低位元率需求之後,畫面仍保持一定的連續性,而不是變成 slideshow。這樣一來,弱網下的推流品質就有了基本保障。

弱網動態碼率調節

除了丟幀,推流端還會動態調整碼率。舉例來說,初始設定碼率 500+ 並開啟動態調節後,當網路狀況變差,系統會自動把碼率降到 200+ 左右,直接減少視訊流佔用的頻寬。丟幀與降碼率通常是併用的:前者影響影格連續性,後者影響單一影格的資訊量。

如何保證直播低延時

一個完整的直播流程中,延時來源大致有三類:編解碼延時、網路延時,以及延時的持續累積。

編解碼延時

編碼解碼有軟編軟解與硬編硬解兩種路線。硬編硬解調用專用的硬體單元,能大幅降低 CPU 使用率,因此也直接壓低了這一環節的延時。這也是為什麼 iOS 裝置普遍採用硬編硬解;Android 端則因為機型差異大,通常需要提供編解碼方式的選擇。

網路延時

網路延時的處理有兩個層面。一是協議選擇:採用 RTMP 協議,其低延時特性本身就是對抗網路延時的重要助力。二是線路調度:透過智能調度、智能路由與智能 QoS 機制,讓推流端取得最合適的推流路線,避免繞路造成的額外延時。

播放端的動態追幀

延時會隨時間累積,來源是網路抖動、丟包與傳輸延時的不斷疊加。直播時間拉長後,累積值可能相當可觀,若無處理,畫面會越來越慢。

解法是在播放端實作動態追幀:在播放端設定一個視訊 buffer,當 buffer 存滿時,自動丟棄其中較舊的內容並補入最新的資料。這樣播放端永遠追著接近實時的位置走,延時就不會隨時間無限增長。本質上是用「偶爾跳一下」換取「延時不失控」,這個取捨在實務上通常是划算的。

連麥

連麥是直播互動性的核心功能,也因此對即時性的要求遠高於單人直播。

低延時的協議選擇

傳統單人直播常用 TCP,因為它能保證資料的可靠性,但代價是較大的延時。連麥場景則相反:延時是主要矛盾,因此改用 UDP 協議。UDP 確實存在丟包風險,需要靠額外的抗丟包機制彌補,但換來的低延時體驗是值得的。

合流方案

連麥時多路音訊需要合成一路再推送出去,這有兩種實現路徑。

伺服器端合流: 顧名思義在伺服器上完成合成。缺點很明顯——延時較大、伺服器計算壓力高、成本也高。因此七牛的實作並沒有採用這個方案。

推流端合流: 由連麥雙方中的一臺裝置負責把自己的流與其他幾路流合成、編碼後推送出去。這樣能減輕伺服器負擔,也順帶降低了延時。代價是該裝置的耗電與發熱會明顯增加,這在行動裝置上是必須接受的取捨,實作時需要留意散熱與電量體感。

補充:回聲消除

連麥過程中常出現一個現象:播放出來的聲音會被麥克風再次收音,形成回聲。對應做法是 SDK 在輸出時記錄相關資料,當麥克風擷取到內容時,把這部分資料做抵消處理,從而消除回聲。這是連麥能不能用的基礎前提,沒有它其他優化都無從談起。

小結

把上面幾點串起來看,直播品質其實是一連串取捨的結果:弱網時在流暢度與畫質之間取捨,低延時場景在可靠性與即時性之間取捨,連麥則在伺服器成本與終端耗電之間取捨。理解每個機制背後犧牲了什麼,才能在實際專案中做出合適的選擇。

  1. 上一篇文章:
  2. 下一篇文章:
蘋果刷機越獄教程| IOS教程問題解答| IOS技巧綜合| IOS7技巧| IOS8教程
Copyright © IOS教程網 All Rights Reserved