【itc干貨分享】視頻會(huì )議中核心音頻處理技術(shù)解析

　　WebRTC技術(shù)即實(shí)時(shí)通信技術(shù)，由語(yǔ)音引擎，視頻引擎和網(wǎng)絡(luò )傳輸三大模塊組成，其中語(yǔ)音引擎是WebRTC中最具價(jià)值的技術(shù)之一，也是視頻會(huì )議系統為提升音頻處理能力而采用的一項重點(diǎn)技術(shù)，實(shí)現了音頻數據的采集、前處理、編碼、發(fā)送、接受、解碼、混音、后處理、播放等一系列處理流程。

　　音視頻數據的處理有個(gè)預處理過(guò)程，也就是在音視頻數據采集完成之后的一步，主要是對采集錄制的音頻數據的預處理，預處理技術(shù)用的是3A處理，即AEC  (Acoustic Echo Cancellation) 回聲消除，ANS  (Automatic Noise Suppression) 降噪，和AGC  (Automatic Gain Control) 自動(dòng)增益控制。itc視云4.0遠程視頻會(huì )議系統采用3A音頻處理技術(shù) ，從技術(shù)層面提高語(yǔ)音清晰度，最大程度還原現場(chǎng)原聲的溝通效果。

　　AEC

　　回音消除(AEC)是為了消除機器自身發(fā)出的聲音，不影響外界傳遞過(guò)去的聲音。如在雙工通話(huà)的場(chǎng)景中，將來(lái)自遠端的經(jīng)過(guò)揚聲器放出來(lái)的聲音消掉，否則經(jīng)過(guò)麥克風(fēng)采集和近端說(shuō)話(huà)人信號混在一起被傳遞到遠端，會(huì )導致回聲甚至造成嘯叫，這種回聲對于一些通信設備來(lái)說(shuō)體驗是非常差的。

　　使用不同的自適應濾波算法調整濾波器的權值向量，估計一個(gè)近似的回聲路徑來(lái)逼近真實(shí)回聲路徑，從而得到估計的回聲信號，并在純凈語(yǔ)音和回聲的混合信號中除去此信號來(lái)實(shí)現回聲的消除。

　　ANS

　　噪聲抑制(ANS)可探測出背景噪音并消除，呈現出與會(huì )者清晰的聲音。

　　背景噪聲分為平衡噪聲和瞬時(shí)噪聲兩類(lèi)，平穩噪聲的頻譜穩定，瞬時(shí)噪聲的頻譜能量方差小，利用噪聲的特點(diǎn)，對音頻數據添加反向波形處理，即可消除噪聲。

　　AGC

　　自動(dòng)增益控制(AGC)，是使放大電路的增益自動(dòng)地隨信號強度而調整的自動(dòng)控制方法，主要用于調整音量幅值。

　　正常人交談的音量在40~60dB之間，低于25dB的聲音聽(tīng)起來(lái)很吃力，超過(guò)100dB的聲音會(huì )讓人不適。AGC的調整分為模擬部分和數字部分，模擬部分是麥克風(fēng)的采集增益，數字部分是音頻數據的數字電平調整，最終將音量調整到人接受的范圍。

　　AEC的作用就是通過(guò)播放的參考信號跟蹤出回聲并從采集信號中把回聲消除掉，隨后再經(jīng)過(guò)ANS降噪處理去除噪聲，清澈音頻效果?？蔀檩斎氲囊纛l數據帶來(lái)明顯的質(zhì)量?jì)?yōu)化，如提高信噪比，避免輸入信號溢出等。AGC可以根據對輸入信號的跟蹤，盡可能將信號調整至期望大小(幅值或能量)，從而避免不同設備采集帶來(lái)的音量差異過(guò)大。itc視云4.0遠程視頻會(huì )議系統 通過(guò)3A音頻處理 ，集成唇音同步、回聲消除、噪聲消除、自動(dòng)增益等音頻編解碼技術(shù)，還原會(huì )議現場(chǎng)原聲效果，帶來(lái)親臨其境的高效溝通。

　　itc視云4.0遠程視頻會(huì )議系統的通過(guò)用高質(zhì)、高效的視頻編解碼器實(shí)現遠程會(huì )議的4K高清交流體驗，降低延時(shí)，減少畫(huà)質(zhì)損耗，全球視頻傳輸技術(shù)20%丟包的情況下，依舊呈現4K高清畫(huà)質(zhì)，1M網(wǎng)絡(luò )即可接入1080P會(huì )議，2M網(wǎng)絡(luò )可達4K視頻效果，支持有線(xiàn)網(wǎng)絡(luò )、WiFi、4G信號等各種網(wǎng)絡(luò )接入，實(shí)現手機端、電腦端、平板端、硬終端等任意設備隨時(shí)隨地流暢與會(huì )。

　　會(huì )議資料與主講人畫(huà)面同屏顯示，進(jìn)行資料共享、重點(diǎn)批注，語(yǔ)音轉文字并存儲、會(huì )議內容錄制等智會(huì )應用，滿(mǎn)足數字會(huì )議建設需求，高效決策。云架構設計支持服務(wù)器相互備份，保障會(huì )議無(wú)間斷進(jìn)行。

　　itc視云4.0系統廣泛應用于政府、公檢法、集團企業(yè)、醫療、教育、金融、景區、園區等各個(gè)行業(yè)。