在一對一直播軟件開發(fā)過程中，需要用到哪些前處理技術(shù)（一）
時間：2022-05-18 05:51:01 | 來源：行業(yè)動態(tài)
時間：2022-05-18 05:51:01 來源：行業(yè)動態(tài)
在直播中做好對音視頻的前處理，是保證用戶基本體驗的第一步，因為它牽扯到很多關(guān)于美顏和聲音的優(yōu)化問題，用戶的感官體驗是否達(dá)標(biāo)，跟這個環(huán)節(jié)有很大聯(lián)系。那么在一對一直播軟件開發(fā)過程中，一般需要用到哪些前處理技術(shù)呢？
關(guān)于直播的前處理總共分為兩個大項，一是
音頻前處理，一是
視頻前處理。而今天，小編就來重點來講一講，音頻前處理中包含的項目。
音頻前處理，含有噪聲抑制、回波抵消和增益控制三大塊。
一、噪聲抑制 有時我們在觀看直播時，會聽到一些電流音，爆音，滋滋聲或者嘟嘟聲。其實這種情況主要來源于參數(shù)配置、網(wǎng)絡(luò)波動，甚至是代碼層面的原因。以參數(shù)配置為例，一旦配置不太匹配，就會導(dǎo)致聲音聽起來非常詭異，比如：采樣率是 32000Hz的音頻，如果給播放器配置為8000Hz或者44100Hz，就明顯會出現(xiàn)音頻慢放或者快放的效果。所以需要注意的是，在采集環(huán)節(jié)，要給系統(tǒng)的API以及第三方的庫配置正確的參數(shù)，如：采樣率、位寬、聲道數(shù)等等。
二、回波抵消 回聲一般出現(xiàn)在同時有音頻的采集和播放的場景，比如：連麥互動、混音返聽等等，采集到的音頻通過揚聲器又播放出來了，同時又被采集了進去，從而產(chǎn)生了回聲或者嘯叫聲。如果要抵消這些影響，就需要通過系統(tǒng)的回聲消除API，或者采用第三方回聲消除庫（如：speexdsp，webrtc等）進行處理。
三、增益控制 當(dāng)有對語音的響度進行調(diào)整時，就需要做針對于語音的自動增益算法處理。處理的方式也比較單一，就是對音頻采樣加上一個增益因子。但需要注意的一點是，由于人的聽覺對所有頻率的感知不是線性的，是遵循等響度曲線的，導(dǎo)致這樣處理后，聽起來感覺有的頻率加強了，有的頻率削弱了，反而導(dǎo)致語音失真放大。
所以，要讓整個頻段的頻率聽起來響度增益都是“相同”的，就必須在響度這個尺度下做增益，而不是在頻率域，即按照等響度曲線對語音的頻率進行加權(quán)，不能采用一個固定的增益因子進行加權(quán)。
以上，就是在一對一直播軟件開發(fā)過程中，需要用到的音頻前處理技術(shù)，關(guān)于視頻前處理技術(shù)，之后會繼續(xù)更新，歡迎繼續(xù)關(guān)注。
在線咨詢