一對(duì)一源碼，誰(shuí)是平臺(tái)上的最嬌貴的

時(shí)間：2022-05-07 22:24:01 | 來(lái)源：行業(yè)動(dòng)態(tài)

時(shí)間：2022-05-07 22:24:01 來(lái)源：行業(yè)動(dòng)態(tài)

在一對(duì)一源碼的應(yīng)用場(chǎng)景中，關(guān)于聲音的播放和收聽(tīng)都具備一定的實(shí)現(xiàn)難度，尤其是在播放的過(guò)程中，音頻受到網(wǎng)絡(luò)波動(dòng)的影響更大，更容易出現(xiàn)抖動(dòng)、收聽(tīng)不到甚至斷線或延遲過(guò)高的情況，針對(duì)應(yīng)用中一對(duì)一源碼的難點(diǎn)，平臺(tái)需要做些什么呢？



一、平臺(tái)需要做的

1、低延遲，延遲的高低對(duì)音頻的影響遠(yuǎn)比視頻要大，一般情況下為了保證視頻的播放流暢度，平臺(tái)都會(huì)設(shè)立專門的緩沖區(qū)，緩沖區(qū)的設(shè)置就必然會(huì)讓視頻存在延遲，但這并沒(méi)有影響到我們的正常觀看，不過(guò)音頻就不一樣了，一對(duì)一源碼正常通話中，音頻出現(xiàn)延遲就會(huì)影響到整個(gè)通話的流暢，可以說(shuō)一對(duì)一源碼不允許有延遲的存在

2、回聲消除，回聲消除是根據(jù)音頻剛播放時(shí)的音頻幀，將后續(xù)采集到的的回聲音頻幀去除掉，這個(gè)過(guò)程比較復(fù)雜，和用戶的使用環(huán)境有很大的關(guān)系



二、音頻的緩沖區(qū)

盡管一對(duì)一源碼在使用UDP協(xié)議不斷的降低音頻傳輸?shù)难舆t，但音頻也存在一定的緩沖區(qū)，這個(gè)緩沖區(qū)是為了網(wǎng)絡(luò)抖動(dòng)準(zhǔn)備的，用戶端的網(wǎng)絡(luò)是不確定的，網(wǎng)絡(luò)延遲一會(huì)大一會(huì)小，為了避免出現(xiàn)因?yàn)槎秳?dòng)丟失音頻包的情況，根據(jù)抖動(dòng)的大小增加緩沖的時(shí)間和力度，利用較高的延遲來(lái)?yè)Q取音頻的穩(wěn)定，犧牲實(shí)時(shí)性來(lái)保證流暢度。



三、一對(duì)一源碼的其他功能

像變聲器、混音、自帶bgm等音頻功能，對(duì)一對(duì)一源碼來(lái)說(shuō)都很平常，但它們的實(shí)現(xiàn)難度很高，尤其是變聲器這種功能，實(shí)現(xiàn)的難度讓它必須要通過(guò)三方SDK來(lái)完成，盡管現(xiàn)在很多變聲器、麥克風(fēng)等外設(shè)音頻設(shè)備自帶了這個(gè)功能，但要想保證音頻的質(zhì)量，還是平臺(tái)自帶比較好。

包括混音算法，多人語(yǔ)音聊天的情況下，音頻的產(chǎn)生是不固定的，但不可能存在多個(gè)音頻緩沖區(qū)，就需要把各方的聲音混合到一起發(fā)送出去，尤其是對(duì)于回聲消除來(lái)說(shuō)，混音的處理實(shí)在是難辦。

在實(shí)際使用過(guò)程中，電流音、“伊拉克戰(zhàn)損麥”等情況時(shí)有發(fā)生，一對(duì)一源碼的處理情況可以說(shuō)比以前復(fù)雜的多，也正因?yàn)槿绱耍_(kāi)發(fā)團(tuán)隊(duì)才更需要在音頻處理上多下功夫，保護(hù)好這個(gè)嬌貴的小公主。

聲明：以上內(nèi)容為云豹科技作者本人原創(chuàng)，未經(jīng)作者本人同意，禁止轉(zhuǎn)載，否則將追究相關(guān)法律責(zé)任