在一對(duì)一直播軟件開發(fā)過程中,需要用到哪些前處理技術(shù)(二)
時(shí)間:2022-05-18 05:54:01 | 來源:行業(yè)動(dòng)態(tài)
時(shí)間:2022-05-18 05:54:01 來源:行業(yè)動(dòng)態(tài)
上期我們講到,在一對(duì)一直播軟件開發(fā)過程中,關(guān)于音頻前處理包含的項(xiàng)目。今天我們來接著聊聊,前處理的第二大項(xiàng)—視頻前處理。
視頻前處理,一般含有人臉識(shí)別與增強(qiáng)、圖像縮放、圖像增強(qiáng)和美白美顏四大塊。
一、人臉識(shí)別與增強(qiáng) 人臉識(shí)別是一種依據(jù)人的面部特征(如統(tǒng)計(jì)或幾何特征等),自動(dòng)進(jìn)行身份識(shí)別的一種生物識(shí)別技術(shù),又稱為面像識(shí)別、人像識(shí)別、相貌識(shí)別、面孔識(shí)別、面部識(shí)別等。通常我們所說的人臉識(shí)別是基于光學(xué)人臉圖像的身份識(shí)別與驗(yàn)證的簡稱。
詳細(xì)來說,就是用戶利用攝像機(jī)或攝像頭采集含有人臉的視頻流,并自動(dòng)在視頻中檢測(cè)和跟蹤人臉,進(jìn)而對(duì)檢測(cè)到的視頻圖像進(jìn)行一系列的相關(guān)應(yīng)用操作。技術(shù)上包括視頻圖像采集、特征定位、身份確認(rèn)和查找等等。而在一對(duì)一直播中,用戶端從直播視頻中提取人臉中的特征,比如眉毛高度、嘴角等等,再通過特征的對(duì)比輸出結(jié)果。
二、圖像縮放 很多人可能會(huì)問,在一對(duì)一直播軟件開發(fā)過程中,為什么還需要圖像縮放這項(xiàng)功能?其實(shí)目的很簡單,第一是使得視頻圖像符合顯示區(qū)域的大小,例如在直播平臺(tái)上往往需要將視頻窗口縮放或擴(kuò)大,這一功能在手機(jī)平臺(tái)上用的比較多;第二是為直播視頻生成對(duì)應(yīng)圖像的略縮圖(或動(dòng)圖),用于在平臺(tái)的不同頁面進(jìn)行樣本展示或預(yù)覽。
三、圖像增強(qiáng) 圖像增強(qiáng)是直播視頻前處理的一個(gè)重要內(nèi)容,在視頻(圖像)生成,傳輸或變換的過程中,由于多種因素的影響,造成視頻(圖像)質(zhì)量下降,圖像模糊,特征淹沒,給分析和識(shí)別帶來困難。因此,按特定的需要將視頻(圖像)中感興趣的特征選擇地突出,衰減不需要的特征,從而提高圖像的可懂度是圖像增強(qiáng)的主要內(nèi)容。
圖像增強(qiáng)不考慮降質(zhì)的原因,而且改善后也不一定逼近原圖像,因?yàn)樗闹饕康挠袃蓚€(gè):一是改善視頻(圖像)的視覺效果,提高清晰度;二是將視頻(圖像)轉(zhuǎn)換成一種更適合人類或機(jī)器進(jìn)行分析處理的形式,從中獲取更多有用的信息。
四、美白美顏等附屬功能 直播中,美白美顏幾乎是所有主播離不開的功能,在一對(duì)一直播中需求更甚。其達(dá)到的技術(shù)目的也和標(biāo)題一樣,但是此項(xiàng)功能可能需要人臉識(shí)別與增強(qiáng)技術(shù)的支持。此外,很多廠商也提供了美顏SDK插件,不僅是應(yīng)用于視頻前處理,也可在視頻解碼后進(jìn)行處理。
以上,就是在一對(duì)一直播軟件開發(fā)過程中,需要用的到視頻前處理技術(shù)。結(jié)合上一篇文章,對(duì)前處理技術(shù)的介紹就告一段落了,如果您還有什么疑問,歡迎給小編留言。