自主音視頻技術(shù)優(yōu)化落地，驅(qū)動(dòng)移動(dòng)視聽(tīng)新體驗(yàn)！

來(lái)源： 科技視聽(tīng)

如今，移動(dòng)端高清視聽(tīng)已成主流，但以AVS3、HDR Vivid、Audio Vivid為代表的自主音視頻技術(shù)，仍面臨應(yīng)用規(guī)模不足、移動(dòng)端落地難等問(wèn)題。為破解這一困境，廣電總局設(shè)立中長(zhǎng)期科技計(jì)劃項(xiàng)目——《面向移動(dòng)端的AVS3/HDR Vivid/Audio Vivid實(shí)時(shí)編解碼系統(tǒng)技術(shù)研究及應(yīng)用示范》。

該項(xiàng)目由廣科院牽頭，聯(lián)合當(dāng)虹科技、咪咕視訊、廣東臺(tái)、四川傳媒學(xué)院及浙江傳媒學(xué)院多方發(fā)力，聚焦三大核心技術(shù)攻堅(jiān)，研發(fā)原型系統(tǒng)與播放產(chǎn)品，通過(guò)開(kāi)展移動(dòng)端應(yīng)用示范，全面打通自主技術(shù)產(chǎn)業(yè)化“最后一公里”，為移動(dòng)端用戶(hù)帶來(lái)顛覆性視聽(tīng)體驗(yàn)！

三大核心技術(shù)突破,

破解移動(dòng)端落地難題

1

AVS3編碼優(yōu)化

畫(huà)質(zhì)不打折，編碼更高效

圍繞高清視頻AVS3實(shí)時(shí)編碼需求，項(xiàng)目團(tuán)隊(duì)創(chuàng)新采用適用于AVS3的快速編碼決策方法，通過(guò)優(yōu)化塊劃分及幀內(nèi)/幀間預(yù)測(cè)模式判別流程，在保障畫(huà)質(zhì)的同時(shí)有效降低編碼復(fù)雜度。

同時(shí)，面向高清視頻中低碼率應(yīng)用場(chǎng)景，優(yōu)化并行編碼方案與碼率分配策略，實(shí)現(xiàn)更精細(xì)的動(dòng)態(tài)碼率控制能力，即使在網(wǎng)絡(luò)環(huán)境波動(dòng)時(shí)，也能保障視頻傳輸流暢穩(wěn)定。

2

HDR Vivid自適應(yīng)適配

多終端統(tǒng)一，視覺(jué)無(wú)差異

不同品牌、型號(hào)的移動(dòng)終端，常常存在同一HDR內(nèi)容呈現(xiàn)效果參差不齊的現(xiàn)象。對(duì)此，項(xiàng)目團(tuán)隊(duì)研發(fā)HDR Vivid顯示適配優(yōu)化算法，開(kāi)發(fā)基于CPU+GPU架構(gòu)的播放器，確保同一內(nèi)容在不同終端呈現(xiàn)一致的視覺(jué)效果。

由CPU負(fù)責(zé)解析動(dòng)態(tài)元數(shù)據(jù)并制定分級(jí)渲染策略，GPU依據(jù)策略與設(shè)備亮度信息執(zhí)行HDR后處理，在控制設(shè)備功耗的同時(shí)顯著提升HDR渲染性能，讓同一內(nèi)容在手機(jī)、平板等不同終端上，都能呈現(xiàn)色彩精準(zhǔn)、亮度適宜的一致視覺(jué)效果，告別“同一視頻，不同觀感”的尷尬。

3

Audio Vivid渲染

三維聲沉浸，方位超精準(zhǔn)

想要在移動(dòng)端感受“聲臨其境”？Audio Vivid技術(shù)給出完美答案！項(xiàng)目研發(fā)的實(shí)時(shí)解碼與渲染優(yōu)化算法，搭配視頻播放器解碼插件，可輕松支持多聲道、聲音對(duì)象及HOA信號(hào)的三維聲格式解碼。

通過(guò)矩陣運(yùn)算與內(nèi)存分配優(yōu)化，顯著提升解碼效率，同時(shí)集成元數(shù)據(jù)實(shí)時(shí)解析能力，動(dòng)態(tài)獲取聲音對(duì)象位置信息。在渲染端，基于HRTF算法融合聲道信息與對(duì)象位置，實(shí)現(xiàn)高保真雙耳渲染，讓用戶(hù)清晰分辨聲音來(lái)源，仿佛置身現(xiàn)場(chǎng)，沉浸式三維聲體驗(yàn)拉滿！

硬核產(chǎn)品落地：

編碼器+播放器雙加持

基于三大核心技術(shù)優(yōu)化，項(xiàng)目成功研制兩大關(guān)鍵產(chǎn)品，為自主音視頻技術(shù)落地提供強(qiáng)力支撐：

高清實(shí)時(shí)編碼器

全面支持AVS3/HDR Vivid/Audio Vivid技術(shù)，視頻實(shí)時(shí)編碼性能不低于H.266，為高清內(nèi)容高效編碼提供核心動(dòng)力；

高清實(shí)時(shí)播放器

集AVS3實(shí)時(shí)解碼、HDR Vivid顯示適配、三維聲實(shí)時(shí)解碼與雙耳渲染于一體，一站式滿足移動(dòng)端高品質(zhì)視聽(tīng)需求。

AVS3高清實(shí)時(shí)編碼器

實(shí)戰(zhàn)檢驗(yàn)！

賽事直播全面示范驗(yàn)證

在2024年廣東省籃球聯(lián)賽球王賽直播中，廣東臺(tái)通過(guò)觸電新聞APP實(shí)現(xiàn)了AVS3和雙Vivid全鏈路技術(shù)集成示范。直播全程編解碼穩(wěn)定、傳輸流暢，畫(huà)面清晰銳利、色彩還原真實(shí)，音頻雙耳渲染正常、聲畫(huà)同步精準(zhǔn)，4.3萬(wàn)余名觀眾在線見(jiàn)證了自主技術(shù)的實(shí)力。

廣東臺(tái)新媒體應(yīng)用示范

在杭州亞運(yùn)會(huì)、2024年世界杯及巴黎奧運(yùn)會(huì)等國(guó)際重大賽事期間，咪咕視頻累計(jì)在超百場(chǎng)賽事轉(zhuǎn)播中規(guī)模化應(yīng)用AVS3和雙Vivid技術(shù)。目前，該技術(shù)已在咪咕視頻APP移動(dòng)端全面落地，為數(shù)以?xún)|計(jì)的用戶(hù)提供了色彩更真實(shí)、聲音更具空間感的高品質(zhì)視聽(tīng)體驗(yàn)，讓每一場(chǎng)賽事都“近在眼前”。

咪咕視訊重大賽事轉(zhuǎn)播應(yīng)用示范

自主音視頻技術(shù)的優(yōu)化落地，不僅破解了移動(dòng)端高品質(zhì)視聽(tīng)的核心難題，更推動(dòng)我國(guó)視聽(tīng)產(chǎn)業(yè)向自主創(chuàng)新、技術(shù)領(lǐng)先的方向邁出堅(jiān)實(shí)一步。未來(lái)，隨著技術(shù)的進(jìn)一步普及與升級(jí)，移動(dòng)端視聽(tīng)將迎來(lái)更“菁彩”的明天，讓我們共同期待！

好文共賞請(qǐng)轉(zhuǎn)發(fā) 有話要說(shuō)請(qǐng)留言