來(lái)源: 科技視聽(tīng)
![]()
如今,移動(dòng)端高清視聽(tīng)已成主流,但以AVS3、HDR Vivid、Audio Vivid為代表的自主音視頻技術(shù),仍面臨應(yīng)用規(guī)模不足、移動(dòng)端落地難等問(wèn)題。為破解這一困境,廣電總局設(shè)立中長(zhǎng)期科技計(jì)劃項(xiàng)目——《面向移動(dòng)端的AVS3/HDR Vivid/Audio Vivid實(shí)時(shí)編解碼系統(tǒng)技術(shù)研究及應(yīng)用示范》。
該項(xiàng)目由廣科院牽頭,聯(lián)合當(dāng)虹科技、咪咕視訊、廣東臺(tái)、四川傳媒學(xué)院及浙江傳媒學(xué)院多方發(fā)力,聚焦三大核心技術(shù)攻堅(jiān),研發(fā)原型系統(tǒng)與播放產(chǎn)品,通過(guò)開(kāi)展移動(dòng)端應(yīng)用示范,全面打通自主技術(shù)產(chǎn)業(yè)化“最后一公里”,為移動(dòng)端用戶(hù)帶來(lái)顛覆性視聽(tīng)體驗(yàn)!
![]()
三大核心技術(shù)突破,
破解移動(dòng)端落地難題
1
AVS3編碼優(yōu)化
畫(huà)質(zhì)不打折,編碼更高效
![]()
圍繞高清視頻AVS3實(shí)時(shí)編碼需求,項(xiàng)目團(tuán)隊(duì)創(chuàng)新采用適用于AVS3的快速編碼決策方法,通過(guò)優(yōu)化塊劃分及幀內(nèi)/幀間預(yù)測(cè)模式判別流程,在保障畫(huà)質(zhì)的同時(shí)有效降低編碼復(fù)雜度。
同時(shí),面向高清視頻中低碼率應(yīng)用場(chǎng)景,優(yōu)化并行編碼方案與碼率分配策略,實(shí)現(xiàn)更精細(xì)的動(dòng)態(tài)碼率控制能力,即使在網(wǎng)絡(luò)環(huán)境波動(dòng)時(shí),也能保障視頻傳輸流暢穩(wěn)定。
2
HDR Vivid自適應(yīng)適配
多終端統(tǒng)一,視覺(jué)無(wú)差異
![]()
不同品牌、型號(hào)的移動(dòng)終端,常常存在同一HDR內(nèi)容呈現(xiàn)效果參差不齊的現(xiàn)象。對(duì)此,項(xiàng)目團(tuán)隊(duì)研發(fā)HDR Vivid顯示適配優(yōu)化算法,開(kāi)發(fā)基于CPU+GPU架構(gòu)的播放器,確保同一內(nèi)容在不同終端呈現(xiàn)一致的視覺(jué)效果。
由CPU負(fù)責(zé)解析動(dòng)態(tài)元數(shù)據(jù)并制定分級(jí)渲染策略,GPU依據(jù)策略與設(shè)備亮度信息執(zhí)行HDR后處理,在控制設(shè)備功耗的同時(shí)顯著提升HDR渲染性能,讓同一內(nèi)容在手機(jī)、平板等不同終端上,都能呈現(xiàn)色彩精準(zhǔn)、亮度適宜的一致視覺(jué)效果,告別“同一視頻,不同觀感”的尷尬。
3
Audio Vivid渲染
三維聲沉浸,方位超精準(zhǔn)
![]()
想要在移動(dòng)端感受“聲臨其境”?Audio Vivid技術(shù)給出完美答案!項(xiàng)目研發(fā)的實(shí)時(shí)解碼與渲染優(yōu)化算法,搭配視頻播放器解碼插件,可輕松支持多聲道、聲音對(duì)象及HOA信號(hào)的三維聲格式解碼。
通過(guò)矩陣運(yùn)算與內(nèi)存分配優(yōu)化,顯著提升解碼效率,同時(shí)集成元數(shù)據(jù)實(shí)時(shí)解析能力,動(dòng)態(tài)獲取聲音對(duì)象位置信息。在渲染端,基于HRTF算法融合聲道信息與對(duì)象位置,實(shí)現(xiàn)高保真雙耳渲染,讓用戶(hù)清晰分辨聲音來(lái)源,仿佛置身現(xiàn)場(chǎng),沉浸式三維聲體驗(yàn)拉滿!
硬核產(chǎn)品落地:
編碼器+播放器雙加持
基于三大核心技術(shù)優(yōu)化,項(xiàng)目成功研制兩大關(guān)鍵產(chǎn)品,為自主音視頻技術(shù)落地提供強(qiáng)力支撐:
高清實(shí)時(shí)編碼器
全面支持AVS3/HDR Vivid/Audio Vivid技術(shù),視頻實(shí)時(shí)編碼性能不低于H.266,為高清內(nèi)容高效編碼提供核心動(dòng)力;
高清實(shí)時(shí)播放器
集AVS3實(shí)時(shí)解碼、HDR Vivid顯示適配、三維聲實(shí)時(shí)解碼與雙耳渲染于一體,一站式滿足移動(dòng)端高品質(zhì)視聽(tīng)需求。
![]()
AVS3高清實(shí)時(shí)編碼器
實(shí)戰(zhàn)檢驗(yàn)!
賽事直播全面示范驗(yàn)證
在2024年廣東省籃球聯(lián)賽球王賽直播中,廣東臺(tái)通過(guò)觸電新聞APP實(shí)現(xiàn)了AVS3和雙Vivid全鏈路技術(shù)集成示范。直播全程編解碼穩(wěn)定、傳輸流暢,畫(huà)面清晰銳利、色彩還原真實(shí),音頻雙耳渲染正常、聲畫(huà)同步精準(zhǔn),4.3萬(wàn)余名觀眾在線見(jiàn)證了自主技術(shù)的實(shí)力。
![]()
廣東臺(tái)新媒體應(yīng)用示范
在杭州亞運(yùn)會(huì)、2024年世界杯及巴黎奧運(yùn)會(huì)等國(guó)際重大賽事期間,咪咕視頻累計(jì)在超百場(chǎng)賽事轉(zhuǎn)播中規(guī)模化應(yīng)用AVS3和雙Vivid技術(shù)。目前,該技術(shù)已在咪咕視頻APP移動(dòng)端全面落地,為數(shù)以?xún)|計(jì)的用戶(hù)提供了色彩更真實(shí)、聲音更具空間感的高品質(zhì)視聽(tīng)體驗(yàn),讓每一場(chǎng)賽事都“近在眼前”。
![]()
咪咕視訊重大賽事轉(zhuǎn)播應(yīng)用示范
![]()
自主音視頻技術(shù)的優(yōu)化落地,不僅破解了移動(dòng)端高品質(zhì)視聽(tīng)的核心難題,更推動(dòng)我國(guó)視聽(tīng)產(chǎn)業(yè)向自主創(chuàng)新、技術(shù)領(lǐng)先的方向邁出堅(jiān)實(shí)一步。未來(lái),隨著技術(shù)的進(jìn)一步普及與升級(jí),移動(dòng)端視聽(tīng)將迎來(lái)更“菁彩”的明天,讓我們共同期待!
![]()
好文共賞請(qǐng)轉(zhuǎn)發(fā) 有話要說(shuō)請(qǐng)留言
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶(hù)上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.