愛奇藝HDR Vivid 標(biāo)準(zhǔn)實(shí)踐與探索
- 來源:網(wǎng)絡(luò)視聽 smarty:if $article.tag?>
- 關(guān)鍵字:愛奇藝,實(shí)踐,探索 smarty:/if?>
- 發(fā)布時(shí)間:2023-07-30 19:26
文/ 愛奇藝副總裁 余珂
HDR Vivid 最早是超高清產(chǎn)業(yè)聯(lián)盟作為一個(gè)團(tuán)體標(biāo)準(zhǔn)發(fā)布。2022 年國家廣播電視總局將整個(gè)標(biāo)準(zhǔn)升級(jí)成為我們行業(yè)標(biāo)準(zhǔn),這對(duì)于行業(yè)來說是一個(gè)非常重要的事件。
為什么這么說呢?因?yàn)镠DR Vivid 標(biāo)準(zhǔn)不僅解決了產(chǎn)業(yè)安全的問題,從愛奇藝實(shí)踐的過程來看,這個(gè)標(biāo)準(zhǔn)為我們整個(gè)產(chǎn)業(yè)的創(chuàng)新提供了一個(gè)非常堅(jiān)實(shí)的基礎(chǔ)。在超高清視頻領(lǐng)域不斷探索的過程中,我們遇到了很多挑戰(zhàn),受限于很多標(biāo)準(zhǔn)的封閉性,造成標(biāo)準(zhǔn)缺失,整個(gè)推進(jìn)過程中一直缺乏更好的抓手。
為了給用戶提供更優(yōu)質(zhì)的視頻體驗(yàn),近幾年視頻平臺(tái)都在HDR 上做了大量投入,競(jìng)爭(zhēng)早已從內(nèi)容層面邁進(jìn)了創(chuàng)新視頻技術(shù)層面。作為以科技創(chuàng)新為驅(qū)動(dòng)的視頻平臺(tái),愛奇藝始終以技術(shù)創(chuàng)新挖掘內(nèi)容核心價(jià)值。HDR 能大幅提升整體畫質(zhì)表現(xiàn)力,能為用戶帶來更優(yōu)質(zhì)的視覺享受,也必然能進(jìn)一步提升內(nèi)容價(jià)值。
HDR Vivid 的推出,讓企業(yè)找到了一個(gè)非常好的底座,能夠基于這個(gè)底座去做各種各樣的體驗(yàn),為用戶創(chuàng)造一些新的價(jià)值。以HDR Vivid 為基礎(chǔ), 我們整個(gè)產(chǎn)業(yè)鏈可以進(jìn)行相關(guān)的延伸拓展,因此這個(gè)標(biāo)準(zhǔn)意義確實(shí)非常大。
影響HDR 顯示效果的因素很多。比如在設(shè)備層面,存在不同的設(shè)備HDR 顯示的效果不一致的問題。又比如片源的層面,存在HDR Vivid 片源比較少的問題,這就涉及到上游內(nèi)容制造方需要投入人員培訓(xùn)、HDR 制作設(shè)備等。最后在芯片層面,存在支持HDR Vivid 的芯片比較少的問題。為了給用戶呈現(xiàn)最好的HDR 效果,需要把HDR全流程的每個(gè)問題都解決好。
面對(duì)這些具體的問題與挑戰(zhàn),愛奇藝在日常實(shí)踐中摸索出了一些解決的方法。
挑戰(zhàn)一:HDR 顯示效果不一致
在實(shí)際應(yīng)用中,視頻平臺(tái)一直以來的痛點(diǎn)之一就是各個(gè)終端播放效果參差不齊,所以我們工作的一個(gè)很重要的目標(biāo)就是能夠統(tǒng)一終端播放效果。舉例來說,這里有四部手機(jī)分別為蘋果(iOS系統(tǒng))、三星(安卓系統(tǒng))、華為(鴻蒙系統(tǒng))以及價(jià)格千元左右較為便宜的低配置手機(jī)(安卓系統(tǒng)),我們希望在采用HDR Vivid 后,四臺(tái)不同系統(tǒng)、不同配置標(biāo)準(zhǔn)的手機(jī)上,最終呈現(xiàn)出來的視覺效果能夠幾乎一致。
我們采取通過播放設(shè)備認(rèn)證的方式來解決這個(gè)問題。通過對(duì)所有播放設(shè)備進(jìn)行比較細(xì)致的參數(shù)認(rèn)證,只有通過認(rèn)證的設(shè)備我們才會(huì)提供播放我們HDR Vivid 的碼流,享受到符合我們HDRVivid 標(biāo)準(zhǔn)的觀看體驗(yàn)。目前我們已經(jīng)將這個(gè)設(shè)備認(rèn)證操作規(guī)范分享給我們的合作伙伴,并在不斷進(jìn)行迭代。
我們對(duì)播放設(shè)備進(jìn)行認(rèn)證的方式包括兩種,一是主觀認(rèn)證,二是客觀認(rèn)證。主觀認(rèn)證會(huì)甄選顯示效果要求高的場(chǎng)景,例如“落日晚霞”等對(duì)設(shè)備要求特別高的場(chǎng)景,由經(jīng)驗(yàn)豐富的質(zhì)檢認(rèn)證人員重點(diǎn)觀察這些場(chǎng)景的顯示細(xì)節(jié):是否過曝、是否過亮、是否細(xì)節(jié)真實(shí)還原等,以這樣的方式讓設(shè)備顯示數(shù)十個(gè)復(fù)雜場(chǎng)景后,如果播放顯示效果是符合要求的,則該設(shè)備就可獲得認(rèn)證??陀^認(rèn)證則指的是,同樣針對(duì)以上場(chǎng)景,認(rèn)證人員使用光度計(jì)測(cè)量光量,把數(shù)據(jù)搜集之后輸入模型,模型計(jì)算之后進(jìn)行參數(shù)比對(duì),確定設(shè)備顯示是否符合標(biāo)準(zhǔn)。通過主觀或者客觀標(biāo)準(zhǔn)認(rèn)證的設(shè)備,即成為愛奇藝認(rèn)可的HDR Vivid 播放設(shè)備,可全面接入HDR Vivid 標(biāo)準(zhǔn)的視聽體驗(yàn)。目前,愛奇藝已經(jīng)提供一個(gè)在線的平臺(tái),終端設(shè)備的合作伙伴可以自助上傳認(rèn)證數(shù)據(jù)至平臺(tái)上,方便快捷地進(jìn)行播放設(shè)備認(rèn)證。
挑戰(zhàn)二:HDR Vivid 片源少
愛奇藝從2019 年開始推進(jìn)HDR 內(nèi)容,當(dāng)時(shí)主要還是基于HDR10 公開標(biāo)準(zhǔn)。面臨的一個(gè)最實(shí)際的問題就是2018 年的時(shí)候HDR 的片源非常少。為此我們提出了兩個(gè)解決方案:一方面溝通內(nèi)容供應(yīng)商,鼓勵(lì)大家采用HDR 的標(biāo)準(zhǔn)去制造、生產(chǎn)好的內(nèi)容;另一方面團(tuán)隊(duì)嘗試通過AI,用機(jī)器學(xué)習(xí)的方式來模擬調(diào)色師的工作,通過算法來將SDR 轉(zhuǎn)化到HDR。
我們從2019 年開始這項(xiàng)工作,真正開始成熟是2021—2022 年。在2021 年之前,我們主要基于HDR10 的標(biāo)準(zhǔn)來進(jìn)行,由于HDR10 標(biāo)準(zhǔn)是基于靜態(tài)的數(shù)據(jù),所以呈現(xiàn)的效果還是有所欠缺。如果我們把轉(zhuǎn)換算法比喻成一個(gè)調(diào)色師的話,在經(jīng)歷了“學(xué)徒期”之后,2021 年起開始進(jìn)入了一個(gè)逐步成長階段。在2022 年至2023 年期間,我們利用AI 的算法,通過機(jī)器學(xué)習(xí)解決了很多的問題:包括畫面過曝、偏色,在畫面高亮部位、低亮部位以及中亮部位的亮度調(diào)整,以及細(xì)節(jié)方面進(jìn)行強(qiáng)化。到2022 年底,愛奇藝上線內(nèi)容中就已經(jīng)可以看到較為明顯的效果:比如中部區(qū)亮度更明顯,對(duì)比度色彩更自然,畫面更透亮,原生HDR 能非常真實(shí)地還原現(xiàn)實(shí)世界的感受。從反饋來看,調(diào)色師的反饋非常正面;用戶的評(píng)價(jià),彈幕和視頻的評(píng)論中,用戶端的體驗(yàn)都是非常正向的。
為了讓算法應(yīng)用的效果提升,團(tuán)隊(duì)和不同的調(diào)色師進(jìn)行合作,去調(diào)教算法的精準(zhǔn)度?,F(xiàn)在調(diào)色師可以先用算法調(diào)一版作為基礎(chǔ)版本,在基礎(chǔ)版本之上對(duì)復(fù)雜版本進(jìn)行精調(diào), 效果很好的同時(shí),極大降低了調(diào)色師的工作量。算法團(tuán)隊(duì)2022 年底發(fā)表的論文顯示,SDR2HDR 算法在公開數(shù)據(jù)集HDRTV1K 上的客觀指標(biāo)上達(dá)到了業(yè)內(nèi)領(lǐng)先。從這些客觀指標(biāo)上看,目前將AI 引入取得了很好的效果。這也帶動(dòng)了愛奇藝在2022 實(shí)現(xiàn)了HDR 內(nèi)容的“爆發(fā)”。截至到2023 年一季度,HDR 內(nèi)容的上線量非常高,通過算法我們解決了HDR 內(nèi)容數(shù)量的問題。目前愛奇藝已經(jīng)上線了近一萬部支持HDR Vivid 的影視劇內(nèi)容。
挑戰(zhàn)三:支持HDR Vivid 播放設(shè)備少
HDR Vivid 作為新推出的標(biāo)準(zhǔn),它支持的芯片比較少,解決這個(gè)問題需要一定的時(shí)間。所以針對(duì)HDR Vivid 芯片少的現(xiàn)狀, 我們包括通過“軟解”方式來解決這個(gè)問題。得益于HDRVivid 是公開標(biāo)準(zhǔn),這給了技術(shù)團(tuán)隊(duì)很大的靈活性。通過利用標(biāo)準(zhǔn)公開的數(shù)據(jù),對(duì)動(dòng)態(tài)源數(shù)據(jù)的解析,團(tuán)隊(duì)很快實(shí)現(xiàn)了HDR Vivid“軟解”的方案:我們首先在蘋果的設(shè)備上實(shí)現(xiàn)了HDR Vivid 內(nèi)容的播放,這個(gè)現(xiàn)實(shí)意義重大。
團(tuán)隊(duì)也意識(shí)到 HDR 一個(gè)很重要的特性是它的亮度優(yōu)勢(shì),即亮的地方更亮,暗的地方更暗,亮度的激發(fā)成為我們思考HDR 效果非常重要的一個(gè)點(diǎn)。所以實(shí)現(xiàn)“軟解”播放之后,終端面臨的一個(gè)很大的問題是亮度激發(fā)。亮度激發(fā)是需要操作系統(tǒng)支持,我們需要操作系統(tǒng)提供亮度激發(fā)的API 接口,通過調(diào)用它的API,再根據(jù)HDRVivid 的標(biāo)準(zhǔn)有選擇地進(jìn)行亮度的激發(fā)。目前蘋果的IOS16、鴻蒙系統(tǒng)都已經(jīng)支持了亮度激發(fā)接口,效果非常好。后續(xù)我們期待和包括整機(jī)廠商、電視機(jī)的廠商、手機(jī)的廠商去和芯片的廠商等一起探討,也希望安卓系統(tǒng)能加入進(jìn)來。
總之,HDR Vivid 給我們產(chǎn)業(yè)鏈、生態(tài)提供了非常好的創(chuàng)新的基礎(chǔ),我們非常希望和產(chǎn)業(yè)界一起逐步地完善視聽生態(tài),為用戶提供極致的用戶體驗(yàn)。
