11月19日-22日，由國(guó)家廣播電視總局、北京市人民政府指導(dǎo)，北京市廣播電視局主辦的首屆中國(guó)(北京)國(guó)際視聽(tīng)大會(huì)(China Beijing International Audiovisual Conference，簡(jiǎn)稱(chēng)CIAC)在北京隆重舉行。

大會(huì)圍繞“視聽(tīng)改變生活，文化引領(lǐng)未來(lái)”這一主題，聚焦中國(guó)視聽(tīng)業(yè)高質(zhì)量發(fā)展，以展覽、論壇等形式展現(xiàn)廣播電視和網(wǎng)絡(luò)視聽(tīng)融合發(fā)展成果和視聽(tīng)產(chǎn)業(yè)自主創(chuàng)新成果。近300名專(zhuān)家學(xué)者齊聚一堂，聚焦視聽(tīng)業(yè)高質(zhì)量發(fā)展，交流新經(jīng)驗(yàn)、新觀(guān)點(diǎn)。

金山云高級(jí)副總裁、合伙人 梁守星

在首日召開(kāi)的“北京新視聽(tīng)年度峰會(huì)”主論壇上，金山云高級(jí)副總裁、合伙人梁守星發(fā)表了《智享沉浸視界》的主題演講，深入分享了金山云布局沉浸式視頻云的技術(shù)核心、實(shí)踐與認(rèn)知。

沉浸式視頻迎來(lái)巨大前景

隨著5G時(shí)代的到來(lái)，視頻內(nèi)容向4K/8K超高清方向演變，VR/AR/MR技術(shù)也將刷新更為新潮的互動(dòng)方式，沉浸式媒體與娛樂(lè)應(yīng)用將迎來(lái)全面爆發(fā)。為加速創(chuàng)新落地，金山云在業(yè)內(nèi)率先提出“智享沉浸視界”，布局沉浸式視頻云未來(lái)。

根據(jù)Cisco VNI數(shù)據(jù)，預(yù)計(jì)到2022年，全球CDN流量規(guī)模將達(dá)到252EB/m，其中，互聯(lián)網(wǎng)視頻流量占比呈逐年上升趨勢(shì)?！邦A(yù)計(jì)5G網(wǎng)絡(luò)下，基于超高清、低時(shí)延互動(dòng)的沉浸式視頻業(yè)務(wù)場(chǎng)景會(huì)不斷產(chǎn)生和演化，成為視頻行業(yè)的主力軍。”梁守星表示。

從整個(gè)沉浸式視頻產(chǎn)業(yè)的演變過(guò)程來(lái)看，2014-2016年市場(chǎng)培育期，圖像處理能力提升，F(xiàn)acebook收購(gòu)Oculus，微軟發(fā)布Hololens;隨后在近兩年的市場(chǎng)狂熱后，2017年產(chǎn)業(yè)進(jìn)入低谷，但大廠(chǎng)仍繼續(xù)蓄力，彼時(shí)Apple推出ARKit，Google推出ARCore;2018-2021年為全新發(fā)展期，逐漸重回?zé)狳c(diǎn)，游戲、教育等熱門(mén)應(yīng)用成熟，例如Oculus Go發(fā)布和Magic leap One正式發(fā)售等。2022年后，隨著光學(xué)、聲學(xué)等核心技術(shù)突破，產(chǎn)業(yè)將進(jìn)行發(fā)展的機(jī)遇期。

增強(qiáng)現(xiàn)實(shí)讓學(xué)習(xí)氛圍更具真實(shí)感，混合現(xiàn)實(shí)讓職業(yè)培訓(xùn)實(shí)操性更強(qiáng)，肢體識(shí)別讓互動(dòng)升級(jí)，虛擬現(xiàn)實(shí)感覺(jué)身臨其境......“我們跟很多的AR廠(chǎng)商做了溝通，很多的操作是通過(guò)AR的方式來(lái)快速學(xué)習(xí)。例如，電力維修操作員學(xué)習(xí)的基礎(chǔ)操作，他們可以通過(guò)AR去操作一些更精密的器件，可以帶來(lái)更好的實(shí)景操作的效果。”梁守星講到。

金山云視頻云的技術(shù)硬核

“從生物學(xué)角度，滿(mǎn)足人眼真正的沉浸式需要50k分辨率,沉浸式將對(duì)視頻的編解碼和傳輸帶來(lái)巨大挑戰(zhàn)?！绷菏匦潜硎荆鹕皆圃谒惴?AI+編碼技術(shù)三方面打造智能超高清編解碼方案。

金山云擁有集智高清、KSC265、KIE多組產(chǎn)品。集智高清結(jié)合金山云自主研發(fā)的KSC265編碼方式，可將高清視頻碼率節(jié)省60%，從而解決了消費(fèi)者觀(guān)看卡頓的問(wèn)題以及視頻提供商的帶寬成本問(wèn)題。金山云將于近期發(fā)布可商用版KAV1,相較于 KSC265的基線(xiàn)水平，能夠在保證高清下，壓縮率繼續(xù)提升10%-20%，同時(shí)編解碼效率更高，更好的支持未來(lái)超高清大帶寬的視頻轉(zhuǎn)碼。

梁守星表示，VR頭顯設(shè)備視頻大部分實(shí)現(xiàn)1080P以上的支持，傳統(tǒng)的編碼模式主要是對(duì)硬件解碼的支撐和編碼方式的升級(jí)，設(shè)備解碼溫度偏高。頭部轉(zhuǎn)向中涉及大量的視頻信息傳輸，金山云Tile方案解碼功耗低，分塊編碼帶寬更小，碼率節(jié)省75%。梁守星指出，Tile方案的挑戰(zhàn)在于頭部轉(zhuǎn)向延遲必須要低，要求很高的邊緣計(jì)算、視頻編碼、網(wǎng)絡(luò)傳輸能力，對(duì)AI、圖像處理均帶來(lái)很大的挑戰(zhàn)，而金山云可以通過(guò)邊緣計(jì)算中心以及GPU處理能力快速處理返回超高清的圖像。

不僅如此，金山云支持8K與VR的配合，360度高清視頻傳輸渲染，大幅降低延時(shí)，提升用戶(hù)體驗(yàn)。金山云VR FOV傳輸方案能將原始視頻切塊，分別進(jìn)行編碼、分配不同的碼率，在大幅降低視頻傳輸碼率的同時(shí)，將視角切換延遲可控制在30-60ms內(nèi)，有效消除暈動(dòng)。

在A(yíng)I助力下，金山云視頻云可對(duì)視頻場(chǎng)景進(jìn)行識(shí)別，對(duì)體育、秀場(chǎng)、游戲等場(chǎng)景匹配不同的編碼模板;通過(guò)ROI區(qū)域檢測(cè)，捕捉視頻畫(huà)面中人眼視覺(jué)焦點(diǎn)，對(duì)焦點(diǎn)區(qū)域做畫(huà)質(zhì)增強(qiáng)，使主體更加突出，背景更加純凈; 檢測(cè)出人眼真正敏感的區(qū)域，對(duì)邊緣部分進(jìn)行保護(hù)，分配碼率到更重要的地方;通過(guò)神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)，支持評(píng)價(jià)多種質(zhì)量類(lèi)型，并對(duì)不同類(lèi)型圖像質(zhì)量制定不同優(yōu)化策略。

“AI + 超高清編解碼，實(shí)現(xiàn)更佳的場(chǎng)景識(shí)別和優(yōu)化，對(duì)于編碼整體的性能，或者編碼整體的效果來(lái)說(shuō)都得到了大大的提升?！绷菏匦潜硎?，智能編碼與視頻分析為在線(xiàn)視頻、泛娛樂(lè)直播、短視頻、在線(xiàn)教育等行業(yè)助力，可有效的減少卡頓率、提高首屏?xí)r間，提升畫(huà)質(zhì)體驗(yàn)。

互動(dòng)直播成為沉浸式未來(lái)發(fā)展方向

從整個(gè)產(chǎn)業(yè)發(fā)展來(lái)看，實(shí)時(shí)交互式直播可創(chuàng)造真實(shí)感的沉浸式直播體驗(yàn)，將成為未來(lái)沉浸式發(fā)展方向。

“目前，800ms是實(shí)時(shí)互動(dòng)的臨界點(diǎn)，傳統(tǒng)直播時(shí)延達(dá)3秒，RTC可實(shí)現(xiàn)250ms甚至更低的時(shí)延，有效提升互動(dòng)體驗(yàn)，RTC + 邊緣計(jì)算技術(shù)帶來(lái)音視頻會(huì)議的低延遲?！绷菏匦潜硎?。

金山云邊緣計(jì)算提供低于15毫秒的低延遲接入，良好的跨網(wǎng)路由優(yōu)化及調(diào)度能力，高效傳輸音視頻數(shù)據(jù)流以及強(qiáng)大的算力支持。RTC結(jié)合金山云邊緣網(wǎng)絡(luò)技術(shù)有效消除視頻會(huì)議網(wǎng)絡(luò)抖動(dòng)，實(shí)現(xiàn)更低延遲的互動(dòng)體驗(yàn)。

梁守星講到，金山云LiveNet 邊緣網(wǎng)絡(luò)去中心的網(wǎng)絡(luò)拓?fù)?，大幅提升?lián)網(wǎng)穩(wěn)定性;廣泛邊緣計(jì)算節(jié)點(diǎn)、網(wǎng)絡(luò)動(dòng)態(tài)調(diào)度，讓邊緣網(wǎng)絡(luò)更智能。LiveNet網(wǎng)絡(luò)消除RTC通信網(wǎng)絡(luò)抖動(dòng)，并支持一鍵無(wú)侵入接入，智能運(yùn)維讓用戶(hù)無(wú)感知調(diào)整網(wǎng)絡(luò)狀態(tài)。

目前，金山云邊緣計(jì)算的技術(shù)優(yōu)勢(shì)主要體現(xiàn)在網(wǎng)絡(luò)和調(diào)度兩個(gè)層面。在網(wǎng)絡(luò)層面，金山云率先在邊緣節(jié)點(diǎn)上實(shí)現(xiàn)了包括彈性IP、負(fù)載均衡在內(nèi)的多種網(wǎng)絡(luò)接入方式，可以靈活的應(yīng)對(duì)各種業(yè)務(wù)場(chǎng)景，并經(jīng)過(guò)了高并發(fā)、大流量下的業(yè)務(wù)驗(yàn)證;在調(diào)度層面，金山云積極探索客戶(hù)端和邊緣節(jié)點(diǎn)，以及邊緣節(jié)點(diǎn)之間的的連接和組網(wǎng)場(chǎng)景，通過(guò)對(duì)邊緣節(jié)點(diǎn)的網(wǎng)絡(luò)質(zhì)量、承載能力以及標(biāo)準(zhǔn)容器網(wǎng)絡(luò)進(jìn)行優(yōu)化，可以實(shí)現(xiàn)靈活的邊緣節(jié)點(diǎn)的組網(wǎng)和調(diào)度。

演講最后，梁守星表示，金山云很早便明確了視頻云“向上 AI 化、向下邊緣化”的發(fā)展策略，持續(xù)優(yōu)化升級(jí)相關(guān)技術(shù)和解決方案，基于高清、VR、互動(dòng)，在IaaS、PaaS層全面布局沉浸式視頻云產(chǎn)品。同時(shí)，我們也期待5G時(shí)代更多應(yīng)用的內(nèi)容和服務(wù)出現(xiàn)，金山云希望與各方合作伙伴一起攜手打造更高清互動(dòng)的產(chǎn)業(yè)新生態(tài)，智享沉浸視界。