3月30日,由中國(guó)移動(dòng)咪咕公司聯(lián)合中國(guó)移動(dòng)研究院、中興通訊股份有限公司牽頭,中國(guó)信息通信研究院、騰訊計(jì)算機(jī)系統(tǒng)有限公司、華為技術(shù)有限公司、中央廣播電視總臺(tái)、國(guó)家廣播電視總局廣播電視規(guī)劃院等24家單位參與編制的世界超高清視頻產(chǎn)業(yè)聯(lián)盟(UWA聯(lián)盟)《元宇宙時(shí)代超高清視音頻技術(shù)白皮書(shū)》在第十屆中國(guó)網(wǎng)絡(luò)視聽(tīng)大會(huì)上發(fā)布。
該“白皮書(shū)”認(rèn)為,元宇宙概念的核心在于時(shí)空建構(gòu),其本質(zhì)就是建構(gòu)原生于物理時(shí)空且與之交融的數(shù)字時(shí)空。元宇宙是新一代信息技術(shù)的融合創(chuàng)新,是技術(shù)聚合體、產(chǎn)業(yè)聚合體和生態(tài)聚合體。元宇宙能夠深度融合數(shù)字空間和物理世界,有望催生出一批新產(chǎn)品、新模式、新業(yè)態(tài),有望創(chuàng)造由數(shù)字“比特”與人類“原子”深度融合的新型社會(huì)景觀。
元宇宙預(yù)計(jì)將會(huì)在零售、泛娛樂(lè)、文旅、教育、政務(wù)、工業(yè)等領(lǐng)域帶來(lái)革命性的變化和創(chuàng)新,成為未來(lái)數(shù)字經(jīng)濟(jì)的一個(gè)核心領(lǐng)域。
1)零售場(chǎng)景
在元宇宙時(shí)代的線上購(gòu)物場(chǎng)景,通過(guò)超高清視音頻技術(shù)呈現(xiàn)沉浸式的三維購(gòu)物空間,升級(jí)顧客線上購(gòu)物的消費(fèi)體驗(yàn)。比如,創(chuàng)造線上數(shù)字購(gòu)物空間,在線上直接模擬體驗(yàn)穿衣?lián)Q衣服,用戶通過(guò)交互式游戲化的體驗(yàn)完成消費(fèi)。在線下購(gòu)物場(chǎng)景,通過(guò)增強(qiáng)現(xiàn)實(shí)技術(shù),提供數(shù)字化的商品360度懸浮展示,以及通過(guò)數(shù)字人營(yíng)業(yè)員提供導(dǎo)購(gòu)、導(dǎo)覽服務(wù),給用戶提供特色創(chuàng)意的數(shù)字購(gòu)物體驗(yàn)。比如,中國(guó)移動(dòng)推出的5G+AR智慧營(yíng)業(yè)廳和咪咕數(shù)字咖啡館。
2)泛娛樂(lè)場(chǎng)景
元宇宙時(shí)代,在體育和演藝直播場(chǎng)景,開(kāi)拓了新的沉浸體驗(yàn)和交互方式。傳統(tǒng)直播或演唱會(huì)中,粉絲的觀看視覺(jué)有限,互動(dòng)方式單一。而元宇宙中的演唱會(huì)則通過(guò)超高清技術(shù)呈現(xiàn)更有沉浸感的現(xiàn)場(chǎng),并可以提供更靈活的游戲體驗(yàn)現(xiàn)場(chǎng)互動(dòng)。例如咪咕在卡塔爾世界杯推出的5G+算力網(wǎng)絡(luò)的分布式實(shí)時(shí)渲染元宇宙比特空間“星際廣場(chǎng)”,用戶可以獲得專屬比特?cái)?shù)智人身份,和其他比特?cái)?shù)智人一起觀賽、觀影、觀演等各種活動(dòng)。咪咕還為“聽(tīng)不到的你”推出智能貼心的智能字幕和數(shù)字人手語(yǔ)解說(shuō),提供無(wú)障礙觀賽體驗(yàn)。
在游戲場(chǎng)景,元宇宙將現(xiàn)實(shí)生活的真實(shí)感帶入游戲中,玩家可以有更沉浸的視聽(tīng)感受,通過(guò)穿戴設(shè)備實(shí)現(xiàn)觸覺(jué)反饋,可以獲得接近現(xiàn)實(shí)、超越現(xiàn)實(shí)的體驗(yàn);此外在虛擬游戲中可以擁有類似現(xiàn)實(shí)世界實(shí)物資產(chǎn)的虛擬資產(chǎn)。元宇宙場(chǎng)景游戲的發(fā)展方向之一是降低硬件設(shè)備的門檻,進(jìn)一步加快游戲云化,并且對(duì)超高清技術(shù)在沉浸式體驗(yàn)、實(shí)時(shí)互動(dòng)等方面提出更高的要求。
在運(yùn)動(dòng)健身場(chǎng)景,元宇宙相關(guān)技術(shù)把現(xiàn)實(shí)的健身融入到虛擬世界。元宇宙健身房支持用戶隨時(shí)隨地利用碎片化時(shí)間健身,突破空間限制“面對(duì)面”與教練在線互動(dòng),用戶可以使用虛擬身份加入虛擬社群,與健身愛(ài)好者們競(jìng)賽和交流。如咪咕善跑正在通過(guò)結(jié)合虛擬現(xiàn)實(shí)技術(shù)以虛擬騎行的形式打造XR騎行平臺(tái)。基于虛擬現(xiàn)實(shí)的數(shù)智競(jìng)技場(chǎng)景,為運(yùn)動(dòng)健身提供更多沉浸的對(duì)抗性體驗(yàn),VR 電競(jìng)已獲奧委會(huì)、亞運(yùn)會(huì)等認(rèn)可。
3)文旅場(chǎng)景
元宇宙的文旅場(chǎng)景,為游客重構(gòu)時(shí)空體驗(yàn),讓文化潮起來(lái)。線上旅游交互效果升級(jí),增加沉浸感和參與感,游客只需要戴上虛擬現(xiàn)實(shí)設(shè)備便能夠來(lái)一場(chǎng)“說(shuō)走就走的旅行“。線下旅游通過(guò)增強(qiáng)現(xiàn)實(shí)技術(shù),可以拓展時(shí)間、空間的體驗(yàn),打造炫彩實(shí)景、夢(mèng)幻虛擬、跨界互動(dòng)。文旅景區(qū)可以利用AR、VR、渲染等技術(shù)加持,觀眾可以真正進(jìn)入到XR奇妙空間,第一視角沉浸感受璀璨的中國(guó)文化和美景。
4)教育場(chǎng)景
在元宇宙的教育場(chǎng)景,教學(xué)不再受限于時(shí)空條件和物理設(shè)備,且各種創(chuàng)意課堂能夠被激發(fā),教學(xué)效果可以獲得質(zhì)的提升。如數(shù)學(xué)課堂中的圖形和公式能夠在幾何空間中不斷組合和變化,科學(xué)課堂中宇宙的產(chǎn)生和發(fā)展過(guò)程就在眼前模擬重現(xiàn),歷史課堂中學(xué)生甚至能夠和歷史人物互動(dòng)。元宇宙的教育還能激發(fā)學(xué)生的創(chuàng)造性,突破現(xiàn)實(shí)約束展開(kāi)各種創(chuàng)新實(shí)驗(yàn)等。
5)政務(wù)場(chǎng)景
在元宇宙的辦公場(chǎng)景,傳統(tǒng)的遠(yuǎn)程辦公缺少實(shí)時(shí)互動(dòng)、沉浸感不足。而元宇宙技術(shù)能夠使得虛擬辦公以“面對(duì)面”互動(dòng)的方式進(jìn)行。元宇宙提升了辦公的臨場(chǎng)感,讓我們的互動(dòng)方式更加自然、真實(shí)。未來(lái),用戶還
可以通過(guò)3D化遠(yuǎn)程互動(dòng)形式,360度聊天,并進(jìn)行更豐富的肢體和觸感交流。
此外在學(xué)術(shù)、產(chǎn)業(yè)會(huì)議、活動(dòng)等場(chǎng)景,通過(guò)元宇宙技術(shù)突破時(shí)空限制,實(shí)現(xiàn)線上線下聯(lián)動(dòng)的互動(dòng)體驗(yàn)。元宇宙集會(huì)通過(guò)AR、VR技術(shù),線上和線下的參與者可以選擇以虛擬形象、真實(shí)影像出現(xiàn),線上、線下齊聚一堂,互相交流,提升會(huì)議的參與感。目前,不少學(xué)術(shù)講座論壇、畢業(yè)典禮、展會(huì)、發(fā)布會(huì)等集會(huì)都以元宇宙的方式舉行。比如奧拓電子推出的基于云渲染的沉浸式數(shù)字活動(dòng)平臺(tái),為參會(huì)人提供沉浸式會(huì)場(chǎng)體驗(yàn)。
6)工業(yè)場(chǎng)景
元宇宙工業(yè)生產(chǎn)場(chǎng)景,基于數(shù)字孿生技術(shù),元宇宙生產(chǎn)車間可提升工廠設(shè)計(jì)和生產(chǎn)的精度、速度,并可實(shí)現(xiàn)節(jié)省成本和提高效率。元宇宙為工業(yè)生產(chǎn)打破時(shí)空的限制,促進(jìn)生產(chǎn)研發(fā)涉及專家的遠(yuǎn)程協(xié)同,在虛擬空間中進(jìn)行模擬測(cè)試,提前驗(yàn)證落地可能性,降低試錯(cuò)成本和風(fēng)險(xiǎn)。
此外在數(shù)字金融、數(shù)字農(nóng)業(yè)等很多場(chǎng)景有很多應(yīng)用,而且隨著元宇宙的發(fā)展,新的應(yīng)用場(chǎng)景還會(huì)不斷拓展。這些場(chǎng)景對(duì)超高清視音頻技術(shù)都提出了新的技術(shù)要求。
在網(wǎng)絡(luò)技術(shù)方面,元宇宙時(shí)代視頻業(yè)務(wù)從高清向超高清、沉浸式發(fā)展,視頻流量越來(lái)越大,時(shí)延要求越來(lái)越苛刻,從點(diǎn)播的數(shù)秒,到直播的秒級(jí),再到沉浸交互所需的毫秒級(jí)。千兆光網(wǎng)絡(luò)、Wi-Fi6、Wi-Fi7和5G、5G-A網(wǎng)絡(luò)的發(fā)展為元宇宙業(yè)務(wù)提供了堅(jiān)實(shí)的網(wǎng)絡(luò)支撐。由于元宇宙業(yè)務(wù)需求的差異性,采用5G切片技術(shù)定制元宇宙業(yè)務(wù)的低時(shí)延和大流量切片網(wǎng)絡(luò),為其分配獨(dú)立的網(wǎng)絡(luò)資源,并允許動(dòng)態(tài)擴(kuò)縮容網(wǎng)絡(luò)資源,以及管理資源的生命周期。同時(shí),5G切片結(jié)合MEC邊緣云,實(shí)現(xiàn)端到端低延時(shí)高可靠,支持關(guān)鍵業(yè)務(wù)。
網(wǎng)絡(luò)作為聯(lián)結(jié)需求側(cè)及供給側(cè)的橋梁,通過(guò)確定性網(wǎng)絡(luò)使算力連接成網(wǎng),通過(guò)云間/云邊協(xié)同提供靈活、高效算力,實(shí)現(xiàn)存算資源優(yōu)化,在提升業(yè)務(wù)體驗(yàn)的同時(shí),極大降低成本。元宇宙時(shí)代下的業(yè)務(wù),爆發(fā)式增長(zhǎng)的視音頻數(shù)據(jù)對(duì)傳輸對(duì)于帶寬、時(shí)延、處理能力要求苛刻。為了實(shí)現(xiàn)以上需求,算力與網(wǎng)絡(luò)將深度融合,為元宇宙時(shí)代的視音頻業(yè)務(wù)創(chuàng)新提供堅(jiān)實(shí)支撐。
算力網(wǎng)絡(luò)作為算網(wǎng)深度融合的新型信息基礎(chǔ)設(shè)施,能夠?yàn)樵钪嫦碌囊曨l應(yīng)用提供全光直連的高速無(wú)損網(wǎng)絡(luò),通過(guò)算網(wǎng)統(tǒng)一編排實(shí)現(xiàn)算網(wǎng)資源的靈活調(diào)度和全局優(yōu)化,使應(yīng)用在無(wú)需感知算力和網(wǎng)絡(luò)的前提下,即可使用算力網(wǎng)絡(luò)提供的一體化服務(wù)能力,進(jìn)而催化出更多、更好、成本更低的視頻類應(yīng)用。
元宇宙的視頻業(yè)務(wù)要保證用戶實(shí)時(shí)沉浸、無(wú)卡頓流暢的交互體驗(yàn),因此面向視頻業(yè)務(wù)的算力網(wǎng)絡(luò)需要分層級(jí)獲取算力,逐層處理,分級(jí)服務(wù)。在邊緣側(cè)通過(guò)建設(shè)多樣化算力、網(wǎng)絡(luò)內(nèi)生算力支撐不同場(chǎng)景下的視頻算力需求,如與基站結(jié)合構(gòu)建接入側(cè)輕量視頻算力提供傳輸 加速、大上行帶寬等能力,與UPF結(jié)合建設(shè)邊緣網(wǎng)關(guān)視頻算力,滿足園區(qū)級(jí)算力需求;在云端構(gòu)建大規(guī)模的視頻渲染及視頻分析集群算力、高壓縮分布式存儲(chǔ),為高算力類視頻業(yè)務(wù)提供共享算力服務(wù)。未來(lái),元宇宙下的視頻應(yīng)用有效利用算力網(wǎng)絡(luò)新底座能力及增強(qiáng)型視頻服務(wù)能力,極大降低傳輸時(shí)延,支撐大帶寬元宇宙的視頻類應(yīng)用,打造沉浸式用戶體驗(yàn)。
“白皮書(shū)”中還提到,超高清視音頻新型終端有望成為新的互聯(lián)網(wǎng)入口。隨著終端技術(shù)在感知、計(jì)算、傳輸、顯示等方面的發(fā)展迭代,以手機(jī)為代表的傳統(tǒng)智能終端難以承載新型超高清視音頻人機(jī)交互的需求,桌面計(jì)算針對(duì)信息處理,智能手機(jī)聚焦溝通互動(dòng),元宇宙概念下終端入口或?qū)⑹恰绑w驗(yàn)式的”,未來(lái)移動(dòng)互聯(lián)網(wǎng)智能終端將由以信息處理為中心向以適人體驗(yàn)為中心方向發(fā)展,業(yè)界聚力發(fā)展XR等新型超高清智能終端,以及從傳統(tǒng)人機(jī)交互方式,逐步向文本聊天、語(yǔ)音對(duì)話、數(shù)字人多模態(tài)交互的方向發(fā)展,探索布局后移動(dòng)互聯(lián)網(wǎng)時(shí)代終端入口主陣地。