7月6日，在中赫集團(tuán)于北京舉行的工體元宇宙GTVerse發(fā)布會(huì)上，中赫集團(tuán)攜手中國(guó)移動(dòng)、高通公司共同發(fā)布了5G無(wú)界XR賽事體驗(yàn)方案，共同探索以5G、XR為代表的先進(jìn)技術(shù)在智慧體育場(chǎng)景下的應(yīng)用，助力北京新工體打造數(shù)實(shí)融合的全新應(yīng)用場(chǎng)景。
5G+XR賦能的“數(shù)實(shí)融合”新愿景
高通公司中國(guó)區(qū)研發(fā)負(fù)責(zé)人徐晧博士在發(fā)布環(huán)節(jié)進(jìn)行了主題演講，詳細(xì)闡釋了依托中赫集團(tuán)、中國(guó)移動(dòng)和高通公司領(lǐng)先優(yōu)勢(shì)，5G無(wú)界XR賽事體驗(yàn)方案的先進(jìn)性和廣闊的商業(yè)部署前景。以下為徐晧博士的演講內(nèi)容實(shí)錄：
各位來(lái)賓、各位專(zhuān)家、各位線上線下的朋友，大家下午好！非常榮幸有機(jī)會(huì)為中赫集團(tuán)、中國(guó)移動(dòng)、高通三方發(fā)布做技術(shù)解讀。我們今天的發(fā)布是關(guān)于5G+XR如何賦能全新的體育賽事體驗(yàn)。
今年是中國(guó)5G牌照發(fā)放的三周年�；仡欉^(guò)去的三年，5G在全世界得到快速的商用和發(fā)展。從終端數(shù)量、基站數(shù)量和5G應(yīng)用來(lái)說(shuō)，中國(guó)都走到了世界的最前列。5G不僅應(yīng)用于智能手機(jī)，還能夠在各行各業(yè)推動(dòng)不同應(yīng)用場(chǎng)景的創(chuàng)新。其中，
幾個(gè)應(yīng)用場(chǎng)景非常突出，包括工業(yè)4.0，無(wú)界XR，車(chē)載網(wǎng)聯(lián)和自動(dòng)駕駛。在今天的工體元宇宙發(fā)布會(huì)上，我將專(zhuān)注于介紹其中一個(gè)應(yīng)用，那就是無(wú)界XR及其在元宇宙中的運(yùn)用。
實(shí)際上，每個(gè)人對(duì)元宇宙都可以有自己的解讀。下面我將介紹，從通信技術(shù)的角度來(lái)說(shuō)，元宇宙是一個(gè)什么樣的概念？如何通過(guò)5G、6G和AI技術(shù)來(lái)賦能元宇宙的落地和部署？從物理世界來(lái)說(shuō)，萬(wàn)物互聯(lián)和人與人的互聯(lián)在一定程度上得以實(shí)現(xiàn)。在3G、4G和5G網(wǎng)絡(luò)發(fā)展，移動(dòng)互聯(lián)網(wǎng)和海量物聯(lián)網(wǎng)得以實(shí)現(xiàn)的同時(shí)，產(chǎn)生了非常多的數(shù)據(jù)，這打造了一個(gè)龐大的數(shù)字世界。構(gòu)建于物理世界之上的數(shù)字世界，催生了數(shù)字孿生的概念。對(duì)數(shù)字孿生很重要的技術(shù)需求，是需要有非常可靠的、高速的、低時(shí)延的技術(shù)，來(lái)支持它與實(shí)體世界的連接。而5G等先進(jìn)通信技術(shù)能夠滿足它的核心需求。
為什么說(shuō)5G是通向元宇宙過(guò)程中非常核心的技術(shù)？因?yàn)閷⑻摂M世界和物理世界、數(shù)字世界融合，需要有非�？焖俚倪B接，而5G正好提供了支持人與人、物與物之間完全融合的連接技術(shù)。第二項(xiàng)在元宇宙中非常核心的技術(shù)是XR，它包括AR（增強(qiáng)現(xiàn)實(shí)）、VR（虛擬現(xiàn)實(shí)）和MR（混合現(xiàn)實(shí)）。在工體元宇宙之中，可以有很多VR應(yīng)用場(chǎng)景。工體元宇宙，將實(shí)現(xiàn)實(shí)體世界與虛擬世界、數(shù)字世界的融合，例如：在虛擬看球的應(yīng)用場(chǎng)景中，用戶可以邀請(qǐng)合作伙伴和家人好友，在虛擬的房子中一起看球。這類(lèi)場(chǎng)景對(duì)通信技術(shù)的要求是非常高的。
體育賽事場(chǎng)館部署的主要技術(shù)挑戰(zhàn)，第一是人口密集，第二是非常高的流量需求，幾乎每一個(gè)用戶都有高速下載和上傳的通信需求。而5G憑借高帶寬和低時(shí)延，可以為大型體育賽事提供非常好的技術(shù)支撐。高通幫助合作伙伴在超級(jí)碗等大型體育比賽的場(chǎng)館部署中引入了毫米波技術(shù)，能夠支持大規(guī)模的下載和上傳需求。在工體元宇宙中，我們也希望能夠運(yùn)用最先進(jìn)的5G技術(shù)，打造世界一流的觀賽體驗(yàn)。
下面主要講一講，我們?nèi)绾伟裍R技術(shù)應(yīng)用到體育賽事觀看中�，F(xiàn)在XR頭顯大多體積較大，因?yàn)樾枰诮K端側(cè)進(jìn)行一些渲染或者進(jìn)行視頻播放。如果要實(shí)現(xiàn)非常高清晰的視頻播放和渲染，會(huì)產(chǎn)生非常大的運(yùn)算量和非常高的能耗。對(duì)此，我們將大多數(shù)的AI計(jì)算放在云端或者邊緣云上進(jìn)行，我們還提供了全新的XR應(yīng)用架構(gòu)，支持無(wú)界XR和分離式渲染，即把最重要、對(duì)時(shí)延要求最高的渲染放在頭顯端進(jìn)行，把對(duì)算力需求非常大的大規(guī)模渲染放在云端進(jìn)行。同時(shí)，我們不僅僅是把運(yùn)算放在很遠(yuǎn)的云端，而是需要把它放在邊緣云，通過(guò)非�？焖俚�5G連接，我們可以在頭顯和邊緣云之間實(shí)現(xiàn)出色的算力分配。
XR頭顯需要做到空間定位，也需要做到六自由度（6DoF）姿勢(shì)追蹤，以及眼球跟蹤和手勢(shì)識(shí)別。這些數(shù)據(jù)可以快速地通過(guò)5G連接傳輸?shù)?G基站，并通過(guò)5G的核心網(wǎng)連接到邊緣云。這其中的5G連接時(shí)延是20毫秒，而用戶從動(dòng)作到渲染到顯示的整個(gè)過(guò)程的時(shí)延是70毫秒。為什么有用戶使用XR設(shè)備會(huì)有眩暈的感覺(jué)，這是因?yàn)閄R設(shè)備的時(shí)延太高。同時(shí)現(xiàn)在XR終端的一大挑戰(zhàn)是終端體積比較大，能耗比較高。當(dāng)實(shí)現(xiàn)了分離式渲染以后，可以把XR的頭顯體積和功耗做到最小，這樣才能真正地讓XR終端深入到千家萬(wàn)戶，深入到每一個(gè)人的手中。我們認(rèn)為XR是非常有前景的下一代計(jì)算平臺(tái)，XR有望達(dá)到跟智能手機(jī)一樣的市場(chǎng)規(guī)模。
下面我將介紹5G無(wú)界XR是怎樣落地到工體元宇宙的。工體元宇宙實(shí)際上具備非常強(qiáng)大的超級(jí)云網(wǎng)，它提供了一個(gè)非常好的平臺(tái)。工體超級(jí)“局域公網(wǎng)”不僅支持在公有網(wǎng)絡(luò)、5G專(zhuān)網(wǎng)、毫米波以及Sub-6GHz網(wǎng)絡(luò)下的數(shù)據(jù)傳輸，同時(shí)也支持邊緣云架構(gòu)。XR頭顯可以通過(guò)5G網(wǎng)絡(luò)連接至工體支持的邊緣云，依托支持分離渲染的工體元宇宙系統(tǒng)架構(gòu)，我們能夠推動(dòng)5G無(wú)界XR在工體元宇宙的落地。同時(shí)工體元宇宙也有非常好的系統(tǒng)平臺(tái)、業(yè)務(wù)平臺(tái)并支持多形態(tài)業(yè)務(wù)終端，這使我們有機(jī)會(huì)與中赫、中國(guó)移動(dòng)和所有生態(tài)合作伙伴一起，攜手推動(dòng)5G無(wú)界XR落地工體元宇宙。
基于5G切片的端邊協(xié)同分離渲染無(wú)界XR技術(shù)演示，是高通近期與中國(guó)移動(dòng)合作，通過(guò)中國(guó)移動(dòng)的5G網(wǎng)絡(luò)切片與高通的分離式渲染技術(shù)實(shí)現(xiàn)的，這一技術(shù)演示能夠助力推動(dòng)更多應(yīng)用場(chǎng)景在工體的落地，比如，用戶可以沉浸式地觀看比賽，通過(guò)多角度、高清晰的視頻看到進(jìn)球的慢動(dòng)作回放；也可以在觀看演唱會(huì)時(shí)，欣賞不同角度、高清晰畫(huà)質(zhì)的歌手、貝斯和吉他手的表演。在工體這樣一個(gè)應(yīng)用場(chǎng)景中，高通的先進(jìn)無(wú)線通信技術(shù)能夠得到非常好的應(yīng)用。
我們期待和在座的合作伙伴一起推動(dòng)5G技術(shù)及AI技術(shù)在工體的應(yīng)用，打造更好的智慧體育體驗(yàn)。最后，預(yù)祝工體成為北京最靚麗的一張明信片。謝謝！
前沿技術(shù)演示，5G+XR生態(tài)攜手創(chuàng)新
在工體元宇宙GTVerse發(fā)布會(huì)現(xiàn)場(chǎng)，高通還聯(lián)合中國(guó)移動(dòng)、愛(ài)奇藝奇遇、世炬、共進(jìn)、當(dāng)紅齊天、SoReal、銀河威爾、夢(mèng)想綻放等多家合作伙伴，帶來(lái)多項(xiàng)XR相關(guān)前沿技術(shù)演示。
業(yè)內(nèi)首次基于5G切片的端邊協(xié)同XR分離渲染技術(shù)提升無(wú)界XR新體驗(yàn)
高通和中國(guó)移動(dòng)攜手在現(xiàn)場(chǎng)展示無(wú)界XR（Boundless XR）技術(shù)演示。演示基于愛(ài)奇藝奇遇 Dream Pro VR一體機(jī)（搭載驍龍XR2平臺(tái)）、采用中國(guó)移動(dòng)終端切片解決方案的小米智能手機(jī)（搭載驍龍移動(dòng)平臺(tái)）以及中國(guó)移動(dòng)研究院聯(lián)合世炬、共進(jìn)研制的 5G 家庭小基站（基于高通FSM100 5G RAN平臺(tái)）共同完成，利用當(dāng)紅齊天提供的沉浸式互動(dòng)內(nèi)容并基于SoReal VR分布式內(nèi)容平臺(tái)管理，端到端地驗(yàn)證了在分離渲染架構(gòu)下，XR用戶能夠利用5G提供的高速率低時(shí)延傳輸來(lái)協(xié)同邊緣云側(cè)進(jìn)行實(shí)時(shí)渲染，同時(shí)結(jié)合XR 終端側(cè)的本地優(yōu)化渲染來(lái)提供低時(shí)延沉浸式無(wú)界XR體驗(yàn)，為未來(lái)XR用戶隨時(shí)隨地體驗(yàn)栩栩如生視覺(jué)效果和無(wú)拘無(wú)束的XR體驗(yàn)奠定了堅(jiān)實(shí)的基礎(chǔ)。
基于5G超高速網(wǎng)絡(luò)端到端XR直播產(chǎn)品GVR“第二現(xiàn)場(chǎng)”開(kāi)啟未來(lái)觀賽體驗(yàn)
銀河威爾科技有限公司（GVR）是擁有全球領(lǐng)先的專(zhuān)業(yè)級(jí)三維直播交互式技術(shù)的創(chuàng)新公司，致力于未來(lái)頂級(jí)三維體驗(yàn)的規(guī)�；a(chǎn)。銀河威爾科技公司（GVR）采用自主研發(fā)的三維交互式直播產(chǎn)品——GVR“第二現(xiàn)場(chǎng)”，通過(guò)北京移動(dòng)的5G切片網(wǎng)絡(luò)和搭載驍龍5G調(diào)制解調(diào)器及射頻系統(tǒng)的5G CPE設(shè)備，將遠(yuǎn)端訓(xùn)練基地的訓(xùn)練實(shí)況以身臨其境的畫(huà)面和炫酷的AR特效，實(shí)時(shí)同步到工體元宇宙GTVerse發(fā)布會(huì)現(xiàn)場(chǎng)的愛(ài)奇藝奇遇Dream Pro VR一體機(jī)里。未來(lái)，人們可以通過(guò)穿戴式頭盔，跨越時(shí)空的限制，用數(shù)字化身的方式體驗(yàn)親臨現(xiàn)場(chǎng)觀看比賽，還可以欣賞盛大的虛擬煙花表演，體驗(yàn)一個(gè)基于5G超高速網(wǎng)絡(luò)下的元宇宙虛擬世界。
首個(gè)基于計(jì)算機(jī)視覺(jué)技術(shù)的“追光”6DoF交互系統(tǒng)
夢(mèng)想綻放（原名愛(ài)奇藝智能），是一家由愛(ài)奇藝內(nèi)部孵化、獨(dú)立運(yùn)營(yíng)，專(zhuān)注于虛擬現(xiàn)實(shí)（VR）技術(shù)、產(chǎn)品與內(nèi)容研發(fā)的科技企業(yè)。秉承“產(chǎn)品+內(nèi)容”的雙輪驅(qū)動(dòng)戰(zhàn)略，夢(mèng)想綻放致力于成為中國(guó)VR娛樂(lè)生態(tài)的開(kāi)創(chuàng)者和引領(lǐng)者。在工體元宇宙GTVerse發(fā)布會(huì)現(xiàn)場(chǎng)，夢(mèng)想綻放利用其奇遇Dream Pro VR一體機(jī)展示了基于計(jì)算機(jī)視覺(jué)技術(shù)的“追光”6DoF交互系統(tǒng)。該系統(tǒng)可實(shí)現(xiàn)頭部和手部雙6DoF空間體感定位，手柄定位精度可達(dá)毫米級(jí)別。奇遇Dream Pro搭載業(yè)界領(lǐng)先的驍龍XR2平臺(tái)，配備8GB大運(yùn)存、4K超高顯示屏。
