中信建投證券在研究報(bào)告中指出,虛擬活動有較大商業(yè)化空間,伴隨后疫情時(shí)代及元宇宙概念發(fā)酵,大量企業(yè)商家有線上活動的需求。為了更好的賦能虛擬活動,幫助開發(fā)者、企業(yè)打造更多針對用戶的線上沉浸式體驗(yàn),聲網(wǎng)給出了升級版的全新解決方案。
針對如何在聽覺方面打造沉浸式體驗(yàn)這一行業(yè)難點(diǎn),聲網(wǎng) 3D 空間音頻通過純軟件算法方案,模擬頭部球面區(qū)域立體聲場,使用戶在音頻聽感上具有空間感。當(dāng)用戶操作虛擬人物在虛擬空間里移動時(shí),可以實(shí)現(xiàn)根據(jù)虛擬人物的面部朝向、音源朝向、遠(yuǎn)近距離與上下高度,呈現(xiàn)不同的空間效果,完美模擬現(xiàn)實(shí)聽覺感受。目前,火遍拉美和北美地區(qū)的元宇宙社交平臺 Oasis 就正在通過聲網(wǎng)的3D空間音頻技術(shù),為元宇宙“原住民們”搭建起溝通的橋梁。
此外,針對虛擬活動實(shí)時(shí)互動中可能出現(xiàn)的背景噪音問題,聲網(wǎng)AI降噪迄今已完成多次升級,可高精度抑制家庭噪聲、街道噪聲、機(jī)器噪聲、辦公室噪聲等在內(nèi)的100+噪聲類型,技術(shù)成熟度高。目前聲網(wǎng) Web SDK AI 降噪插件和 Native SDK AI 降噪動態(tài)庫已跟多個(gè)客戶進(jìn)行了集成,得到了客戶的高度認(rèn)可。
在虛擬會議、線上培訓(xùn)等場景中,經(jīng)常遇到參會人員使用虛擬背景加入會議的情況,這就對平臺方的背景分割、摳圖能力有較高要求,需要較完整地呈現(xiàn)出鏡頭前參會人的人像。
聲網(wǎng)采用自研的基于視頻連續(xù)幀推理的摳圖算法,在端上可以實(shí)現(xiàn)音視頻場景下的摳圖,并采用自研高性能計(jì)算框架,在 Native 和 Web 端都能實(shí)現(xiàn)流暢運(yùn)行。此外,聲網(wǎng)背景分割支持多人、站姿、手勢等多種模式,不論在簡單或復(fù)雜的場景下都具備人像完整度高、邊緣平滑融合度好、背景殘留低、人像邊緣穩(wěn)定性強(qiáng)的特點(diǎn),實(shí)際效果業(yè)內(nèi)領(lǐng)先。
聲網(wǎng)除了在支持 3D 空間音頻、AI 降噪、背景分割等能力上面能夠?yàn)橛脩舫两降捏w驗(yàn)保駕護(hù)航之外,聲網(wǎng)還能提供128人超級互動頻道,單個(gè)頻道可支持多達(dá)128位用戶同時(shí)發(fā)送音視頻流,觀眾人數(shù)無限制,讓房間內(nèi)任何用戶都可以隨時(shí)開麥進(jìn)行發(fā)言交流,目前虛擬活動提供商Vland云現(xiàn)場已上線128人超級互動頻道功能。
在各種虛擬活動場景層出不窮的大趨勢下,如何科學(xué)借力,搭建玩法多樣的虛擬活動場景,探索更多可能性,將成為企業(yè)業(yè)務(wù)增長的下一個(gè)密鑰。
聲網(wǎng)的實(shí)時(shí)互動技術(shù)服務(wù)覆蓋全球200多個(gè)國家和地區(qū),并在當(dāng)?shù)靥峁┘夹g(shù)和運(yùn)營支持,同時(shí)聲網(wǎng)遵循國際認(rèn)可的信息安全和隱私保護(hù)標(biāo)準(zhǔn)以及行業(yè)要求,致力于采用國際最佳實(shí)踐來建設(shè)隱私和安全管理體系。截止目前,使用聲網(wǎng)服務(wù)的企業(yè)包括小米、陌陌、斗魚、嗶哩嗶哩、新東方、小紅書、HTC VIVE 、The Meet Group、Bunch、Yalla等遍布全球的巨頭、獨(dú)角獸及創(chuàng)業(yè)企業(yè)。