中信建投證券在研究報(bào)告中指出,虛擬活動(dòng)有較大商業(yè)化空間,伴隨后疫情時(shí)代及元宇宙概念發(fā)酵,大量企業(yè)商家有線上活動(dòng)的需求。為了更好的賦能虛擬活動(dòng),幫助開(kāi)發(fā)者、企業(yè)打造更多針對(duì)用戶的線上沉浸式體驗(yàn),聲網(wǎng)給出了升級(jí)版的全新解決方案。
針對(duì)如何在聽(tīng)覺(jué)方面打造沉浸式體驗(yàn)這一行業(yè)難點(diǎn),聲網(wǎng) 3D 空間音頻通過(guò)純軟件算法方案,模擬頭部球面區(qū)域立體聲場(chǎng),使用戶在音頻聽(tīng)感上具有空間感。當(dāng)用戶操作虛擬人物在虛擬空間里移動(dòng)時(shí),可以實(shí)現(xiàn)根據(jù)虛擬人物的面部朝向、音源朝向、遠(yuǎn)近距離與上下高度,呈現(xiàn)不同的空間效果,完美模擬現(xiàn)實(shí)聽(tīng)覺(jué)感受。目前,火遍拉美和北美地區(qū)的元宇宙社交平臺(tái) Oasis 就正在通過(guò)聲網(wǎng)的3D空間音頻技術(shù),為元宇宙“原住民們”搭建起溝通的橋梁。
此外,針對(duì)虛擬活動(dòng)實(shí)時(shí)互動(dòng)中可能出現(xiàn)的背景噪音問(wèn)題,聲網(wǎng)AI降噪迄今已完成多次升級(jí),可高精度抑制家庭噪聲、街道噪聲、機(jī)器噪聲、辦公室噪聲等在內(nèi)的100+噪聲類型,技術(shù)成熟度高。目前聲網(wǎng) Web SDK AI 降噪插件和 Native SDK AI 降噪動(dòng)態(tài)庫(kù)已跟多個(gè)客戶進(jìn)行了集成,得到了客戶的高度認(rèn)可。
在虛擬會(huì)議、線上培訓(xùn)等場(chǎng)景中,經(jīng)常遇到參會(huì)人員使用虛擬背景加入會(huì)議的情況,這就對(duì)平臺(tái)方的背景分割、摳圖能力有較高要求,需要較完整地呈現(xiàn)出鏡頭前參會(huì)人的人像。
聲網(wǎng)采用自研的基于視頻連續(xù)幀推理的摳圖算法,在端上可以實(shí)現(xiàn)音視頻場(chǎng)景下的摳圖,并采用自研高性能計(jì)算框架,在 Native 和 Web 端都能實(shí)現(xiàn)流暢運(yùn)行。此外,聲網(wǎng)背景分割支持多人、站姿、手勢(shì)等多種模式,不論在簡(jiǎn)單或復(fù)雜的場(chǎng)景下都具備人像完整度高、邊緣平滑融合度好、背景殘留低、人像邊緣穩(wěn)定性強(qiáng)的特點(diǎn),實(shí)際效果業(yè)內(nèi)領(lǐng)先。
聲網(wǎng)除了在支持 3D 空間音頻、AI 降噪、背景分割等能力上面能夠?yàn)橛脩舫两降捏w驗(yàn)保駕護(hù)航之外,聲網(wǎng)還能提供128人超級(jí)互動(dòng)頻道,單個(gè)頻道可支持多達(dá)128位用戶同時(shí)發(fā)送音視頻流,觀眾人數(shù)無(wú)限制,讓房間內(nèi)任何用戶都可以隨時(shí)開(kāi)麥進(jìn)行發(fā)言交流,目前虛擬活動(dòng)提供商Vland云現(xiàn)場(chǎng)已上線128人超級(jí)互動(dòng)頻道功能。
在各種虛擬活動(dòng)場(chǎng)景層出不窮的大趨勢(shì)下,如何科學(xué)借力,搭建玩法多樣的虛擬活動(dòng)場(chǎng)景,探索更多可能性,將成為企業(yè)業(yè)務(wù)增長(zhǎng)的下一個(gè)密鑰。
聲網(wǎng)的實(shí)時(shí)互動(dòng)技術(shù)服務(wù)覆蓋全球200多個(gè)國(guó)家和地區(qū),并在當(dāng)?shù)靥峁┘夹g(shù)和運(yùn)營(yíng)支持,同時(shí)聲網(wǎng)遵循國(guó)際認(rèn)可的信息安全和隱私保護(hù)標(biāo)準(zhǔn)以及行業(yè)要求,致力于采用國(guó)際最佳實(shí)踐來(lái)建設(shè)隱私和安全管理體系。截止目前,使用聲網(wǎng)服務(wù)的企業(yè)包括小米、陌陌、斗魚(yú)、嗶哩嗶哩、新東方、小紅書(shū)、HTC VIVE 、The Meet Group、Bunch、Yalla等遍布全球的巨頭、獨(dú)角獸及創(chuàng)業(yè)企業(yè)。