隨著元宇宙的持續(xù)升溫，越來(lái)越多的會(huì)議、展覽、演唱會(huì)等線下活動(dòng)搬到了線上，虛擬活動(dòng)已逐漸滲透各行各業(yè)，并持續(xù)改變著用戶的社交習(xí)慣和心智。中信建投證券在研究報(bào)告中指出，虛擬活動(dòng)有較大商業(yè)化空間，伴隨后疫情時(shí)代及元宇宙概念發(fā)酵，大量企業(yè)商家有線上活動(dòng)的需求，虛擬活動(dòng)或?qū)⒊蔀?022年元宇宙高速發(fā)展賽道。
聲網(wǎng)與眾多客戶及合作伙伴也積極探索虛擬活動(dòng)的新玩法，攜手構(gòu)建了諸如虛擬會(huì)議、云發(fā)布、云會(huì)展、云蹦迪、虛擬演唱會(huì)、元宇宙K歌等許多新穎的互動(dòng)形式，完成了超百場(chǎng)沉浸式線上虛擬活動(dòng)。Vland云現(xiàn)場(chǎng)、tatame、VS·work、gotin、Uality、COMICOMI、云活動(dòng)等知名線上虛擬活動(dòng)平臺(tái)都在使用聲網(wǎng)的服務(wù)。今年1月，聲網(wǎng)還與XRSPACE 攜手打造了全球首款音樂(lè)元宇宙PartyOn，通過(guò)搭載聲網(wǎng)MetaKTV 元K歌解決方案，用戶可以在炫酷的元宇宙場(chǎng)景中揮舞熒光棒實(shí)時(shí)嗨唱。
虛擬活動(dòng)緣何在近兩年迎來(lái)爆發(fā)？除去后疫情時(shí)代及元宇宙概念帶來(lái)的影響，首先，虛擬活動(dòng)以3D可視化、游戲化的形式復(fù)現(xiàn)線下場(chǎng)景，讓用戶們?cè)诰€上共聚一堂。用戶可以四處走動(dòng)并隨時(shí)隨地與周圍人發(fā)起音視頻交流，同時(shí)，利用空間音頻技術(shù)，極大增強(qiáng)用戶沉浸感，還原了真實(shí)線下交流體驗(yàn)。
其次，這種交流方式有效緩解傳統(tǒng)音視頻會(huì)議應(yīng)用帶來(lái)的“乏味和疲勞”體驗(yàn)，讓溝通交流更有效。用戶以虛擬形象出現(xiàn)在“世界”中，一方面可以減少用戶對(duì)自己實(shí)時(shí)畫面的注意以及用戶之間高強(qiáng)度視覺(jué)接觸的壓力；另一方面用戶可以通過(guò)表情 icon，文字狀態(tài)設(shè)置、角色動(dòng)作反饋等完成自己的態(tài)度表達(dá)，讓用戶之間的信息傳遞更加直觀和有效。
最后，在虛擬活動(dòng)中，空間場(chǎng)所的自定義構(gòu)建，能夠“無(wú)限”拓展場(chǎng)景，一個(gè)空間即可滿足多種場(chǎng)景需求。某知名虛擬活動(dòng)平臺(tái)就能夠提供多元化的基礎(chǔ)場(chǎng)景空間，如學(xué)校、辦公室。在每一個(gè)大的空間中用戶又可以通過(guò)各種功能組件（文檔共享、白板協(xié)作、一起看電影、小游戲）來(lái)實(shí)現(xiàn)多種小場(chǎng)景的構(gòu)建，即在一個(gè)空間中滿足工作、活動(dòng)、社交等多種需求。這種空間聚合場(chǎng)景、實(shí)現(xiàn)多元玩法的形式，對(duì)傳統(tǒng)場(chǎng)景上也有很強(qiáng)的借鑒意義，例如“視頻相親”、“在線教學(xué)”等也可以基于這種場(chǎng)景設(shè)計(jì)方式來(lái)實(shí)現(xiàn)。
行業(yè)首個(gè)支持單頻道上行128人，滿足創(chuàng)新場(chǎng)景互動(dòng)需求
虛擬活動(dòng)諸如大型會(huì)議、會(huì)展、演唱會(huì)等場(chǎng)景，平臺(tái)內(nèi)的參與實(shí)時(shí)交流人數(shù)很容易就突破百人，為支持這類創(chuàng)新場(chǎng)景實(shí)時(shí)互動(dòng)高并發(fā)用戶數(shù)的需求，聲網(wǎng)提供 128 人超級(jí)互動(dòng)頻道，單個(gè)頻道可支持多達(dá) 128 位用戶同時(shí)發(fā)送音視頻流，觀眾人數(shù)無(wú)限制，讓房間內(nèi)任何用戶都可以隨時(shí)開麥進(jìn)行發(fā)言交流。
圖源：Vland云現(xiàn)場(chǎng)
虛擬活動(dòng)提供商 Vland云現(xiàn)場(chǎng)就已上線128人超級(jí)互動(dòng)頻道功能。在 Vland云現(xiàn)場(chǎng)提供的虛擬會(huì)議場(chǎng)景中，用戶上線后，可以創(chuàng)建自己的虛擬形象或使用 AI facemoji，在虛擬客廳里走來(lái)走去、隨時(shí)與其他參會(huì)人互動(dòng)，完成線上場(chǎng)景中的實(shí)時(shí)交流。
聲網(wǎng)3D空間音頻模擬現(xiàn)實(shí)聽(tīng)覺(jué)，打造沉浸式語(yǔ)音體驗(yàn)
在虛擬空間中，如何通過(guò)聽(tīng)覺(jué)增加沉浸感是很多平臺(tái)方迫切解決的關(guān)鍵問(wèn)題。聲網(wǎng) 3D 空間音頻通過(guò)純軟件算法方案，模擬頭部球面區(qū)域立體聲場(chǎng)，使用戶在音頻聽(tīng)感上具有空間感。當(dāng)用戶操作虛擬人物在虛擬空間里移動(dòng)時(shí)，可以實(shí)現(xiàn)根據(jù)虛擬人物的面部朝向、音源朝向、遠(yuǎn)近距離與上下高度，呈現(xiàn)不同的空間效果，完美模擬現(xiàn)實(shí)聽(tīng)覺(jué)感受。
火遍拉美和北美地區(qū)的元宇宙社交平臺(tái) Oasis 就正在通過(guò)聲網(wǎng)的 3D 空間音頻技術(shù)，為元宇宙“原住民們”搭建起溝通的橋梁。
聲網(wǎng)AI降噪，解決100+實(shí)時(shí)互動(dòng)中的突發(fā)噪聲
既然是虛擬活動(dòng)，用戶就有可能在任何地方隨時(shí)加入平臺(tái)，那么平臺(tái)方就不得不解決用戶在實(shí)時(shí)音視頻通話中面臨的背景噪聲等問(wèn)題。聲網(wǎng) AI 降噪迄今已完成多次升級(jí)，可高精度抑制家庭噪聲、街道噪聲、機(jī)器噪聲、辦公室噪聲等在內(nèi)的100+噪聲類型，技術(shù)成熟度高。此外，聲網(wǎng)自研的 AI 推理引擎還可以使得 AI 降噪算法在 Android、iOS、Mac、Windows、Web 等主流平臺(tái)以低精度損傷、高性能、低功耗方式運(yùn)行，使用戶的設(shè)備不卡不燙。目前聲網(wǎng) Web SDK AI 降噪插件和 Native SDK AI 降噪動(dòng)態(tài)庫(kù)已跟多個(gè)客戶進(jìn)行了集成，得到了客戶的高度認(rèn)可。
背景分割能力行業(yè)領(lǐng)先
在虛擬會(huì)議、線上培訓(xùn)等場(chǎng)景中，經(jīng)常遇到參會(huì)人員使用虛擬背景加入會(huì)議的情況，這就對(duì)平臺(tái)方的背景分割、摳圖能力有較高要求，需要較完整地呈現(xiàn)出鏡頭前參會(huì)人的人像。
聲網(wǎng)采用自研的基于視頻連續(xù)幀推理的摳圖算法，在端上可以實(shí)現(xiàn)音視頻場(chǎng)景下的摳圖，并采用自研高性能計(jì)算框架，在 Native 和 Web 端都能實(shí)現(xiàn)流暢運(yùn)行。此外，聲網(wǎng)背景分割支持多人、站姿、手勢(shì)等多種模式，不論在簡(jiǎn)單或復(fù)雜的場(chǎng)景下都具備人像完整度高、邊緣平滑融合度好、背景殘留低、人像邊緣穩(wěn)定性強(qiáng)的特點(diǎn)，實(shí)際效果業(yè)內(nèi)領(lǐng)先。
為用戶接入方便及考慮到輕量化的使用體驗(yàn)，虛擬活動(dòng)平臺(tái)對(duì)于 Web 端的支持已成為必要的選擇和趨勢(shì)，因而保證 Web 端用戶的體驗(yàn)也同樣重要。目前，聲網(wǎng)在 Web 端也能夠支持3D空間音頻、AI 降噪、背景分割等能力，為用戶沉浸式的體驗(yàn)保駕護(hù)航。
除了助力企業(yè)與開發(fā)者搭建玩法多樣的各種虛擬活動(dòng)場(chǎng)景，聲網(wǎng)還于5月發(fā)布了囊括 K 歌、語(yǔ)聊、直播、互動(dòng)游戲在內(nèi)的元宇宙社交場(chǎng)景化解決方案——“元娛樂(lè)解決方案”，幫助開發(fā)者與企業(yè)一站式接入相關(guān)場(chǎng)景功能，解鎖廣闊業(yè)務(wù)增長(zhǎng)空間。
