在軟硬件技術(shù)空間發(fā)展的背景下，人們對于互聯(lián)網(wǎng)玩法的暢想逐步由創(chuàng)造虛擬空間向現(xiàn)實(shí)世界與虛擬空間融合邁進(jìn)。

甚至在剛剛過去的 10 月，F(xiàn)acebook 創(chuàng)始人馬克·扎克伯格將“臉書”改名為“ Meta ”，這使得“元宇宙”在整個科技圈、投資圈內(nèi)風(fēng)頭一時無兩。

說到“元宇宙”，按照目前的發(fā)展形態(tài)來看，它是一種現(xiàn)實(shí)空間復(fù)制與再造的過程，即人們在互聯(lián)網(wǎng)上再造一個具備高沉浸感、體驗(yàn)感、互動感的虛擬世界，甚至人們可以基于各個互聯(lián)網(wǎng)大廠創(chuàng)造的虛擬世界重新塑造自己的人生。

當(dāng)然，如果說真的要實(shí)現(xiàn)這樣的終極目標(biāo)，其實(shí)還需要很長的路要走，不過新冠疫情的爆發(fā)無疑為“元宇宙”的商業(yè)化用例提供了更多的市場化需求。

比如我們常見的會議場景，新冠疫情之前的會議多以線下會議為主，在線下時，參會者可以隨時選擇與其他人進(jìn)行 1 對 1 、 1 對多甚至多對多的實(shí)時交流，甚至在會議中可以臨時預(yù)約一個“小型會議包間”結(jié)識摯友，而這樣具備極強(qiáng)場景感的體驗(yàn)在傳統(tǒng)視頻會議中卻無法獲得。

目前主流的傳統(tǒng)視頻會議在呈現(xiàn)方式上較為單一，缺乏空間場景，從而使得用戶層在會議過程中現(xiàn)場感缺失，容易出現(xiàn)精神疲勞、注意力不集中等問題。

專注應(yīng)用體驗(yàn)，打造沉浸式會議“新世界”

為了解決這一難題，網(wǎng)易伏羲率先發(fā)布了一款沉浸式會議活動系統(tǒng)——“瑤臺”，以方便疫情期間人們在線上舉辦各類會議活動。

（“瑤臺”官網(wǎng)登錄界面）

“瑤臺”本身是創(chuàng)造了一個全新的古風(fēng)沉浸式虛擬會議世界，在“瑤臺”中，活動方可以按照自己實(shí)際需求在場景中設(shè)置多種風(fēng)格的活動場地，高精度復(fù)刻真實(shí)的會議場景。

同時，為了增強(qiáng)會議的互動性和體驗(yàn)感，“瑤臺”不僅同步實(shí)現(xiàn)了 PPT 嵌入式播放、文字和語音聊天、同聲翻譯、多個分會場自由切換等數(shù)十項(xiàng)會議功能，而且為了滿足了會議社交需求，無需加群，虛擬人見面就能開啟群聊。

（虛擬人走近，開啟“群聊模式”）

考慮到虛擬會議世界更加貼近現(xiàn)實(shí)會議場景，會議主辦方可以在“瑤臺”中自由選擇活動場地內(nèi)展板數(shù)量、布局與內(nèi)容；活動場地座位數(shù)量與布局；場地加載廣告；大屏幕、展板宣傳廣告；活動場地冠名等，同時“瑤臺”還支持后臺自主管理會議和會議數(shù)據(jù)分析等功

（為 DAI 2020量身打造服裝。圖片來源：網(wǎng)易）

值得一提的是，為了增加用戶體驗(yàn)的真實(shí)性和參與感，參會者可以通過上傳個性化照片打造專屬的個人虛擬形象。

依托于網(wǎng)易伏羲行業(yè)首創(chuàng)的 AI 智能捏臉技術(shù)，平臺會對肖像照片和人臉特征進(jìn)行精準(zhǔn)還原，并通過肖像網(wǎng)絡(luò)分析人臉特征，重建人臉三維信息，結(jié)合風(fēng)格化網(wǎng)絡(luò)學(xué)習(xí)數(shù)據(jù)，生成特定風(fēng)格的容顏，如發(fā)型、膚色、五官。

與此同時，虛擬人的表情、動作會實(shí)時隨著真實(shí)表情、動作的改變而改變，讓所有參會者仿佛置身于現(xiàn)實(shí)會議中，直觀感受對方的喜怒哀樂。

（專屬虛擬形象與真人驅(qū)動虛擬人示例）

目前，“瑤臺”已經(jīng)可以應(yīng)用到國際學(xué)術(shù)會議、簽約儀式、線上展會、招聘會、新產(chǎn)品發(fā)布會、品牌推介會、公司年會、頒獎儀式、圓桌會議、校園宣講會等眾多場景，并且最多可以同時容納 500 人同時在主會場參會。

此外，考慮到參會者參與此類活動的頻率，最大化提升參會者體驗(yàn)，“瑤臺”選擇了最簡單的方式，即通過瀏覽器登錄平臺，輸入?yún)a就可以進(jìn)入會議場景，免去了下載客戶端、注冊賬號等一系列繁瑣流程。

深耕底層技術(shù)，打造“瑤臺”極致互動體驗(yàn)

作為集網(wǎng)易 24 年 IM 以及音視頻技術(shù)打造的融合通信云服務(wù)專家，網(wǎng)易云信提供融合通信與音視頻的核心能力與組件。在與網(wǎng)易伏羲的合作中，“瑤臺”就深度融合了網(wǎng)易云信音視頻、屏幕共享等能力。

“瑤臺”作為一款沉浸式會議系統(tǒng)，在為用戶提供高沉浸感、高互動性的會議活動體驗(yàn)的同時，也需要做好用戶方體驗(yàn)的視聽與活動方的分享質(zhì)量。

1.自研 AI 算法，保障用戶享受高質(zhì)量視聽體驗(yàn)

網(wǎng)易云信自研的 AI 音視頻引擎，支持單、雙聲道，音頻采樣率 16 kHz - 48 kHz，碼率最高支持 128 kbps 立體聲高清音質(zhì)；視頻通話中，支持 1080P 高清畫質(zhì)。同時為了避免通話中可能存在的噪音問題，網(wǎng)易云信通過自研的音頻 3A 算法處理和 AI 音頻降噪算法，幫助用戶消除通話中的回聲和嘯叫，并對嘈雜人聲、鍵盤聲等非穩(wěn)態(tài)噪聲進(jìn)行定向降噪，從而保障“瑤臺”用戶享受純凈的通話與互動體驗(yàn)。

（參會者就墻板內(nèi)容進(jìn)行實(shí)時互動交流）

另外，網(wǎng)易云信音視頻技術(shù)支持用戶在“瑤臺”中同時加入到多房間，實(shí)現(xiàn)同時訂閱到多個會議房間的音視頻流，同時也可以將本地的音頻流、視頻流推送到某一個會議房間中，且支持會議場景內(nèi)近距離 16 人暢聊。

考慮到用戶分享與互動中可能存在的網(wǎng)絡(luò)延遲問題，網(wǎng)易云信依托領(lǐng)先的精準(zhǔn)帶寬偵測、智能擁塞控制、前向糾錯、編碼優(yōu)化等技術(shù)，實(shí)測抗丟包率達(dá) 80% ，從而保證“瑤臺”用戶即使在復(fù)雜的網(wǎng)絡(luò)環(huán)境下仍能享受高穩(wěn)定、低延時的視聽體驗(yàn)。

2.高可用網(wǎng)絡(luò)，全面保障瑤臺全球互動

當(dāng)前，“瑤臺”在應(yīng)用場景上已經(jīng)涉及到多類國際性學(xué)術(shù)大會，這就需要保證在長距離、高復(fù)雜網(wǎng)絡(luò)條件下，各種數(shù)據(jù)實(shí)時傳輸質(zhì)量。網(wǎng)易云信發(fā)布的首個獨(dú)立于業(yè)務(wù)邏輯的傳輸層基座——全球智能路由網(wǎng)絡(luò) WE-CAN ，完美支持媒體流、 IM 消息、信令以及通用數(shù)據(jù)傳輸，為“瑤臺” 99.9% 的通話提供無卡頓音視頻服務(wù)。

（ WE-CAN 全球智能路由網(wǎng)絡(luò)分層圖）

目前， WE-CAN 已在印度、中東、歐洲、北美、北非等全球 200+主要地區(qū)實(shí)現(xiàn)節(jié)點(diǎn)部署。廣泛節(jié)點(diǎn)覆蓋、完善運(yùn)營機(jī)制、靈活調(diào)度策略以及智能路由策略，這 4 大特點(diǎn)賦予 WE-CAN “傳送門”一般的屬性，不論用戶身處何處，只要數(shù)據(jù)進(jìn)入系統(tǒng)，就能快速到達(dá)目的地。

3.實(shí)時共享，打造簡單易用的分享環(huán)境

網(wǎng)易云信通過為“瑤臺”提供簡單易用的 NERTC SDK ，通過簡單集成后，演講嘉賓在會議中只需要將自己的屏幕內(nèi)容如文件、數(shù)據(jù)、網(wǎng)頁、PPT 等畫面以屏幕共享的方式分享給參會聽眾，從而讓其他與會者更加直觀的了解討論的內(nèi)容和主題，提升溝通效率。

（實(shí)時會議分享）

此外，考慮到接入成本問題，網(wǎng)易云信通過 Unity SDK 封裝技術(shù)，幫助“瑤臺”節(jié)省接入成本。

隨著虛擬現(xiàn)實(shí)技術(shù)與音視頻通話技術(shù)的逐步普及，高需求、多場景、低門檻的應(yīng)用將推動“瑤臺”的加速爆發(fā)，很多“ AI +會議”的玩法創(chuàng)新也在持續(xù)進(jìn)化中。

下一步，“瑤臺”將進(jìn)一步開發(fā)如虛擬社群、虛擬接待、 VR 虛擬現(xiàn)實(shí)等功能，而網(wǎng)易云信也將持續(xù)拓展服務(wù)邊界，為會議元宇宙、游戲元宇宙、社交元宇宙、教育元宇宙等場景持續(xù)提供穩(wěn)定、移動、可靠的融合通信云服務(wù)。