近日，元宇宙界中又有新的活水涌入。在Meta舉辦的實(shí)驗(yàn)室討論會(huì)上，MetaCEO小扎公布了自家元宇宙的多項(xiàng)新技術(shù)。

無(wú)論是資金還是技術(shù)，Meta都是構(gòu)建元宇宙世界中跑在最前面的一位，從去年十月不惜將Facebook改為Meta，到旗幟鮮明的花費(fèi)百億投入其中，一系列的砸錢收購(gòu)，小扎行動(dòng)派的作風(fēng)頭鐵一股腦扎入元宇宙的深海，近日也取得了一系列的成果公開分享。

此次元宇宙中Meta實(shí)驗(yàn)室的技術(shù)突破，會(huì)給行業(yè)帶來(lái)哪些啟示?作為行業(yè)的技術(shù)前驅(qū)者，小扎對(duì)自家的新技術(shù)評(píng)價(jià)是“勾勒出元宇宙的關(guān)鍵步驟，解鎖很多進(jìn)步的是AI”。AI與元宇宙碰撞，給元宇宙世界帶來(lái)的影響又是什么呢?你是否心中也有很多問(wèn)號(hào)?話不多說(shuō)，進(jìn)入正題，我們先從這些新技術(shù)的模樣談起。

AI引人遐想

在新技術(shù)公布前，有關(guān)Meta最火的消息是在二月初的財(cái)報(bào)。整個(gè)2021年度，Meta現(xiàn)實(shí)實(shí)驗(yàn)室虧損了101.9億美元，2020年度的虧損為66.2億美元。

真金白銀的投入砸下去，雷聲大，雨點(diǎn)小。很多投資人與從業(yè)者從元宇宙的狂熱中清醒了一些，不過(guò)近日Meta在元宇宙中技術(shù)的突破，似乎又讓許多人對(duì)Meta有了點(diǎn)信心，也讓元宇宙的數(shù)字世界往前邁了一步。

Meta公布的新技術(shù)囊括語(yǔ)音生成元宇宙場(chǎng)景的BuilderBot、超級(jí)AI助手CAIRaoke等。

1.語(yǔ)音生成場(chǎng)景的BuilderBot。在錄制的視頻中，我們能夠看到小扎和一位同伴在虛擬的環(huán)境中，通過(guò)一系列的語(yǔ)音指令讓本來(lái)單調(diào)的虛擬背景中，增加云朵、樹木、小島、桌椅等虛擬物品，伴隨語(yǔ)音指令的結(jié)束，一個(gè)相較豐富的虛擬場(chǎng)景建立了起來(lái)。不過(guò)現(xiàn)在的BuilderBot只是簡(jiǎn)單的demo展示，更加復(fù)雜的3D環(huán)境的生成需要時(shí)間與更深的研究。

2.超級(jí)AI助手CAIRaoke。底層是一種自我監(jiān)督端到端的神經(jīng)網(wǎng)絡(luò)模型，這個(gè)模型能夠理解與學(xué)習(xí)用戶的聲音與肢體語(yǔ)言，讓我們能夠在虛擬數(shù)字世界中和語(yǔ)音助手的對(duì)話更加流暢自然。在視頻的演示中，AI助手能夠與人交流的同時(shí)，關(guān)注到煮飯過(guò)程中的鹽量，并且及時(shí)的提醒用戶補(bǔ)充鹽的份量。目前，這一技術(shù)已經(jīng)在其視頻通話potal設(shè)備中應(yīng)用，未來(lái)也會(huì)集成在AR/VR產(chǎn)品中，增加與數(shù)字助手的交互。

3.通用機(jī)器翻譯工具。這是Meta正在開發(fā)的一項(xiàng)技術(shù)-通用的語(yǔ)音翻譯器，旨在提供所有語(yǔ)言的即時(shí)語(yǔ)音到語(yǔ)音的翻譯，而語(yǔ)言的種類涵蓋所有書面語(yǔ)言。這個(gè)通用的AI機(jī)器翻譯工具能夠打通我們與信息、人的屏障，語(yǔ)言從此不再是限制我們獲取信息的障礙。

除此之外，Meta還公布了其他的一些AI工具，這些公布的最新AI技術(shù)和此前Meta公布的超級(jí)計(jì)算機(jī)等，未來(lái)的成熟轉(zhuǎn)化，給元宇宙帶來(lái)的影響令人遐想。

元宇宙作為下一個(gè)技術(shù)形態(tài)入口，與AI技術(shù)的耦合，我們能夠明顯感受到對(duì)元宇宙世界生態(tài)內(nèi)容的豐富。數(shù)字世界中的智能陪伴、智能交互、場(chǎng)景內(nèi)容的生成與構(gòu)建等，無(wú)不在訴說(shuō)著AI各類智能工具對(duì)元宇宙世界的基建設(shè)施的智能改造，不僅僅是將大量的基礎(chǔ)設(shè)施與引導(dǎo)的工作包攬，為從業(yè)人員的減負(fù)，也給人類與機(jī)器的交流，用戶在生態(tài)內(nèi)的體驗(yàn)，提供不同于人類現(xiàn)實(shí)社會(huì)的價(jià)值。

我們看到，AI賦予的能力使得元宇宙世界的模態(tài)運(yùn)轉(zhuǎn)加速，換句話說(shuō)，元宇宙的世界構(gòu)建也會(huì)朝著電影頭號(hào)玩家中的“綠洲”深入。

智能的“人”與“環(huán)境”

對(duì)于元宇宙世界來(lái)說(shuō)，最本質(zhì)的核心是交互，而讓交互有身臨其境的感受，需要元宇宙的沉浸式體驗(yàn)。作為虛擬的平行世界，元宇宙需要包含現(xiàn)實(shí)世界擁有的所有元素。如果想要討論Meta此次的新技術(shù)為元宇宙帶來(lái)了什么，就需要回到元宇宙的基本要素中尋找答案。

行業(yè)對(duì)元宇宙的基本要素的共識(shí)基本就是以Roblox公司給出了元宇宙的八大要素為主，包含：身份、社交、沉浸感、低延遲、多元化、隨時(shí)、經(jīng)濟(jì)系統(tǒng)、文明。

筆者認(rèn)為Meta的技術(shù)突破為元宇宙帶來(lái)的變化，能夠歸結(jié)為交互與沉浸體驗(yàn)的豐富。

首先是沉浸式體驗(yàn)，語(yǔ)音生成場(chǎng)景的BuilderBot，歸根結(jié)底是讓元宇宙朝著沉浸感更加智能化的方向發(fā)展。用語(yǔ)音生產(chǎn)場(chǎng)景，這種探索式的方式，顯示了AI能夠在元宇宙創(chuàng)造復(fù)雜3D環(huán)境與新世界的潛力。

在建設(shè)多樣的沉浸式社交元宇宙路上，如果窮盡參與者的生產(chǎn)能力來(lái)進(jìn)行場(chǎng)景內(nèi)容構(gòu)建，內(nèi)容的生產(chǎn)仍舊是產(chǎn)能有限。如果轉(zhuǎn)化為AI技術(shù)的自動(dòng)化構(gòu)建，一些重復(fù)的素材與腳本設(shè)計(jì)等，簡(jiǎn)單耗時(shí)的工作能夠讓AI工具完成，元宇宙世界最核心的產(chǎn)品內(nèi)容，就能夠花更多的精力來(lái)打磨。

在交互感方面，包含著社交、低延時(shí)、多元化的要素需求。超級(jí)AI助手CAIRaoke與通用機(jī)器翻譯工具的未來(lái)形態(tài)，能夠讓元宇宙中人與人、人與數(shù)字人的交互更加流暢。元宇宙中的“人”是基礎(chǔ)的組成單元，既包含著進(jìn)入元宇宙的探索者們，也包含著元宇宙中的虛擬數(shù)字人。超級(jí)AI助手CAIRaoke能夠理解與學(xué)習(xí)用戶的聲音，從而讓我們與生態(tài)中的各類數(shù)字人進(jìn)行自然的交互。與此同時(shí)，通用機(jī)器翻譯工具能夠即時(shí)翻譯不同民族的語(yǔ)言，讓進(jìn)入元宇宙的各類背景用戶無(wú)障礙溝通。

超級(jí)AI助手CAIRaoke與通用機(jī)器翻譯工具的未來(lái)，能夠掃平元宇宙中交互的語(yǔ)言障礙，讓數(shù)字世界的交互更加簡(jiǎn)單歸一。

BuilderBot、CAIRaoke、通用機(jī)器翻譯工具等AI技術(shù)的研發(fā)方向與未來(lái)形態(tài)，讓元宇宙中基本組成單元人與環(huán)境智能升級(jí)，這也讓元宇宙越來(lái)越接近理想的狀態(tài)，吸引更多的人進(jìn)入元宇宙社交。當(dāng)然，虛擬AI與現(xiàn)實(shí)AI技術(shù)的學(xué)習(xí)與進(jìn)階會(huì)互相反哺，對(duì)于現(xiàn)實(shí)世界來(lái)說(shuō)，也推進(jìn)了創(chuàng)造性AI技術(shù)的前進(jìn)。

元宇宙的生態(tài)籍由此會(huì)變得更加立體，我們知道內(nèi)容是吸引人的關(guān)鍵，但人在數(shù)字世界的感受才是粘合與長(zhǎng)存的基礎(chǔ)，而這個(gè)感受需要數(shù)字技術(shù)將我們的感官在虛擬世界中放大，真實(shí)的質(zhì)化讓沉浸感升級(jí)。

捕捉現(xiàn)實(shí)世界：數(shù)字“通感”的步步進(jìn)階

談?wù)撐覀冊(cè)跀?shù)字世界的感官，引入通感的概念，可能會(huì)更加好理解。通感的本意指的是把不同感官如視覺、嗅覺、觸覺、聽覺等感覺互相溝通，互相轉(zhuǎn)化，借以讓人的感受更加立體豐富。那么，在元宇宙的世界，數(shù)字“通感”就是借由AI與機(jī)器讓肉身更加生動(dòng)的體驗(yàn)與探索虛擬世界，表達(dá)與傳遞情感的溫度。

數(shù)字的通感中語(yǔ)言是交互的底色，聽覺是語(yǔ)言交互的基礎(chǔ)，數(shù)字視覺(VR)與觸覺(傳感設(shè)備)則讓我們的肉身在虛擬世界有了真實(shí)的質(zhì)感和觸動(dòng)。聽覺設(shè)備與技術(shù)的進(jìn)階，再與數(shù)字視覺(VR)與傳感器設(shè)備的耦合，驅(qū)動(dòng)著元宇宙世界的真實(shí)感步步深入。

聽覺的AI技術(shù)主要以智能語(yǔ)音識(shí)別和智能語(yǔ)音合成為主，在前文的敘述中，我們了解到，在虛擬世界中，與語(yǔ)音技術(shù)集成的AI助手結(jié)合，無(wú)論是指令，還是常態(tài)的語(yǔ)音交互，AI語(yǔ)音技術(shù)的引入都會(huì)讓用戶體驗(yàn)到機(jī)器與人的陪伴和歸屬感。虛擬世界的溫度，也因?yàn)檎Z(yǔ)音技術(shù)的擬人更加自然，同時(shí)機(jī)器在交流溝通過(guò)程中的不斷學(xué)習(xí)，也會(huì)讓虛擬世界的數(shù)字人更加了解用戶的特性，AI助手成長(zhǎng)為虛擬的密友只是時(shí)間問(wèn)題。

元宇宙數(shù)字視覺方面的“通感”依賴AR/VR技術(shù)。其與AI的結(jié)合，也是未來(lái)AR/VR發(fā)展的重要一環(huán)。拿Meta旗下的Oculus舉例來(lái)說(shuō)，Oculus是很多人選擇頭顯的首選，在HorizonHome的虛擬空間，能夠用Oculus進(jìn)行社交聚會(huì)，其中的手勢(shì)識(shí)別、桌面、鍵盤、沙發(fā)等物品的追蹤都離不開AI技術(shù)的加持。視覺的數(shù)字通感，讓AR與VR從虛擬世界的入口，再到AI交互體驗(yàn)的智能升階，由實(shí)入虛，由虛到智。

數(shù)字觸覺的通感則來(lái)自于一些搭載AI技術(shù)的傳感器設(shè)備。比如Meta發(fā)布過(guò)的可穿戴手套和智能手腕設(shè)備，這些設(shè)備能夠?qū)κ植渴謩?shì)與腕部的動(dòng)態(tài)追蹤，感知環(huán)境。通過(guò)對(duì)手腕的肌電圖信號(hào)分析，系統(tǒng)能夠理解微小的手指運(yùn)動(dòng)，進(jìn)而轉(zhuǎn)換為數(shù)字命令發(fā)送到設(shè)備上，實(shí)現(xiàn)數(shù)字交互與控制。觸覺手套則通過(guò)氣動(dòng)裝置和觸覺渲染系統(tǒng)來(lái)模擬真實(shí)的觸感。觸覺渲染系統(tǒng)需要構(gòu)建相應(yīng)的軟件和算法來(lái)建模，根據(jù)手的位置、對(duì)虛擬環(huán)境物品的重量、紋理、硬度等理解分析，然后向手套的氣動(dòng)裝置發(fā)送正確的指令，來(lái)呈現(xiàn)真實(shí)物理世界的觸感。

數(shù)字的視覺、聽覺、觸覺在AI技術(shù)的加持下，破開了虛擬世界的次元壁，我們?cè)谠钪嬷械姆稚硖摂M人，能夠在數(shù)字空間中感受到虛擬世界物質(zhì)的“實(shí)感”，與信息碰撞，在虛擬世界中成長(zhǎng)。

元宇宙基礎(chǔ)設(shè)施的完善，是一個(gè)任重道遠(yuǎn)的過(guò)程，依賴通用智能技術(shù)的持續(xù)進(jìn)步，在建設(shè)元宇宙的路上，AI的應(yīng)用是讓元宇宙更富沉浸感、更具多元化的關(guān)鍵。這也是吸引無(wú)數(shù)用戶進(jìn)入與常駐元宇宙平臺(tái)的有效方式。

在傳統(tǒng)的互聯(lián)網(wǎng)中，我們的體驗(yàn)歸根結(jié)底是作為旁觀者的身份進(jìn)行信息的傳遞與交互。元宇宙中，使用AI不僅能夠?yàn)樵钪鎰?chuàng)造廣泛且豐富的環(huán)境與內(nèi)容，AI加持下的數(shù)字通感讓用戶能夠在虛擬空間中，感官被開啟并放大，并以擁有通感的虛擬人身份作為參與者身處其中，我們能夠丟掉肉身的各種限制去互動(dòng)、探索與分享。

數(shù)字通感與元宇宙的契合，AI是連通的橋梁，不可或缺，為億萬(wàn)用戶構(gòu)筑出人機(jī)共生共融的新未來(lái)。