速途元宇宙研究院2月28日訊 近日,Meta舉辦的實驗室討論會公布了元宇宙的多項新技術,包括語音生成元宇宙場景的Builder Bot、超級AI助手CAIRaoke等。
語音生成場景的Builder Bot。在錄制的視頻中,我們可以看到小扎和一位同伴在虛擬的環境中,通過一系列的語音指令讓本來單調的虛擬背景中,增加云朵、樹木、小島、桌椅等虛擬物品,隨著語音指令的結束,一個相較豐富的虛擬場景建立了起來。不過現在的Builder Bot只是簡單的demo展示,更加復雜的3D環境的生成需要時間與更深的研究。
超級AI助手CAIRaoke。底層是一種自我監督端到端的神經網絡模型,這個模型可以理解與學習用戶的聲音與肢體語言,讓我們可以在虛擬數字世界中和語音助手的對話更加流暢自然。在視頻的演示中,AI助手可以與人交流的同時,關注到煮飯過程中的鹽量,并且及時的提醒用戶補充鹽的份量。目前,這一技術已經在其視頻通話potal設備中應用,未來也會集成在AR/VR產品中,增加與數字助手的交互。
通用機器翻譯工具。這是Meta正在開發的一項技術-通用的語音翻譯器,旨在提供所有語言的即時語音到語音的翻譯,而語言的種類涵蓋所有書面語言。這個通用的AI機器翻譯工具可以打通我們與信息、人的屏障,語言從此不再是限制我們獲取信息的障礙。
除此之外,Meta還公布了其他的一些AI工具,這些公布的最新AI技術和此前Meta公布的超級計算機等,未來的成熟轉化,給元宇宙帶來的影響令人遐想。