元宇宙，其核心是虛實融合，相互使能。從詞源來說，元宇宙英文一詞Metaverse，是超越現(xiàn)實之意，也就是在人類既有的認知空間、情感空間中，如何用現(xiàn)代媒介手段達到虛擬和真實世界的互動。這些互動包含了信息檢索、教育、娛樂以及助老助殘等等。要實現(xiàn)上述這些虛實相融的互動，德國工程院院士張建偉先生認為，必須要有多模態(tài)的人機互動作為支撐。近日在昆山舉行的元宇宙產(chǎn)業(yè)大會2023春季會院士論壇上，張建偉院士向與會者分享了題為《賦能工業(yè)4．0的多模態(tài)元宇宙》的演講。

張建偉院士指出，元宇宙包括人工智能、互聯(lián)網(wǎng)、機器人、AR、VR、5G通訊以及腦科學(xué)、新材料和新能源，元宇宙也將充分賦能未來出行、醫(yī)療、農(nóng)業(yè)、基礎(chǔ)設(shè)施檢修、娛樂、教育等領(lǐng)域。元宇宙中為什么要強調(diào)多模態(tài)的人機交互？張建偉院士強調(diào)認為：因為元宇宙不只是要有簡單的大螞蟻的四肢，要有靈魂、要有創(chuàng)意。

在闡釋上述觀點后外，張建偉院士以視頻動圖展示了幾款已經(jīng)處于應(yīng)用和尚在研發(fā)中的機器人：病毒實驗室機器人，在無人值守的情況下，自動在病毒實驗室中進行病毒試管的臨床操作；農(nóng)業(yè)機器人，農(nóng)業(yè)缺少人工是當前的巨大痛點，農(nóng)業(yè)機器人和元宇宙融合，可以進行農(nóng)業(yè)數(shù)字化建設(shè)；護理機器人，該機器人通過知識表達和虛擬學(xué)習以及真實的交互，這體現(xiàn)了真正的護理服務(wù)；編程機器人，通過學(xué)習算法，它可以自動編出和查找各種各樣非常逼真的程序；打乒乓球機器人，可以較靈活地揮拍打球等。張建偉院士指出，上述這些機器人，已經(jīng)具備了元宇宙的基本雛形。

張建偉院士進而分享說，在這些既有機器人的基礎(chǔ)上，現(xiàn)在，已經(jīng)開始讓機器人學(xué)習人類的手勢，可以運用到未來的精密裝配，同時還將人類的視覺、聽覺和觸覺，以及各種各樣的知識，全部融入到機器人的空間里。張建偉院士隨即又視頻動圖展示了一款敬老機器人，他解釋說，不只是給老人僅有視覺和聽覺的游戲，同時也要包括一些觸覺的游戲，幫助老人實行全方位的康復(fù)。張建偉院士強調(diào)，機器人的多模態(tài)學(xué)習，以及機器人在人機交互中的自適應(yīng)性和預(yù)測性，將成為元宇宙中的核心技術(shù)。

張建偉院士在演講最后總結(jié)說，元宇宙概念下，就是要讓這些多模態(tài)的機器人，不只出現(xiàn)在我們?nèi)祟愓５纳羁臻g中，而且還要存在于人類不能到達的空間，為人類的生活與生產(chǎn)助力。這也是元宇宙產(chǎn)業(yè)的作用之所在。