目前 ， 微软还在构建翻译和转录各种语言的功能 ， 让“Mesh”能破解语言的障碍——人们可以在虚拟空间与来自世界各地的同事见面 ， 实时的翻译会即刻出现在屏幕上 。 除了“开会”之外 ， “Mesh”还会提供一系列的沉浸式空间 ， 研究人员可以在桌子上“展示”产品原型或使用白板进行文档演示 ， 工作之余还能在活动室里“打”乒乓球、跳健身操等 。
全新社交和娱乐体验
戴上MR眼镜 ， 粉饰过的场馆会立即化作真假难辨的真实房间 。 桌椅、床、沙发都逼真呈现 ， 甚至连科幻、温馨、艺术等不同的装修风格 ， 也都精妙还原 。 在“元宇宙”当中 ， 平日里只能以二维卡通形象出现在弹幕视频里的B站人气虚拟主播 ， 首次以三维形象来到玩家眼前……
在今年Bilibili World线下嘉年华活动期间 ， 中国总部位于上海徐汇的商汤科技与Bilibili联合打造了MR（混合虚拟技术）虚拟体验馆 ， 把玩家带到了由“AI+MR”创造的“元宇宙”中 。 戴上MR眼镜 ， B站人气虚拟主播会以三维形象来到玩家眼前——这是商汤火星混合现实平台的落地成果之一 。
在MR虚拟体验馆这一案例中 ， 通过对三维空间的数字化重建 ， 同时结合图像、物体识别等AI技术 ， 火星混合现实平台可以做到理解场景中的人、事、物 ， 进而创造虚实融合的超现实互动 。
浙江大学-商汤三维视觉联合实验室副主任、火星混合现实平台首席科学家章国锋教授介绍 ， 这一平台是一个底层技术平台 ， 综合了多种多样的技术 ， 除了高精度地图构建和定位技术 ， 还包括空间计算、物体/人体的三维数字化、感知理解、绘制与虚实融合呈现、人机交互等技术等等 。 正是多种技术的融合 ， 才能打造真正的虚实融合的平台 。
“火星混合现实平台是‘元宇宙’的技术赋能平台 ， 可以帮助形成物理世界的数字孪生 ， 包括地图、场景 ， 甚至是虚拟角色的构建 ， 这个虚拟世界可以与物理世界对应、配准 ， 再结合AI技术 ， 我们可以在现实世界中与虚拟世界进行互动 ， 做到虚实融合 。 ”章国锋告诉采访人员 ， “平台将虚拟与现实世界有机融合 ， 可以打造一种类似于真实世界的‘元宇宙’的技术 ， 这也与完全虚拟的游戏世界有所不同 。 ”
在章国锋的构想中 ， “元宇宙”未来会实现更大空间的混合现实——至少是覆盖一整座城市 ， 甚至更大空间的场景 ， 而且可以将各个终端连接起来 ， 不仅仅是手机、智能眼镜 ， 还包括机器人、智能汽车等终端 。 “混合现实技术是‘元宇宙’的载体 。 现在流行的混合现实应用大部分还是基于手机、平板电脑等设备 ， 从体验来讲 ， 还不是非常理想 。 大规模的应用应该还是要依靠混合现实眼镜这样的设备的成熟和普及 ， 那时才能真正让MR融入人们生活和工作的方方面面 。 ”他表示 。
新民晚报-科学探索