Microsoft Mesh混合现实平台，打开时空穿越之门

编者按：在微软年度 IT 盛会 Ignite 2021上，混合现实平台 Microsoft Mesh 全新亮相，实现了“海内存知己，天涯若比邻”的美好愿景。无论是远程会议，还是远在地球另一端的音乐会现场，通过 Microsoft Mesh 平台，用户都能够获得如身临现场一般的体验。与此同时，微软还发布了两款基于 Microsoft Mesh 平台构建的应用，包括用于 HoloLens 的 Microsoft Mesh 应用预览版，以及支持 Mesh 的新版本 AltspaceVR。本文编译自微软博客文章“‘You can actually feel like you’re in the same place’: Microsoft Mesh powers shared experiences in mixed reality”。

多年来，一直有人建议太阳马戏团的联合创始人 Guy Laliberté 采用虚拟现实技术，但这些技术手段始终无法与现场极具震撼的舞台表现力相媲美。而 Microsoft Mesh 的出现，让 Laliberté 正在重新考虑这个提议。

在微软 Ignite 2021 大会上，Laliberté  通过全息瞬移（Holoportation）技术现身会议现场。在微软首次为混合现实量身定制的主题演讲中，借助 Microsoft Mesh，世界各地的与会者只需端坐家中，即可通过虚拟化身，在共享的全息影像世界中参与会议。

“这就是混合现实最初的设想。”当微软技术院士 Alex Kipman 以全息瞬移的形象出现在 Ignite 大会的虚拟舞台上，实时解说演出的开幕体验时说：“即便真身并不在场，你也可以与其他人济济一堂，甚至你可以在不同的混合现实设备之间穿越。” 

相隔万里，同样身临其境

Laliberté 在加拿大的新公司——Lune Rouge 发起了一个叫作“Hanai World”的项目，来探索 Microsoft Mesh 如何能让人们以虚拟的方式出席音乐会、戏剧演出，以及家庭庆祝活动。这是 Laliberté 多年来一直在构思的混合现实社交平台，他希望将现场和数字娱乐体验建立连接，但是直到 Microsoft Mesh 的出现才让这一愿景成为可能。Kipman 表示：“我们的目标是回顾先前被视为不可能或过于耗时而被否决的解决方案，看看现在是否可以借助 Microsoft Mesh 平台轻松构建。”

“Hanai World”项目的名称是受一个夏威夷语词汇的启发，它大致的意思是选择一个人组建家庭，而该项目的宗旨是在数字世界与物理世界的娱乐体验之间建立新的关联。“Hanai World”项目希望为世界各地的娱乐场所创建数字化的表现形式，并以具有足够 3D 保真度的方式记录现场表演。在这其中，Microsoft Mesh 将承载多种媒体形式、多种门类的 Lune Rouge 的节目和用户生产的内容。“这将是对现场娱乐节目很好的加持补充，”Lune Rouge 的执行制作总监 Alexandre Miasnikof 说，“它将带来另外一种人际关系，并且为那些由于地理位置偏远或交通状况不便而无法亲临演出现场的人们带来娱乐。”

“我们今天所拥有的只是一种可能性，但我们不知道需要多久才能兑现，”Miasnikof 表示，“但是我们认为，Microsoft Mesh 已经为我们打下扎实的基础，我们将在此基础之上继续发展。”

海景“全息实验室”，并肩探索世界

非营利性组织 OceanX 一直以来致力于将前沿科学与引人入胜的故事讲述、产品以及技术体验相结合，为海洋教育和海洋意识培养提供支持，其科考船 OceanXplorer 是有史以来最先进的深海探测船之一，但船上空间有限，无法容纳所有热切渴望探索新知的科学家。在微软 Ignite 2021 大会上，OceanX 宣布与微软开展新的合作，在 OceanXplorer 上创建一个支持 Microsoft Mesh 的“全息实验室”，让科学家们共聚一堂——无论是亲临现场，还是以虚拟方式，共同观看探测器在探索区域的 3D 全息影像，为科考任务提供实时指引。

例如，当研究人员试图弄清楚为什么抹香鲸会在某些地区游猎时，通过 Microsoft Mesh，他们可以看到深海峡谷的全息图，其中包括放置在鲸身上的电子标签所收集到的数据，并叠加有关盐度、温度和海洋化学变化的信息，以及由鱼群探测器所提供的其他猎物的位置数据。

在 OceanX 的科考任务过程中，经常会出现一群人围坐着观看视频推送的场景，同时他们还会在视频旁的互动栏上与其他同事进行交流。那些没能亲自登船的研究人员，即使他们正在办公室的屏幕上观看相同的画面，但仅从这些互动中所得到的收获常常也十分有限。

OceanX 希望今后当研究人员使用支持 Microsoft Mesh 的兼容设备时，能够以虚拟化的形象出现在实验台旁边，只要在海底全息图上指出他们存疑的特定区域，就能够围绕他们即将看到的东西与其他科学家展开实时讨论。“因为社交是这其中至关重要的部分，” OceanX 副董事长 Vincent Pieribone 表示，“我们希望将每个人都纳入同一个房间，这样他们就可以彼此沟通，并建立真实的人脉关联。”

玩转混合现实版《精灵宝可梦Go》“爷青回”！

增强现实公司 Niantic 的创始人兼首席执行官 John Hanke 也远程加入了微软 Ignite 2021 大会，并重点介绍了 Microsoft Mesh 是如何帮助他们在虚拟和物理世界中创建共享体验的。为了扩展一种完全不同的探索方式，Niantic 在大会现场展示了依托 HoloLens 2、用于概念验证的《精灵宝可梦 GO（Pokemon GO）》游戏演示体验，展现了基于微软和 Niantic 的混合及增强现实功能所开展的全新合作愿景。

在这次并不代表真实产品的演示中，Hanke 在他喜欢的公园里和一群小精灵与《精灵宝可梦 GO》的产品营销经理 Veronica Saron 享受了一场共享混合现实的激战。Hanke 说，Niantic 的使命是创造一系列技术可以让人们进行社交活动并一起探索世界，无论是孩子们与自己的父母或小伙伴通过《精灵宝可梦 GO》一起探索他们的社区，还是成千上万的人们聚集在公园里欢度节日。

目前，Niantic 平台已经让数以千万计的用户在现实世界中获得了增强现实体验，而有了 Microsoft Mesh 功能的加持后，人们将可以借助 HoloLens，跨越时间和空间共享游戏体验。

“我们的工作，就是将数字世界和物理世界缝合在一起，将数位与原子连接在一起，让大家通过 Niantic 平台获得这些体验，”Hanke 说，“但是社交联系确实是我们所做一切工作的核心，而 Microsoft Mesh 的创新恰恰丰富了这一点。”

为更多领域创造共享虚拟空间

Microsoft Mesh 是微软多年来在众多领域不辍研发的成果，包括手眼追踪、HoloLens、永久性全息影像创建以及能够创建富有表现力的虚拟人物形象的人工智能模型。Microsoft Mesh 建立在微软的云计算平台 Azure 之上，并且集成了 Azure 的企业级安全性和隐私功能，以及其庞大的计算资源、数据、人工智能和混合现实服务等。“我们正在 Azure 智能云中实现越来越大的价值，”Kipman 说，“在这些协作体验中，全息内容并不存储于个人设备或应用中，而是在云中，我们只需要通过特殊的镜头看到它即可。”

借助支持 Microsoft Mesh 的应用，使用 3D 物理模型（如自行车、高端家具、喷气发动机以及新运动场等）的设计师或工程师，不论身在何地都能够在共享虚拟空间中以自己的真实形象出现，并在全息模型上展开协作和迭代。

Microsoft Mesh 可以让在地理位置上处于分散状态的团队，在共享混合现实会议中进行讨论和协作，而参与者将以自己虚拟化身的形象出现在会议中。

（点击链接，了解更多：www.microsoft.com/en-us/mesh）

建筑师和工程师可以像在物理空间中一样，“游走”于正在建造的工厂车间的全息模型中，了解所有设备在三维空间中是怎样组合在一起的，从而避免代价高昂的错误。而正在攻读电动汽车发动机或人体解剖学课程的工程学或医学专业的学生，则可以通过虚拟化身的形式聚集在全息模型周围，拆除发动机的某些部件或剥去表层肌肉，一探内里究竟。

在 Ignite 2021 会议期间，微软还发布了两款基于 Microsoft Mesh 平台构建的应用，其中包括用于 HoloLens 的 Microsoft Mesh 应用预览版，它能够让团队成员实现远程协作，并且可以即下即用。用户还可以申请获取支持 Microsoft Mesh 的新版本 AltspaceVR，它能够让公司在企业级安全保护措施下（包括安全登录、会话管理和隐私合规等）举行虚拟现实会议及工作研讨。在未来几个月内，Microsoft Mesh 平台还将为开发人员提供一整套由 AI 驱动的工具，用于在混合现实中构建协作解决方案所需的会话管理、空间渲染、多用户同步和全息瞬移等。

Microsoft Mesh 不仅让用户可以在混合或虚拟现实中拥有丰富的体验，其开放标准也让开发人员得以自由构建可在不同设备上运行的解决方案，这些设备包括 HoloLens 2、一系列虚拟现实头盔、智能手机、平板电脑和 PC。

随着时间的推移，用户将可以更多地使用由外部开发人员及合作伙伴所构建的、Microsoft Mesh 支持的应用，当然微软自身的产品，如 Microsoft Teams 和 Dynamics 365 等，也已计划整合 Microsoft Mesh 的技术。

Kipman 说，“当我们引入一种新的计算媒介需求时，可能需要在整个生态系统范围内进行深度研究，这正是微软所做的。现在，我们邀请大家在此基础上共同创造价值，从微软经过多年研发所提供的技术中受益。”