太阳马戏团的创立者 Guy Laliberté多年来一直被建议采用虚拟现实技术,但是这些技术总是无法与现场极为震撼的舞台表现相匹敌。随着 Microsoft Mesh的出现, Laliberté对该提议进行了重新考虑。

Laliberté在微软 Ignite 2021大会上通过全息瞬移(Holoportation)技术展示了其会议现场。这是微软首次为混合现实定制的主题演讲,借助于 Microsoft Mesh,全球与会者只需坐在家里,通过虚拟身体,就可以参加共享全息图像世界的会议。

那就是最初混合现实的设想。Alex Kipman是微软的技术专家,他以全息瞬间移动的形象出现在 Ignite大会的虚拟舞台上,对演出的开场过程进行实时解说,他说:“即使你真的不在现场,你也可以与他人共处一堂,甚至可以穿越不同的混合现实设备。

远在千里之外,一见如故

Laliberté在加拿大的新公司—— LuneRouge启动了一项名为“Hanai World”的项目,探索 Microsoft Mesh是如何让人们以一种虚拟的方式参加音乐会、戏剧和家庭庆典的。Laliberté多年来一直设想的一个混合现实社交平台,他希望将现场和数字娱乐体验联系起来,但直到 Microsoft Mesh的出现才使这种设想成为可能。基普曼表示:“我们的目标是回顾以前被认为不可能或者太费时间的解决方案,并看看能否借助 Microsoft Mesh平台轻松构建这些解决方案。”

这项名为" Hanai World"的计划受到夏威夷语词汇的启发,其大致含义是选择一个人组成家庭,这个计划的目的是在数字世界和现实世界的娱乐体验之间建立新的联系。" Hanai World"项目希望为全世界的娱乐场所创造数字化的表现,并以一种足够逼真的3D方式来记录现场演出。其中, Microsoft Mesh将托管 Lune Rouge的多个媒体形式、多个类别的节目以及用户制作的内容。Lune Rouge的执行制作主管 Alexandre Miasnikof说:“这将是对现场娱乐节目的一个很好的补充,它将带来另一种类型的关系,并为那些因为地理位置偏远或者交通不便而不能来到现场的人带来娱乐。

Miasnikof表示:“我们今天只有一种可能,但我们不知道需要多长时间才能实现,但我们认为 Microsoft Mesh已经为我们奠定了坚实的基础,并且我们将在此基础上继续发展。”

海的“全息实验室”携手探索世界

非盈利性机构 OceanX一直致力于将前沿科学与迷人的故事、产品和技术经验结合起来,为海洋教育和海洋意识培养提供支持, OceanXplorer的科考船 OceanXplorer是历史上最先进的深海探测船之一,但船上的空间有限,无法容纳所有渴望探索未知世界的科学家。OceanX公司在微软Ignite2021大会上宣布与微软进行新的合作,在 OceanXplorer上创建一个支持 Microsoft Mesh的“全息实验室”,让科学家们聚集在一起,不管是来到现场,还是以虚拟的方式,一起观看探测器探测到的三维全息图像,从而为科考任务提供实时指导。

例如,当研究人员试图弄清楚为什么抹香鲸会在某些地区游猎时,通过 Microsoft Mesh,他们可以看到深海峡谷的全息图,其中包括放置在鲸身上的电子标签所收集到的数据,并叠加有关盐度、温度和海洋化学变化的信息,以及由鱼群探测器所提供的其他猎物的位置数据。

在 OceanX 的科考任务过程中,经常会出现一群人围坐着观看视频推送的场景,同时他们还会在视频旁的互动栏上与其他同事进行交流。那些没能亲自登船的研究人员,即使他们正在办公室的屏幕上观看相同的画面,但仅从这些互动中所得到的收获常常也十分有限。

OceanX 希望今后当研究人员使用支持 Microsoft Mesh 的兼容设备时,能够以虚拟化的形象出现在实验台旁边,只要在海底全息图上指出他们存疑的特定区域,就能够围绕他们即将看到的东西与其他科学家展开实时讨论。“因为社交是这其中至关重要的部分,” OceanX 副董事长 Vincent Pieribone 表示,“我们希望将每个人都纳入同一个房间,这样他们就可以彼此沟通,并建立真实的人脉关联。”

玩转混合现实版《精灵宝可梦Go》

“爷青回”!

增强现实公司 Niantic 的创始人兼首席执行官 John Hanke 也远程加入了微软 Ignite 2021 大会,并重点介绍了 Microsoft Mesh 是如何帮助他们在虚拟和物理世界中创建共享体验的。为了扩展一种完全不同的探索方式,Niantic 在大会现场展示了依托 HoloLens 2、用于概念验证的《精灵宝可梦 GO(Pokemon GO)》游戏演示体验,展现了基于微软和 Niantic 的混合及增强现实功能所开展的全新合作愿景。

在这次并不代表真实产品的演示中,Hanke 在他喜欢的公园里和一群小精灵与《精灵宝可梦 GO》的产品营销经理 Veronica Saron 享受了一场共享混合现实的激战。Hanke 说,Niantic 的使命是创造一系列技术可以让人们进行社交活动并一起探索世界,无论是孩子们与自己的父母或小伙伴通过《精灵宝可梦 GO》一起探索他们的社区,还是成千上万的人们聚集在公园里欢度节日。

目前,Niantic 平台已经让数以千万计的用户在现实世界中获得了增强现实体验,而有了 Microsoft Mesh 功能的加持后,人们将可以借助 HoloLens,跨越时间和空间共享游戏体验。

“我们的工作,就是将数字世界和物理世界缝合在一起,将数位与原子连接在一起,让大家通过 Niantic 平台获得这些体验,”Hanke 说,“但是社交联系确实是我们所做一切工作的核心,而 Microsoft Mesh 的创新恰恰丰富了这一点。”

为更多领域创造共享虚拟空间

Microsoft Mesh 是微软多年来在众多领域不辍研发的成果,包括手眼追踪、HoloLens、永久性全息影像创建以及能够创建富有表现力的虚拟人物形象的人工智能模型。Microsoft Mesh 建立在微软的云计算平台 Azure 之上,并且集成了 Azure 的企业级安全性和隐私功能,以及其庞大的计算资源、数据、人工智能和混合现实服务等。“我们正在 Azure 智能云中实现越来越大的价值,”Kipman 说,“在这些协作体验中,全息内容并不存储于个人设备或应用中,而是在云中,我们只需要通过特殊的镜头看到它即可。”

借助支持 Microsoft Mesh 的应用,使用 3D 物理模型(如自行车、高端家具、喷气发动机以及新运动场等)的设计师或工程师,不论身在何地都能够在共享虚拟空间中以自己的真实形象出现,并在全息模型上展开协作和迭代。

设计师和工程师可以像在物理空间一样,在正在建造的工厂车间的全息模型中“游动”,了解所有设备如何在三维空间中组合在一起,从而避免代价高昂的错误。工科或医学专业学习电动汽车发动机或人体解剖学课程的学生,可以以虚拟化身的形式聚集在一个全息模型周围,移除发动机的某些部件或剥离其表层肌肉,一探内里到底。

微软还在 Ignite 2021大会期间发布了两个基于 Microsoft Mesh平台的应用程序,包括 Microsoft Mesh应用程序预览版的 HoloLens,该预览版允许团队成员进行远程协作,并可随时下载。使用者也可以申请获得新版 AltspaceVR,该 VR支持 Microsoft Mesh,允许公司在企业级安全保护(包括安全登录、会话管理和遵守隐私等)下举行虚拟现实会议和工作研讨会。今后几个月, Microsoft Mesh平台还将向开发人员提供一整套 AI驱动的工具,用于会话管理、空间渲染、多用户同步以及混合现实中的瞬移等,这些都是构建协作解决方案所必需的。

不仅 Microsoft Mesh允许用户在混合或虚拟现实中拥有丰富的体验,它的开放标准还允许开发人员自由地构建可在不同设备上运行的解决方案,其中包括HoloLens2、虚拟现实头盔、智能手机、平板电脑和 PC。

久而久之,用户就可以使用由外部开发者和合作伙伴构建的 Microsoft Mesh支持的应用程序了,当然,微软自己的产品,比如 Microsoft Teams和 Dynamics 365等,也计划整合 Microsoft Mesh的技术。

基普曼说,“当我们引入一种新的计算媒体需求时,可能需要对整个生态系统进行深入研究,微软就是这么做的。下面我们请大家在这个基础上,共同创造价值,并从微软经过多年研发的技术中获益。