使用Unity在苹果Vision Pro上创建XR沉浸式应用

Unity与世界各地的许多技术合作伙伴密切合作，他们选择Unity以创建身临其境的体验扩展现实应用程序和项目。本文中我们将为大家整理对Trigger XR技术总监詹姆斯·罗斯福的采访内容，以帮助大家进一步了解如何使用Unity制作面向Vison Pro的XR应用程序。

Trigger XR是一家经验丰富的XR开发商和代理商。15年来，他们一直受到一些大公司和IP的信任，以帮助其制定战略，建立和运行尖端技术，并提供跨移动设备和头戴式显示器的沉浸式解决方案(HMD)。Trigger XR在服务于品牌想要讲述和人们想要听到的故事方面推动了新兴技术的极限。

项目监督与开发负责人詹姆斯向我们介绍了他们基于Unity所做的一些工作，以及他们内部技术栈的开发流程。

您能告诉我们更多关于Trigger XR的信息吗？这些年来您参与了哪些项目？

Trigger XR拥有超过8年的HMD应用程序开发经验，在这8年终我们完成了超过350个XR项目，客户包括迪士尼、乐高、可口可乐、NBA、耐克、梅赛德斯AMG Petronas F1、星巴克、Verizon和Molson Coors，以及娱乐产业和知名IP，包括蜘蛛侠，星球大战，复仇者联盟，《阿凡达》，《侏罗纪世界》等。

我们也和一些公司一起做早期开发工作，比如Unity、苹果、Niantic、高通、Roblox、Snap、Meta、Adobe和谷歌。我们在XR应用开发的每个阶段提供咨询、创意和内部开发支持，从R&D和原型开发到可扩展的移动和HMD开发，包括实时运营和维护。

Trigger XR获得了Clios、Shortys、Auggies和Webbys的众多奖项，并被Inc. Magazine评为发展最快的公司之一。作为少数族裔所有的企业和全国少数族裔供应商发展委员会(NMSDC)的成员，我们与代表包容性价值观的各种客户和合作伙伴合作。

关于您的客户Diageo，他们最近在Apple Vision Pro上发布了他们的Made with Unity应用程序。是什么促使Trigger和Diageo打造这种新体验？

Diageo希望以Apple Vision Pro为基础，以身临其境、引人入胜的方式展示唐·胡里奥龙舌兰酒的丰富遗产、工艺和文化。这一举措与Diageo突破性的创新战略相一致，为龙舌兰酒爱好者提供了一种独特的互动体验，让他们在家中就能感受到唐·胡里奥龙舌兰的制作过程。如果你是一个龙舌兰酒爱好者并且超过21岁，使用Apple Vision Pro，你可以在这个具有创新性的虚拟环境中享受有趣的活动，如切割龙舌兰。

积累经验的过程进行得如何？你遇到了哪些障碍，Trigger XR是如何克服的？

冒险进入一个新的平台无疑会带来挑战和障碍，但也会带来成长和学习的机会。毫无疑问，我们与Diageo合作，为他们的产品龙舌兰酒打造身临其境的品牌体验。我们开始在一个令人兴奋的新平台上讲述他们的一个旗舰品牌的历史和生产过程。在这个项目的开发过程中，我们遇到并克服了很多困难，无论是从技术角度，还是从流程和运营角度。从技术开始，我们发现我们需要更好地了解Apple Vision Pro在本机级别上实际发生的事情。在过去的项目中，我们已经从本机端将我们的自定义插件和桥构建到Unity中，但对于唐·胡里奥龙舌兰，我们发现我们需要进行比以前更深层次的探索。我们探索了Reality Kit、Reality Composer、更多Xcode以及其他几个原生工具，以掌握我们的内容最终在设备上显示的方式。这种理解确实有助于我们了解如何从Unity的角度构建我们的内容。

在项目开发、更新和推广到Unity多空间包裹运送速度也非常快。我们经常会在某一天检查对某些东西的功能支持，然后发现一周后，像空间视频这样的东西突然得到了支持。这促使我们的团队运作方式也发生了一些变化。

这意味着，在内部，当我们的开发人员或任何人发现关键更新时，对知识共享有了更大的需求。这意味着我们还必须更好地预先设定期望。由于许多功能不受支持或仅得到部分支持，我们必须与我们的创意团队和3D团队明确我们可以实现的目标，即使我们过去已经做了很多像后期处理或创建复杂粒子系统这样的事情。

也是在这个时候，我们尽最大努力将我们对硬件本身的理解分享给一个团队，因为在团队中无法每个人都有自己的Vision Pro来测试体验。我们能够通过更高频率的共享视频记录、更多的团队会议，甚至是Meta Quest 3的端口来支持我们团队的一些人测试和审查内容，以此来解决这个问题。

总的来说，这可以归结为更快的分享信息和视觉参考方法。这意味着作为一个团队预先设定期望，对快速变化的平台保持警惕，并利用我们的集体经验找到创造性的解决方案以克服我们面临的障碍。

为什么要与Diageo联合开展这个项目？

使用Unity对我们来说更加轻车熟路。自从Trigger制作AR体验以来，我们就一直在使用Unity，我们知道最终这个项目有可能会登上Apple Vision Pro。出于这个原因，我们坚持使用Unity进行开发，而不是走本地开发的道路。

Unity使我们能够以真实准确的方式讲述龙舌兰酒唐·胡里奥的故事。我们将用户传送到墨西哥哈利斯科的田地里，让他们沉浸在几种龙舌兰酒的生产过程中。它让我们找到了生产过程中可以互动的部分，我们可以让用户从龙舌兰植物上剪下叶子，或者陈化一桶龙舌兰酒来观察结果。Unity允许我们使用我们在过去的HMD和ar工作中已经熟悉的系统和软件包来完成所有这些工作。

我们最终还投入了大量时间来实现几个照明和材料场景，因为我们最终无法确定该设备基于图像的照明。我们看到一些例子，根据用户真实世界的照明，我们的模型太亮或太暗。很明显，我们从来不希望以一种让我们的内容看起来糟糕或者不切实际的方式来展示我们的内容。作为潜在的解决方案，我们研究了从将照明完全融入纹理到使用实时照明和利用来自操作系统的基于图像的照明的一切。最终，我们的happy medium从Unity内部控制了所有的照明——我们称之为“无光照明方法”——我们在为3D内容提供烘焙阴影解决方案的同时做到了这一点。

让这一切成为可能的，除了我们团队的辛勤工作和热情，是我们尽可能地参与其中。无论是Unity论坛，还是Polyspatial文档页面，我们每天都会监控所有这些内容，因为有如此多的重要信息在其中共享。值得注意的是，Unity一直非常支持他们的论坛和讨论页面，但我们在讨论页面中看到的Unity PolySpatial团队的互动和支持更上一层楼。他们会令人难以置信地参与到任何提交的帖子中，并多次帮助我们。

回想起来，Trigger XR在这个项目中的一些关键收获是什么？

回顾这个项目的发展，这确实是一个很好的机会来加深我们对这个新平台和新硬件的理解。它让我们别无选择，不管是好是坏，只能进入杂乱中，探索技术的边缘。我们从内部带回并在团队中传阅的信息现在使我们能够构建更多并改进现有的Apple Vision Pro体验。

您认为使用Unity有什么好处？

考虑到我们所面临的挑战，这些重要的经验、我们方法的改变以及整体协作确实让我们能够将我们的合作伙伴Diageo及其产品Tequila Don Julio带入空间计算世界，带来独特而迷人的展示体验。通过使用Unity和Apple Vision Pro，我们能够率先推出这款激动人心的应用，最初的反馈非常积极，我们很高兴有更多的人能接触到它，了解更多关于龙舌兰酒的知识。