TL;DR：8th Wall 发布了新的 GenAI 模块，允许开发人员将 Inworld 和 OpenAI 集成到他们的 WebAR 体验中。新模块简化了 GenAI 与 WebAR 项目的集成，使开发人员能够创建更加动态、交互式和引人入胜的体验。根据 8th Wall 的说法，用户现在将能够主动塑造体验，而不仅仅是被动地消费内容。
2023 年 8 月 30 日 – Niantic的子公司、基于网络的增强现实 (WebAR) 开发平台提供商8th Wall宣布在其 Inworld 和 OpenAI 平台中引入生成式 AI (GenAI) 模块和示例项目。
GenAI 的引入与 8th Wall 的 WebAR 的沉浸式现实相结合，现在将为开发者、品牌和机构提供一种新的方式来利用看似无限的创意资源，并让观众更好地控制沉浸式体验。
8th Wall 指出，其平台已经允许开发人员与 GenAI 工具集成，以加速开发并构建 WebAR 体验。该技术包括用于添加文本到图像输入的 DALL·E 和 Stable Diffusion、用于向天空添加 360 度图像的 Blockade Labs、用于融入类人交互角色的 Inworld AI、用于向面部添加纹理的 Hugging Face 和 ControlNet ，或 Move.ai 和 Wonder Dynamics 添加逼真的运动。
随着这一最新公告的发布，借助新集成的 GenAI 模块以及 Inworld 和 OpenAI 的示例项目，所有技能水平的开发人员都可以更轻松地使用 GenAI 构建 WebAR 体验。据 8th Wall 称，这些新模块有助于消除通常阻碍将 GenAI 技术添加到 WebAR 体验中的开发开销，为开发人员提供一种轻松的方式将该技术引入 WebAR 体验。开发人员只需将该模块添加到他们的项目中，即可在体验中启用 GenAI 支持的功能。
近几个月来，TikTok 等社交应用上由人工智能驱动的过滤器一直在病毒式传播，其中一个重要原因可能是人工智能最终生成的内容有时具有不可预测性。通过将 WebAR 与 GenAI 相结合，开发人员不再创建一次性内容。相反，这两种技术结合起来创造出动态的、不断发展的体验，以响应最终用户的交互，这有助于让用户更加积极地参与并希望重新访问过滤器和体验以创造新的结果。
此外，借助 8th Wall 平台，开发人员能够一次构建并随处部署，从而在智能手机、计算机、平板电脑以及虚拟和混合现实设备上实现一致的体验。
Inworld 的角色引擎
Inworld 是一项强大的 GenAI 技术，使开发人员能够将交互式且逼真的 AI 驱动角色融入到 WebAR 体验中。这些角色、化身和品牌大使可以以更个性化的方式学习、适应和与用户互动。
8th Wall 表示与 Inworld 合作创建了Inworld AI 集成模块以及示例项目。该模块允许开发人员将 Inworld 的头像与 8th Wall 的工具结合起来，以提供新的交互体验。例如，开发人员可以将 Inworld 与图像目标或世界效果结合起来，创造一种体验，让观众在产品包装上看到熟悉的角色头像，并与他们发起自然的对话。根据 8th Wall 的说法，借助 Inworld 的“角色大脑”，化身可以模仿人类的整个表达范围，这意味着对话每次都会有所不同并且是上下文相关的。
开发人员现在可以将这些角色融入到他们的 8th Wall 体验中，而无需复杂的服务器配置或令牌身份验证工作。添加到项目后，该模块将负责后端工作，这意味着开发人员只需输入 API 密钥即可开始。使用示例项目，开发人员可以构建他们的第一个 Inworld 和 8th Wall 体验，该体验使用 Image Targets 来发起与虚构品牌吉祥物 Rainbow Ray 的品牌邂逅。
8th wall 在博客文章中表示：“随着混合现实的未来逐渐成形，由 Inworld 提供支持的人工智能角色将成为构建虚拟世界的重要组成部分，为用户提供跨数字空间互动的无限可能性”。
适用于 OpenAI 的全新 8th Wall 集成模块
作为最新版本的一部分，8th Wall 还推出了新的开发人员工具，利用 OpenAI 的 DALL·E 和 ChatGPT 的强大功能来生成图像和人工智能驱动的文本聊天。
OpenAI 的 DALL·E 本身就是一个强大的 GenAI 模型，它可以根据用户基于文本的提示创建高度详细且富有创意的图像。当 DALL·E 与 WebAR 结合时，开发人员可以使用这些文本到图像的提示来创建让用户掌控创造力的体验。然后，用户可以输入独特的提示，生成图像来增强天空、符合面部、重新想象现实世界的物体，甚至根据 8th Wall 的说法，作为 WebAR 体验中的新纹理。
同样，ChatGPT 使开发人员能够通过实时理解和响应用户输入来创建个性化和交互式 WebAR 体验。8th Wall 表示，开发人员现在可以使用这种类型的交互来与 WebAR 角色开发基于文本的对话，与 ChatGPT 协作将对象放置在场景中，甚至创建结合 DALL·E 和 ChatGPT 进行实时更改的体验。
与 Inworld AI 集成模块一样， OpenAI 的新集成模块有助于节省开发人员的时间，并设置项目代码来调用 DALL·E 和 ChatGPT。一旦开发人员将模块添加到 8th Wall 项目中，他们只需添加 OpenAI API 密钥，然后就可以开始构建。
8th Wall 再次创建了一个示例项目，开发人员可以使用它来测试将 AI 融入 WebAR 体验，并探索如何使用 DALL·E 通过文本生成 3D 纹理并将其实时应用到虚拟对象。此外，开发人员可以自定义 ChatGPT 提示框，为用户提供另一种控制体验元素的方式。
8th Wall 的 XR 开发人员 Ian Curtis 在评论这些工具时表示：“将生成式 AI 集成到增强现实中最让我兴奋的是，它使每个用户都能成为数字世界的建筑师。他们不再被动地消费内容，而是积极地创造内容，利用想象力塑造他们的体验。”
开发人员现在可以利用 GenAI 的潜力，通过 8th Wall 新发布的工具来改变 WebAR 体验，并且可以将 GenAI 与该平台的许多功能合并，包括但不限于图像目标、面部效果、世界效果、天空效果、Lightship VPS、和共享 AR 工具。
文章来源： auganix
我看AR登载此文出于传递更多信息的目的，并不代表本站观点，如有侵权请联系删除