近日，Niantic的子公司、WebAR开发平台提供商8th Wall宣布在其Inworld和OpenAI平台上引入生成式人工智能（GenAI）模块和示例项目。
通过将GenAI与WebAR结合，8th Wall将为开发者、品牌和代理公司提供一种新的方式来利用创意资源，让受众更好地控制沉浸式体验。
8th Wall指出，其平台已允许开发人员与GenAI工具集成，以加速开发和构建WebAR体验。这些技术包括用于添加文本到图像输入的 DALL-E 和 Stable Diffusion、用于向天空添加 360 度图像的 Blockade Labs、用于添加类人互动角色的 Inworld AI、用于添加面部纹理的 Hugging Face 和 ControlNet，以及用于添加逼真动作的 Move.ai 和 Wonder Dynamics。
由于新集成的GenAI Modules以及Inworld和OpenAI的示例项目，新发布的GenAI Modules和示例项目将使各种技能水平的开发人员更容易使用GenAI构建WebAR体验。据 8th Wall 称，这些新模块有助于消除通常阻碍将 GenAI 技术添加到 WebAR 体验中的开发开销，为开发人员提供了一种将该技术引入 WebAR 体验的无忧方式。开发人员只需将模块添加到他们的项目中，即可在体验中启用由 GenAI 支持的功能。
近几个月来，TikTok 等社交应用上的人工智能滤镜不断走红，其中一个重要原因可能是人工智能最终生成的内容有时难以预测。通过将 WebAR 与 GenAI 相结合，开发人员不再需要创建单一用途的内容。通过这两项技术结合起来，开发人员能创造出动态、不断发展的体验，对终端用户的互动做出响应，这有助于让用户更加投入，并希望重新访问滤镜和体验，以创造新的成果。
图源：8th Wall
此外，借助 8th Wall 平台，开发人员能够一次构建、随处部署，从而在智能手机、电脑、平板电脑以及VR和MR设备上实现一致的体验。
Inworld 的角色引擎
Inworld 是一项功能强大的 GenAI 技术，可让开发人员在其 WebAR 体验中加入交互式、逼真的AI驱动角色。这些角色、化身和品牌大使可以学习、适应并以更个性化的方式与用户互动。
8th Wall表示，它与Inworld合作创建了Inworld AI集成模块和一个示例项目。该模块允许开发者将Inworld的虚拟化身与8th Wall的工具结合起来，提供新的互动体验。例如，开发人员可将 Inworld 与 Image Targets 或 World Effects 相结合，创造一种体验，让受众在产品包装上看到熟悉的人物化身，并与之展开自然对话。据 8th Wall 称，借助 Inworld 的“角色大脑”，虚拟化身可以模仿人类的整个表达范围，这意味着对话每次都会有所不同，而且是根据语境进行的。
开发人员现在可以在他们的8th Wall体验中加入这些角色，而无需复杂的服务器配置或认证工作。一旦添加到项目中，模块就会负责后台工作，这意味着开发人员只需输入API密钥即可开始工作。开发人员可使用示例项目构建他们的Inworld和8th Wall体验，该体验使用Image Targets与一个虚构的品牌吉祥物Rainbow Ray进行品牌接触。
图源：8th Wall
8th wall在一篇博客文章中表示：“随着未来MR技术的发展，像Inworld所提供的AI角色将成为构建虚拟世界的重要组成部分，为用户在数字空间中的互动提供无限可能。”
面向OpenAI的全新8th Wall集成模块
作为新版本的一部分，8th Wall还推出了新的开发者工具，利用OpenAI的DALL-E和ChatGPT的强大功能来生成图像和进行AI文本聊天。
OpenAI的DALL-E是一个功能强大的GenAI模型，可根据用户基于文本的提示生成细节丰富、极具创意的图像。当 DALL-E 与 WebAR 结合使用时，开发人员就可以利用这些文本到图像的提示来创建由用户控制创造力的体验。据 8th Wall 称，用户可以输入独特的提示，生成图像来增强天空、人脸、重新想象现实世界中的物体，甚至还能生成WebAR 体验中的新纹理。
图源：8th Wall
同样，ChatGPT通过实时理解和响应用户输入，使开发人员能够创建个性化的交互式WebAR体验。8th Wall表示，开发人员现在可以利用这种交互方式与WebAR角色进行基于文本的对话，与ChatGPT合作在场景中放置物体，甚至创建结合DALL-E和ChatGPT的体验，以进行实时更改。
与 Inworld AI Integration Module 一样，OpenAI 的新 Integration Module 可帮助开发人员节省时间，并设置项目代码以调用 DALL-E 和 ChatGPT。开发人员将该模块添加到8th Wall项目中后，只需添加一个OpenAI API密钥，即可开始构建。
此外，8th Wall 还创建了一个示例项目，开发者可用于测试将AI融入 WebAR 体验，并了解如何使用 DALL-E 通过文本生成 3D 纹理并实时应用于虚拟对象。此外，开发人员还可以定制 ChatGPT 提示框，为用户提供另一种控制体验元素的方式。
8th Wall 的 XR 开发人员 Ian Curtis 在谈到这些工具时说道：“将生成式AI整合到AR中最让我兴奋的是，它让每个用户都能成为他们数字世界的设计师。他们不再是被动地消费内容，而是主动地创造内容，用想象力塑造自己的体验。”
开发人员现在可以利用GenAI的潜力，通过8th Wall新发布的工具改变WebAR体验，并将GenAI与该平台的许多功能相结合，包括但不限于图像目标、面部特效、世界特效、天空特效、Lightship VPS和共享AR工具。
来源：auganix
