生成式AI结合3D、XR怎么玩？NVIDIA、Niantic等公司已入局

最近生成式AI风头有点大，这种技术只需要用文字就能作画，而且效果惊艳，堪比专业画师的作品。其中一些热门的方案包括DALL-E 2、Midjourney、BariumAI、D-ID AI、Stable Diffusion等等，这些工具简单、好玩，已经被无数网友所应用，创造出大量有意思、搞怪的艺术作品。

实际上，这种生成式AI不仅可以用来创作平面图像，也可以快速生成具有纹理的3D模型。目前，NVIDIA、谷歌已经在相关领域进行探索，比如利用文本、2D图像来生成3D模型。而Meta则采取不同的路径，训练AI将文本转化成视频，未来有望在VR中用语音生成3D场景或3D模型。这意味着，未来AR/VR场景也可以由AI生成，而这将大幅提升AR/VR生态的规模。

此前青亭网也曾报道过多款根据文字、语音生成3D场景和动画的方案，比如Anything World、Promethean AI等等。今年2月，Meta也曾预告一种根据语音描述来实时合成3D VR世界的方案：Builder Bot，你只需要对它说“沙滩”、“树”、“野餐布”等语音指令，就能将不同的场景元素召集到你周围。

Meta CEO马克·扎克伯格表示：Builder Bot将有望改变人们在VR中编程的方式，让计算变得更自然，未来有望用于Horizon屁股那太上，帮助用户快速创建场景和内容。

目前，Meta的Builder Bot还在测试阶段，与此同时，NVIDIA、谷歌等公司也陆续公布了一些用文本生成3D模型、3D场景的方案。