将2D图生成3D模型的AI是什么

一个3D模型看起来的真实程度取决于应用于网格的纹理或材质。决定将哪种苔藓、风化的石头纹理应用到中世纪城堡模型上，完全可以改变场景的外观和感觉。纹理包含了光线如何与材料反应的元数据（例如，粗糙度、光泽度等）。允许艺术家根据文本或图像提示轻松生成纹理，将极大地提高创意过程中的迭代速度。有几个团队正在追求这一机会，包括[BariumAI](https://barium.ai/)、[Ponzu](https://www.ponzu.gg/)和[ArmorLab](https://armorlab.org/)。动画创建出色的动画是游戏创作过程中最耗时、最昂贵、且最需要技巧的部分之一。减少成本并创建更真实的动画的一种方式是使用运动捕捉技术，即让演员或舞者穿上运动捕捉服，在特殊设置的运动捕捉舞台上记录他们的动作。我们现在看到生成性AI模型可以直接从视频中捕捉动画。这样做效率更高，原因有两个：一是它消除了需要昂贵的运动捕捉设备的需求，二是它意味着你可以从现有视频中捕捉动画。这些模型的另一个令人兴奋的方面是，它们还可以用来给现有动画应用滤镜，比如让它们看起来像是醉了，或变老，或变得快乐。涉足这一领域的公司包括[Kinetix](https://www.kinetix.tech/)、[DeepMotion](https://www.deepmotion.com/)、[RADiCAL](https://getrad.co/)、[Move Ai](https://www.move.ai/)和[Plask](https://plask.ai/)。关卡设计与世界构建

现在，将《Red Dead Redemption 2》与[Microsoft Flight Simulator](https://www.flightsimulator.com/)进行比较，后者不仅仅是大，它是巨大的。Microsoft Flight Simulator允许玩家飞越整个地球，所有的1.97亿平方英里。微软是如何构建这样一个巨大的游戏的呢？通过让AI来做。微软与[blackshark.ai](https://blackshark.ai/)合作，并训练了一个AI从2D卫星图像[生成逼真的3D世界](https://blackshark.ai/solutions/)。这是一个不使用AI就不可能构建的游戏示例，此外，这些模型可以随着时间的推移不断改进这一事实中受益。例如，他们可以增强“高速公路三叶草立交桥”模型，重新运行整个建造过程，突然整个星球上的所有高速公路立交桥都得到了改善。1.游戏制作中涉及的每个资产都将有一个生成性AI模型到目前为止，像Stable Diffusion或MidJourney这样的2D图像生成器由于它们可以生成的图像的吸引力而获得了大量的受欢迎度。但已经有了生成性AI模型，几乎涉及到游戏中的所有资产，从3D模型、角色动画到对话和音乐。这篇博客文章的第二部分包括了一个市场地图，突出显示了一些专注于每种类型内容的公司。1.内容的价格将大幅下降，某些情况下将接近于零。与正在尝试将生成性AI集成到其生产流程中的游戏开发者交谈时，他们最兴奋的是生产时间和成本的大幅降低。有一位开发者告诉我们，他们生成单张概念艺术图像的时间，从开始到完成，从3周减少到了一个小时：减少了120倍。我们相信在整个生产流程中都有可能实现类似的节省。

生成性AI可以为[游戏](https://a16z.com/2022/11/17/the-generative-ai-revolution-in-games/)创建2D艺术、纹理、3D模型，并协助关卡设计。在营销中，它看似有望取代库存艺术、产品摄影和插图。我们已经看到它在网页设计、室内设计和景观设计中的应用。我们实际上才刚刚开始。如果一个用例需要创造性地生成内容，那么很难理解为什么生成AI不会颠覆它或至少成为这个流程的一部分。那么，这篇文章的要点是什么呢？尽管它在某种程度上集中于代码生成和图像生成，但我们怀疑这些结果更具普遍性。特别是，全面的创意努力——无论是视觉的、文字的还是音乐的——都可能在系统构建之前就被AI打破。除了我们以上使用的正确性论点外，将所有先前的艺术品组合和重新组合可能足以满足创意输出的实际范围。例如，音乐和电影行业历史上生产了无数流行专辑和电影的仿制品。完全可以想象，生成模型随着时间的推移可能有助于自动化这些功能。然而，Stable Diffusion和DALL-E 2产生的众多图像中引人注目的一点是，它们真的很好，并且真正有趣。可以轻松地设想一个AI模型产生具有吸引力和真实感的电影海报、广告和插图。