有没有生成音效的AI

声音和音乐是游戏体验的重要组成部分。我们开始看到公司使用生成性AI来生成音频，以补充图形方面已经进行的工作。音效音效是AI的一个具有吸引力的开放领域。已经有[学术论文](https://arxiv.org/abs/2107.09262)探讨了使用AI在电影中生成“现场效果音”（例如，脚步声）的想法，但在游戏中的商业产品尚属稀少。我们认为这只是时间问题，因为游戏的交互性质使这成为生成性AI的明显应用，既可以在生产过程中创建静态音效（例如，“以星球大战的风格制作激光枪声音”），也可以在运行时创建实时交互式音效。考虑一个简单的任务：为玩家角色生成脚步声音。大多数游戏通过包含少量预先录制的脚步声音来解决这个问题：草地上行走的声音、碎石上行走的声音、草地上奔跑的声音、碎石上奔跑的声音等。这些声音生成和管理起来都很繁琐，并且在运行时听起来重复和不真实。更好的方法是使用实时的生成性AI模型来制作现场效果音（foley sound effects），它可以在飞行中生成适当的音效，每次都略有不同，而且能够根据游戏参数（如地面表面、角色体重、步态、鞋履等）进行响应。音乐音乐一直是游戏开发中的一个挑战。音乐很重要，因为它可以帮助设置情感基调，就像在电影或电视中一样。但由于游戏可以持续数百甚至数千小时，音乐很快就可能变得重复或令人烦躁。此外，由于游戏的交互性质，让音乐精确匹配屏幕上发生的事情可能很困难。

人工智能模型的另一个令人兴奋的点在于，可以用于过滤现有动画，加上新的特效，例如让动画人物一键看起来喝醉了，或者老了，或者高兴。这一领域的公司包括Kinetix、DeepMotion、RADiCAL、Move Ai和Plask。KinetixDeepMotionRADiCAL关卡设计和游戏世界构建（Level design & world building）游戏创作中最耗时的方面之一是构建游戏世界，生成式人工智能可以用于这项任务。像《Minecraft》、《No Man's Sky》和《Diablo》这样的游戏，因程序化技术生成关卡而闻名，其中关卡是随机生成的，每次都不一样，但都遵循关卡设计者制定的规则。新的The new Unreal 5游戏引擎的一大卖点在于，它收集了用于开放世界设计的程序化工具，例如叶子的放置。例如Promethean、MLXAR或Meta的Builder Bot这些公司，都是看到了生成式AI技术的机会。这方面的学术研究已经有一段时间了，包括Minecraft的生成技术或Doom的关卡设计。为什么生成式人工智能工具具备用于游戏关卡设计的潜力？因为AI具备创造不同风格的关卡和游戏世界的能力。可以想象一下，通过工具迅速生成一个1920年纸醉金迷时代纽约的游戏世界，或者是神秘的反乌托邦银翼杀手的设计，或者是托尔金派（类似于魔戒的设计和景观）的幻想世界（vs dystopian blade-runner-esque future,vs.Tolkien-esque fantasy world.）。下面的概念是由Midjourney使用提示生成的游戏中不同风格关卡：音频声音和配乐是游戏体验的重要部分。已经有公司开始使用生成式人工智能生成音频，以补充图形方面的工作。音效

配音一开始打算用AI，但测试多种不同的工具后，觉得AI语音在影视作品台词的表达上情绪依旧不够丰满，因此最后邀请了专业声音表演者来配音。音效方面，由于这次的音效需求比较简单，所以直接采用了剪映中的音效资源库。随着AI技术的不断发展，相信之后会有AI生成音效的工具来供我们选择。[316_1718987871.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/Is05b3R9coD8texdl9Nc3zennVe?allow_redirect=1)资源彩蛋附上三个音效资源站作为分享（无广）：https://www.lookae.com/sucai/sfx/有大部分免费且分好类的音效包可供下载https://www.epidemicsound.com/专业的音效站点，Gen48合作站https://sc.chinaz.com/yinxiao/适合搜索单个音效下载的站点点击阅读原文：欢迎前往XHS浏览社群成员优秀作品one more thing：我不是天才，我只是有幸和众多天才一起工作from牛马：飞扬