Square Enix正在测试基于人工智能的虚构语言生成

在发现我在2024年游戏开发者大会的日程中有一个意外的空档时，我看了一下显示当天活动的数字显示屏之一。机器学习峰会上的一场讲座引起了我的注意：“机器学习峰会：虚构语音合成以避免生成内容风险。”

“虚构语音合成？”这很有趣。任何一个值得一盎斯的奇幻小说迷都知道《指环王》中的精灵语和《星际迷航》中的克林贡语等虚构语言已经付出了多大的努力。这是一个充满激情的项目，非常适合用于构建世界。Square Enix是否希望利用技术以更有效地在其众多奇幻游戏中采用这种语言技术？

答案是：不清楚。人工智能研究员森友祐介并没有表示他的研究是否正在任何有效的游戏制作中使用。这次谈话更接近于探索研究和可能的方法论，而不是活跃开发。

尽管如此，捕捉他工作的一部分还是令人感到好奇。他所展示的内容似乎并不立即适用于希望进军“权力的游戏”的人，但它类似于《模拟人生》系列中的Simlish或《动物之森》系列人物的各种窃窃私语。

相关文章：SAG-AFTRA表示有争议的AI语音协议条款将影响未来谈判

以下是森友展示的简要概要。

Square Enix的AI工具支持动态和静态语言生成

森友展示了一对演示，说明了该技术如何在数字环境中使用。第一个演示展示了工具如何将赫尔曼·梅尔维尔的《白鲸》的开头翻译成，在第二个演示中，玩家可能在3D空间中遇到这些语言。

在第一个演示中，AI文本转语音工具朗读了“叫我伊斯梅尔。几年前——不用在意多久——当时我钱包里几乎没有钱，岸上也没有什么特别有趣的事情吸引我，于是我想到航行一下，看看世界的水域”，但您只能听到“伊斯梅尔”一词。森友邀请观众思考，如果《白鲸》在一个奇幻世界中会是什么样子，由一个说着非地球语言的人朗读。专有名词将被保留，而其他每个词都将自然适应游戏世界。

他展示了三个幻想文本的版本，每一个都更有目的地磨炼单词，以确保其看起来不像“随机”的。

在下一个演示中（使用非常简单的3D资产呈现），玩家接近一个NPC，NPC说：“欢迎来到新世界。我们现在正在计划在这里建立我们的城镇。”然后他们接近另外两个NPC，他们用同一种语言进行了一场来回对话（森友无法准确分享说了什么）。

森友之后的解释略微令人困惑。他暗示，如果单词以一致的模式出现，玩家将能够推断它们的含义，并最终翻译游戏中的所有语言。他建议，单词应该是如此随机化，以至于“没有正确的答案”，因此，每位玩家对文本的解释都是有效的。

通过这项技术，开发人员将能够用他们的母语撰写文本，自动转换为奇幻语言。

实际上，这并不完全正确。森友解释说，某些语言比其他语言更容易纳入这一系统。“将日语文本转换为这个系统相对容易，因为文本包含汉字、平假名和片假名，”他说。“用一个[西方]字母表写的语言有问题，”他说。

似乎用英文写的文本效果很好，但法语和德语文本与系统的兼容性不太好。对于不熟悉的人来说，很难区分出森描述的问题是什么。

森提出了一个简单的解决方案：只需将语言从一种实际语言复制到下一种语言，然后输入到工具中。

由于该工具是基于森早期关于机器学习文本生成中“标记” 的研究，因此很难解释工具是如何工作的。

这项技术的风险是什么？

森非常坚定地讨论了使用这项技术所带来的弊端。“通用文本可能包含有害内容，”他承认。他没有具体说明这是指NPC口中可能冒出的令人讨厌的信息，还是如果给定足够的时间和不受控制的变量，技术可能会错误地喷出脏话。

他似乎担心，虽然虚构语言可能是一致的，但它们不会捕捉到自然语言演变的语法体系。语言的历史和世界文化背景无法像真实语言那样生成。

还有一种可能性，随着玩家试图理解语言的含义，他们可能误解到他们对开发人员在游戏中打算的内容所做的错误假设。

“如何使用这一点非常重要，”他强调。

这种基于人工智能生成的虚构语言技术的可靠性如何？

当我与GDC周围的其他与会者描述这项技术时，我经常遇到对其应用的抱怨。我的一个同行评论说，这一过程消除了使精灵语和克林贡语等语言如此迷人的因素：这两种语言是由能够模拟森所说他的创作缺乏的一些特质的语言专家创建的。

还有另一个不舒服的因素，这表明配音演员正在为保护自己免受由人工生成的声音表演替换的影响而战斗。

森的演示不仅仅是将口头语言转换为虚构语言的文字，而是致力于组装工具，使得文本转语音程序能够即兴创作单词和发音规则。

但解释Square Enix如何使用这项技术需要一点自我认识。这基本上是一种人工翻译工具，从日语翻译成英语可能会影响GDC与会者对森谈话的看法。英语不是他的母语，关于技术用途的细微差别可能在……翻译中遗失了。

机器学习开发人员、音频工程师，甚至像我这样的作家，通过研究Square Enix在这项技术上的进展，都有所收获。如果程序生成无法克服森所描述的风险，也许传统的人类方式生成虚构语言将会为更好的体验铺平道路。

Game Developer和游戏开发者大会是Informa Tech旗下的姐妹组织。