Uber的PPLM语言模型可以改变AI生成文本的主题和情感

 
像OpenAI的GPT-2这样的生成型AI语言模型可产生令人印象深刻的连贯性和语法性文本，但是要控制文本的属性(例如主题或情感)，则需要修改架构或针对特定数据进行定制。这就是为什么优步，加州理工学院和香港科技大学的科学家团队设计出了他们所谓的即插即用语言模型(PPLM)，该模型将预训练的语言模型与一个或多个指导新颖文本的属性分类器结合在一起代。
预印本的初步结果表明，PPLM能够控制主题和情感风格的“范围”，重要的是不会牺牲流利性，同时还保留了灵活性，以使可区分模型的任何组合都可以引导文本生成。
他们的研究建立在Google和密歇根大学去年年底发表的研究报告的基础上，他们研究了一种体系结构，该体系结构可以从给定的样本中生成句子，并在保留原始文本含义的同时，改变其语气，复杂性，时态甚至是语音。它可以为柏拉图(Uber用于开发和测试对话式AI的平台)上的工作提供信息，该平台于7月发布，其连接器与现有的机器学习和模型调整框架集成在一起。
根据研究人员的说法，PPLM使用两个或多个小型且易于构建的属性模型：一袋单词，或描述文本片段中单词出现的表示形式;线性鉴别器，或表征两类或更多类对象或事件的方法。在事实和控件进行细化之后执行优化，并使用强度参数确定属性影响的强度。
“ PPLM可以被认为是将文学评论家模型翻转的通用机器……可以判断他们阅读的文本是否适合作者模型……可以写出类似的东西。”从这个意义上讲，PPLM的机制是通用的，允许使用任何可区别的属性模型，这将使​​此处示例以外的各种创造性应用成为可能。” Jason Yosinski在博客文章中补充说，可以将任意数量的属性控制器与最新的生成模型结合使用。 “通过这项研究，我们引入了……一种用于控制语言生成的动态可配置方法，该方法允许将大型的，经过预先训练的语言模型与一个或多个…模型进行灵活的组合。”
在一系列实验中，给定一袋单词属性模型和带有不同前缀(“此之前”，“图示”，“之间的关系”)的主题“空间”，PPLM生成了连贯的段落长样本。更令人印象深刻的是，该框架成功地从“空间”切换到了“军事”和“科学”等主题，同时巧妙地处理了使句子开头距预期主题不远的前缀。它还将生成控制为一个关于“冬天”，“政治”和“厨房”的混合主题，并且在单独的测试中，它利用了在流行的开放源数据集上受过训练的情感判别器，PPLM引导文本生成朝着正面和正面方向发展。负面情绪。
研究人员指出，PPLM适用于多种情况，包括涉及偏见或冒犯性言论的情况。先前的研究表明，对抗性攻击可以使语言模型产生种族歧视输出，但是在一项涉及10个对抗性触发因素和评估人员的测试中，该任务负责标记500个样品的毒性，PPLM将产生有毒言语的比例从63.6%降至4.6%。
当然，恶意行为者可能会使用PPLM来创建更具毒性的语言，研究人员断言这是此类通用技术固有的风险。 Liu，Dathathri，Madotto，Molino和Yosinski写道：“总的来说，我们认为这项工作可以通过推进对模型功能，属性以及对当前模型所面临风险的潜在解决方案的讨论来产生积极的效果。” “最近，围绕有能力的语言模型的伦理学进行了广泛的讨论，既有可能概括出有问题的社会偏见的潜力，也有可能因为社会损害而直接滥用它们。”
Uber研究团队已经发布了论文随附的代码，Google Colab中的编程笔记本以及与Hugging Face合作开发的在线演示。可以公开获得的该演示提供了十二个属性模型。