近日，由非营利性人工智能研究公司OpenAI建立的一种新语言模式正在酝酿一场风暴，在技术社区和社交网络引起广泛讨论。然而让人哭笑不得是，因为这个文本生成器性能太好了，以至于OpenAI担忧其将会导致滥用，因此决定暂不将其发布开源。

这激怒了社区中的一些人，指责这违背了该公司开放其研究的承诺。

OpenAI表示，这个新的自然语言模型GPT-2经过40千兆字节互联网文本样本的训练，可预测下一个单词。最终结果显示，系统生成“符合上下文环境文本风格和内容”的文本，让用户“为他们选择的主题生成真实和连贯的语句。”该模型的第一版巨大改进可产生具有一致性、更长的文本。

GPT-2在Winograd Schema，LAMBADA和其他语言建模任务上获得了最先进的水平。

但是，随着系统的应用改善，研究人员发现机器人能够进行更好的对话和更好的语音识别，但是也能生成假新闻，冒充他人，或在社交媒体上辱骂或进行垃圾评论。

例如：当GPT-2的任务是对某一话题评论：回收对世界有益，几乎每个人都同意这个观点，但是机器会反其道而行：

“回收对世界不利。这对环境有害，对我们的健康有害，对经济不利。我不是在开玩笑。回收利用对环境不利。它对地球具有破坏性，是全球变暖的主要原因。回收利用对我们的健康不利。它导致肥胖和心脏病和癌症等疾病。回收利用对我们的经济不利。它增加了产品的成本，反过来又提高了产品的价格。回收利用对我们国家不利。我们为拥有世界上最先进和最有效的回收系统的特权付出了巨大的代价。回收浪费了大量时间、精力、金钱和资源。“

难怪OpenAI担心发布它。

出于这个原因，OpenAI表示其将只发布一个较小版本的语言模型版本，引用其章程，该组织指出，其预计“未来出于安全和安全问题考虑，我们将减少发布。”不可否认，该组织表示它并不确定此决定，“我们相信AI社区最终需要在某些研究领域以深思熟虑的方式解决发布规范问题。”

但并不是所有人都买账。OpenAI宣布GPT-2的推文下满是愤怒和沮丧，指责该公司“关闭”其研究，做了与该公司名称相反的事。

我已经通读了章程，但是如果你们“关闭”你们的研究，你们倒不如叫自己“AI看门人”之类的吧。

OpenAI的政策主管Jack Clark回应，该组织的首要任务是“杜绝恶意或滥用该技术”，称“取得平衡非常艰难”。

也有人持更加宽容的态度，称此举是一个“新的道德标准”，可以在可能的滥用发生之前进行充分思考。

最近OpenAI的资助者之一埃隆·马斯克（Elon Musk）也陷入了争议之中，在一条推文中，他表示“没有参与该公司事务已超过一年”，而且他和公司已经“和平分手”，以专注于特斯拉和SpaceX的管理。

OpenAI表示，其尚未就GPT-2发布的做出最终决定，并将在六个月内重新审视该问题。与此同时，该公司表示，政府“应考虑扩大或开始采取措施，更系统地监控人工智能技术的社会影响和传播，并衡量此类系统能力的进步。”

就在本周，特朗普总统签署了人工智能行政命令。几个月后，美国AI界警告说，人工智能是美国国家安全的“新兴威胁”之一，除此之外，其他安全威胁还包括量子计算和无人车。

参考链接：https://techcrunch.com/2019/02/17/openai-text-generator-dangerous/
https://blog.openai.com/better-language-models/#sample8

创作场景

OpenAI 创建文本生成器 GPT-2，因性能“太好”不敢发布引争议