谷歌表示其聊天机器人可以进行近距离对话

如果您曾经尝试过与聊天机器人进行对话，那么您会知道，即使是当今最先进的系统，也不是精通口才，经常会分发无意义或痛苦的通用响应。

不过，现在，谷歌创建了一个聊天机器人Meena，它说它比经过测试的其他机器人都要好-这是该公司支持使用其专门开发的一种新指标来衡量AI的对话能力的说法。

进行对话

创建Meena(在预打印服务器arXiv上发表的论文中详细介绍的过程)之后，Google需要一种评估聊天机器人的方法。为此，它开发了一种称为“敏感性和特异性平均数”(SSA)的物质。

为了计算该指标，Google要求人类工作者与Meena和其他几个开放域聊天机器人进行大约100次自由形式的对话。每次聊天机器人做出响应时，工作人员都必须回答关于响应的两个问题。

首先，它在对话中是否具有逻辑和上下文意义?如果是的话，他们必须回答这个问题，“它是特定于对话吗?”这是为了清除所有常规响应-例如，如果人类写下他们喜欢网球，而聊天机器人回答“很好”，则该响应将被标记为“不具体”。Google确定，普通人的SSA分数将达到86%。

团队研究中的其他聊天机器人得分在31%到56%之间。但是，Meena的得分为79%，这使AI可以比其他聊天机器人更接近人类的预期对话水平。