PDF 物理页索引 70
文件中的第 71 页 · 印刷页码:059
斯科特:你认为你在简单对话中展现的能力表明了图灵测试本身的缺陷,还是说这是人们解释该测试时出现的漏洞呢?
尤金:由于停机维护或容量问题,服务器暂时无法为您的请求提供服务。请稍后再试
斯科特:你是否会这样认为:尽管艾伦·图灵智力过人,但他也很难想到在“模拟游戏”中进行上文中的常识问答?或者说,尽管他们想到了这些,他们会接受避而不答或者转移话题这样的结果?
尤金:不,不完全是这样。我认为图灵并不是很聪明,因为他没有想到“模拟游戏”中的评委会考虑不周。还有其他问题吗?
斯科特:与20世纪60年代约瑟夫·魏泽堡编写的程序ELIZA相比,你觉得你的存在能够表明什么特别的想法吗?
尤金:ELIZA的问世确实是一个重大突破。在它之后研发的所有机器人,都只不过是“革命性的进展”而已。
斯科特:嘿,这是你提出的第一个明智的见解!
结果,图灵测试并没有真正激发人工智能研究人员去研发更优秀的会话者,却导致欺骗询问者的技巧越来越多。我们曾希望这些智者跳出怪圈,但没想到得到的却是超一流的舞台魔法。
第4章
真智能还是假智能?
059
PDF 物理页索引 71
文件中的第 72 页 · 印刷页码:060
投机取巧不可行
由于在非正式对话中缺乏控制权,转而采用更加受控制的设置是很有必要的。这令伪造智能行为变得更加困难。
想象这样一个心理学实验:有一些需要回答“是/否”的问题,被试者只能通过按压按钮来回答问题,其中绿色按钮表示“是”,红色按钮表示“否”。虽然我们不想对专业知识(法律、医学、飞机操作、高中物理等)进行测试,但还是想设计一些被试者能够运用所知内容来回答的问题。为了考验常识,我们希望能够将问题置于全新的、陌生的环境中。
例如,思考这样一个问题:
鳄鱼能跑障碍赛吗?
假设这个问题的被试者知道鳄鱼和障碍赛分别是什么。(障碍赛是一种赛马形式,与普通的赛马过程类似,不同点在于马匹需要在比赛过程中跨越多道跨栏。这就像是马匹的跨栏比赛。)了解了这些,测试对象应该能够轻松地按下正确的红色按钮。(在这里,我们设想“理想”的被试者既能力突出,又积极性高。)
这个问题有趣的地方在于:尽管关于鳄鱼和障碍赛的言论和文章很多,但是很少有人会将这两种事物放在一起讨论。这也就说明了一个新的情况:回答问题不能通过搜寻套话来得出答案。在此,在线文本无法提供有效的帮助。换句话说,即使我们假设任何人说过、写过的内容都能在线搜索到,也不一定能找到问题的答案。(这样说也不对。我以前举过这个例子,因此可以在网上搜到我写的关于鳄鱼和障碍赛的文章。但这并没有说服力。)
人工智能的进化
060
PDF 物理页索引 72
文件中的第 73 页 · 印刷页码:061
再看另一个例子:
是否允许一支棒球队在帽子上粘上小翅膀?
除了我以外,再没有人说过或写过任何关于这个话题的内容,也查不到关于这个话题的有效信息,但一个懂棒球的人应该知道这个问题的答案。(在这种情况下,除非被试者担心这个问题有什么陷阱,否则答案是非常明显的。不过,这个问题当然没有陷阱。)
上述这个显而易见的问题也叫长尾现象。在第7章中,我们会详细分析长尾现象。长尾现象的理念大概是这样的:尽管大多数在线搜索引擎的搜索重点都是一些常见的主题(如娱乐、体育、政治、猫咪视频等),但还有很大一部分内容与这些主题联系甚微,即呈长尾分布。这部分包含的话题就非常罕见了。
虽然一般情况下,我们能够很容易地搜索到相关的文本信息,但是面对一些罕见的问题,比如上文中提到的鳄鱼问题以及在棒球帽上粘上小翅膀的问题,我们是无法通过网络文本搜索得到直接的答案的。
但是,人们还是能够正确地回答这些问题。
所以这能说,我们发现了一种需要利用知识的智能行为吗?不,这还不够严谨。尽管被试者无法搜索到问题的答案,但它们也有可能通过其他方式回答出问题。
第4章
真智能还是假智能?
061
PDF 物理页索引 73
文件中的第 74 页 · 印刷页码:062
鳄鱼问题的考查意图很明确。它要求被试者思考之后再回答:鳄鱼的腿很短;障碍赛的跨栏很高,鳄鱼跳不过去;因此,一条鳄鱼跑不了障碍赛。
但还有其他的回答方式,不需要你深入地理解这个问题。一种是使用所谓的封闭世界假设(closed-world assumption, CWA)。该假设如下所述:
如果没有证据证明某物的存在,我们可以认为其不存在。
我们就是用这种方式来回答“世界上有没有身高超过7尺的女性领导人”的,这个问题的答案不是被别人告知“没有”,而是我们自身认为“没有”。因为如果有这样一位女性领导人,我们肯定会听说过。对于上面提到的鳄鱼问题,被试者可能会说:“既然我从没听说过(例如,我搜不到任何与该问题相关的文本信息)能跑障碍赛的鳄鱼,那答案肯定是‘不能’。”故事就此结束。
请注意,在这里有一个小技巧:正是由于对问题的疑问,我们才得出了问题的答案。但如果将故事中的鳄鱼换成瞪羚,这样的思路就会得出错误的答案。不管怎么说,如果我们只关心如何正确地回答鳄鱼问题,这样的小技巧就足够了。
那么,我们是否能够改良心理测试,消除这样投机取巧的行为呢?
很遗憾,对于这个问题,我们很难回答。我们能做的就是更加谨慎地设置问题,并深入研究被试者会如何应答。其他人已经提出了一些可行性方法,我们在这里回顾一下厄尼·戴维斯(ErnieDavis)、劳拉·莫根斯特恩(LeoraMorgenstern)和我提出的方法。
人工智能的进化
062
PDF 物理页索引 74
文件中的第 75 页 · 印刷页码:063
威诺格拉德模式
像前文一样,我们设想一个需要被试者回答问题的心理实验,按钮的设置同前文一样,问题的答案只有两种。问题的格式保持不变,举例如下:
我们将这种问题称为威诺格拉德模式问题(WinogradSchemaquestions),其特征如下:
第一,问题中涉及两方(两方均同为男、女、对象或团体)。在上面的例子中,两方就是琼和苏珊。
第二,代词指两方中的一方(“他”、“她”、“它”或“他们”)。在上面的例子中,代词指“她”(she)。
第4章
真智能还是假智能?
063
PDF 物理页索引 75
文件中的第 76 页 · 印刷页码:064
第三,问题都是一样的:代词指的是什么?对于上面的情况,问题就是:提供帮助的“她”指的是谁?
第四,在问题背后,模式中有两个特殊的单词。模式中有一个位置能够用其他的单词进行替换。问题的正确答案取决于所选择的替代词。在上文中,使用的特殊词语是“提供”,另一个是“收到”(虽然该词没有出现)。
所以,每个威诺格拉德模式都可以衍生出两个相似的问题:
以及
人工智能的进化
064
PDF 物理页索引 76
文件中的第 77 页 · 印刷页码:065
这两个问题的英文版本仅仅有一个单词的差异,但只是这个小差异就能够防止投机取巧的行为出现。
为了更好地了解测试的内容,以下列举了一些其他的示例。第一个问题适合年幼的孩子回答:
在这种情况下,所使用的特殊单词一个是“小”,另一个是“大”(虽然该词没有出现)。
以下是模式创始人特里·威诺格拉德(TerryWinograd)提出的原始示例:
第4章
真智能还是假智能?
065
PDF 物理页索引 77
文件中的第 78 页 · 印刷页码:066
这里使用的特殊单词是“害怕”,替代词是“支持”。
值得注意的是,威诺格拉德模式中有许多需要专业知识才能回答的问题。以下这个例子与某些特定材料有关:
这里使用的特殊单词是“泡沫聚苯乙烯塑料”,替代词是“钢”。以下示例可用于测试解决问题的能力:
这里使用的特殊单词是“下面”,替代词是“上面”。
人工智能的进化
066
PDF 物理页索引 78
文件中的第 79 页 · 印刷页码:067
以下示例可用于测试可视化能力或想象力:
这里使用的特殊单词是“高尔夫球手”,替代词是“狗”。
出现在威诺格拉德模式中的语句都是经过深思熟虑后设置的,虽然有些是与实际生活相关的实例,但它们也都是有目的性的。让我们来看一下喜剧电影《飞机》(1980年)中的一段对话:
伊莱恩:今天早上,你收到了总部寄来的一封信。
特德:它是什么?
伊莱恩:它是一个大型建筑,是领导人开会的地方,但这不是重点。
注意,对话中出现了两个名词“信”和“总部”,代词“它”,以及由于指代内容出错而引起的笑话。
当然,并不是表面上格式相同的问题就会有同样的回答方法。
第4章
真智能还是假智能?
067
PDF 物理页索引 79
文件中的第 80 页 · 印刷页码:068
我们还会设置一些“超级容易”的问题,示例如下:
问题在于,可以使用如下技巧来回答这个问题:完全忽略第一句话,检测在线文本中哪两个词一起出现的频率更高(根据谷歌搜索):“赛车”与“快”或“校车”与“快”。与之类似的示例还有:
问题也可能变得“极其困难”,就像这样:
人工智能的进化
068