有人可能会说,训练有素的安大略省司机应该都经历过雪盲,他们所缺乏的只是更多的训练而已。但问题就在于:训练到什么程度才算够呢?我们是否要担心开车过程中油门卡住的情况?晚上驾车时大灯不亮的情况?交通信号灯持续红灯,出现故障的情况?一头鹿被撞倒,死在车前的情况?乘客试图爬出窗外的情况?一群暴徒围住汽车的情况?汽车被飓风刮动的情况?很明显,上述情况都不可能,我们不会也不可能将所有的状况列成清单,都放到驾驶训练中去。
这里体现的问题在于:尽管上述每一种情况都非常罕见,但是驾驶汽车时总会有很多奇奇怪怪的事情发生,所以我们总会遇到其中的某种情况。
更为典型的例子可能就是关于文本中出现的词语。英国国家语料库(BritishNational Corpus)是一个从各种来源获取英语文本信息的大型数据库。语料库中共有大约一亿个单词,其中大部分词语是人们经常使用的,但也有一些词语在整个语料库中只出现过一次。令人惊讶的是,这部分词语所占的比例是0.5%。语料库中出现次数最多即10次(这可是一亿分之十的概率)的词语,占总体的1.7%。这是一个典型的长尾分布的案例。在这种情况下,这些非常罕见的词语之所以极其重要,是因为它们的数量过于庞大。因此,我们在阅读文本时才能够有机会看到它们。通常情况下,我们并不指望一个智能代理能从那些极为罕见、一般不会出现的经验中学到什么。如果可以忽略这些罕见事件,系统仍然可以正常运行;如果无法忽略,且它们又是类似于长尾现象的情况,那么只依赖于过往经验的系统就会崩溃。
人工智能的进化
112