但是,这种工程战略也有完全不起作用的时候。如果某些个体事件虽然极为罕见,但对于整体却意义非凡,我们就将这种事件的分布称为长尾分布,而这些罕见的个体事件就是纳西姆·塔勒布(NassimTaleb)所说的“黑天鹅”。(欧洲人曾一度认为所有的天鹅都是白色的。)虽然黑天鹅的作用可能非常重要,但如果我们先着眼于常见的现象,再将注意力转到稍微不太常见的现象,然后以此类推,我们就可能永远也见不到黑天鹅了。单从统计学的角度来看,我们似乎做得很好。但是事实上,我们可能做得非常糟糕。
长尾现象带来的难题
为了更好地理解该如何应对长尾现象,我们不妨假想一个极端的数字示例来帮助思考。
假设我们正在尝试估算一个巨大数字集合的平均值。为了便于思考,我先透露点儿小秘密:这个数字集合中包含1万亿个数字,它们的平均数是100000。但是集合中大部分数字都非常小。该集合数字的平均数如此之大的原因是,其中有1000个超级大的数字。当然,这些大数字都控制在100万亿之内。
人工智能的进化
106