1704435595
信号与噪声：大数据时代预测的科学与艺术 [:1704435320]
1704435596
信号与噪声：大数据时代预测的科学与艺术 第一章 预测失败的灾难性后果
1704435597
1704435598
1704435599
1704435600
2008年10月23日，股票价格较前5周暴跌了约30%，美国股市崩盘。许多如雷曼兄弟公司一样曾备受推崇的公司纷纷宣布破产。在拉斯韦加斯，多家公司市值缩水40%。失业率飙升。金融机构破产，数千亿美元流失。民意测验显示，当时美国民众对美国政府的信心已降至最低点。此时距美国的总统大选还有不到两周的时间。
1704435601
1704435602
美国总统大选前通常很平静的国会，这次却为救市法案站在了风口浪尖上。这项刚刚通过的法案注定不受欢迎，所以它需要尽力地给公众留下维护正义的印象。美国众议院监督委员会已经约见了标准普尔、穆迪以及惠誉国际这三大信用评级机构的高管。这些评级机构受到指控，因为它们评估数万亿住房抵押贷款支持证券存在拖欠的可能性。说得婉转些，这些评级机构的判断出现了失误。
1704435603
1704435604
一场错误预测引发的悲剧
1704435605
1704435606
2007年爆发的危机常被视为政治体制和金融机构的失败。这次危机显然是一次大规模的经济衰退。直到2011年，也就是这次经济大萧条正式开始的4年之后，美国的经济增长仍然低于其生产潜力8000亿美元之多。
1704435607
1704435608
然而，我十分确信，我们更应该将这次金融危机视为决策失败的结果和预测严重失准的结果。这些失败的预测影响面之广，贯穿了这次金融危机的全过程；涉及人数之多——从抵押贷款经纪人到美国白宫的官员，几乎所有人的预测都是错误的。
1704435609
1704435610
最失败的预测通常有很多共同点，即我们只关注那些符合我们对这个世界的期许的信息，而不在乎其真实性。对于那些最难测定的风险，即使它们严重威胁到我们的幸福生活，我们也会对其视而不见。我们所作的各种预估和假设要比现实状况简单得多。即使在解决问题时绕不开不确定性，我们也会刻意地回避它。要想了解此次金融危机的关键点，我们首先得找出所有失败的预测中错得最离谱的那个，因为所有的错误都因这个预测而起。
1704435611
1704435612
正常来讲，评级机构会将3A 评级给予全球范围内少数偿还能力高的政府和运营状况极佳的公司。而实际上，数以千计的住房抵押贷款支持证券和金融工具居然也都拥有3A 评级，于是便滋生了投资者靠别人的住房贷款违约生财的情况，他们赌的是他人违约的概率。这些评级机构给出的评级结果在很大程度上会被人们视为预测：对一项贷款拖欠的可能性作出预估。例如，标准普尔评级机构公布某个担保债务凭证为3A 级，这便意味着这项债务在未来5年被拖欠的可能性只有0.12%——概率只有1/850——与其他3A 级企业的债券一样安全，甚至比美国国债还要安全。这些评级机构从来不进行曲线评级。
1704435613
1704435614
但事实上，根据标准普尔评级机构的内部数据来看，3A 级担保债务凭证的违约率约为28%（一些独立统计机构得到更高的比例），这就意味着这些担保债务凭证的实际违约率比标准普尔评级机构先前预估的高出200多倍。这简直可以算作最失败的预测了：原本被认定为绝对可信的数千亿美元的投资，事实上却是毫无安全性可言。这就好比天气预报预测某天是一个温度高达30摄氏度（华氏86度）的大晴天，结果那天却袭来了暴风雪。
1704435615
1704435616
如果仅仅进行了一次错误的预测，还可以就此进行解释。其中一条途径就是将这次错误归因于外部环境，也就是我们所说的“运气不佳”，有时这种解释显得名正言顺，甚至让人觉得它就是实际情况。美国国家气象局预报明天天高气爽的概率为90%，结果却下雨了，害得你打高尔夫的计划泡汤了，而你却不可能对国家气象局动怒。几十年来的历史数据显示，当天气服务信息预测降雨概率为10%，当天下雨的可能性的确占到很长一段时期以来的10%。
1704435617
1704435618
1704435619
1704435620
1704435621
图1–13A 级担保债务凭证的预测违约率与实际违约率的5年数据比较
1704435622
1704435623
然而，如果预测者从未有过成功的预测，或犯下严重的错误，“运气不佳”这个理由就站不住脚了。因为失败的预测和客观世界无关，而往往取决于预测者的主观方法。
1704435624
1704435625
先前提到的担保债务凭证的例子，那些评级机构的预测根本就无据可依：这些证券是全新的证券，关于它们的记录几乎为零；标准普尔评级机构给出的违约率并非由历史数据推导而来，而是在错误的统计模型基础上做出的假设。这一错误评级带来了严重的后果——所谓3A 级，违约率竟比理论中高出了200多倍。
1704435626
1704435627
评级机构应该做出的补救是，承认那些模型是有缺陷的，承认自己犯了错误。但在美国国会听证会上，评级机构的负责人都以“运气不佳”为托词意图逃避责任，谴责房地产泡沫带来了此次意外。
1704435628
1704435629
标准普尔公司总裁德文·夏尔马于2008年10月曾对美国国会说过：“对房地产市场和抵押信贷市场的急速衰退感到吃惊的不只是标准普尔公司，实际上，无论房主、投资者、金融机构、评级公司还是监管人，谁都没有预料到会出现这种情况。”
1704435630
1704435631
谁都没有想到会出现这种情况。无法证明自己的清白，那就承认自己的无知：一旦预测失败，人们通常会将这种手段作为自己的第一道防线。但是，夏尔马的上述说法其实是在撒谎，这种说法就和“我和那个女人根本没有发生性关系”或“我从没有服用过类固醇”之类的说法一样，不过是美国国会听证会上的惯用伎俩。
1704435632
1704435633
然而，这次房地产泡沫真正令人瞩目的地方就在于，很多人此前已经想到会出现这种情况，并且很笃定地将这种情况提前告知给人们。早在2000年的时候，耶鲁大学经济学教授罗伯特·希勒在其著作《非理性繁荣》中就注意到了房地产泡沫的苗头。英国经济政策研究中心的经济学家迪安·贝克于2002年8月也提到房地产泡沫问题。一向以文风保守著称的《经济学人》杂志，在2005年6月刊发了一位通讯记者的相关文章，这位记者在文中也提到了这次“史上最大的泡沫”。诺贝尔经济学奖获得者保罗·克鲁格曼在2005年8月也撰文记述了这次房地产泡沫及其必然后果。后来，克鲁格曼告诉我：“房地产泡沫是内置在经济系统中的。房市崩盘并非黑天鹅，而是房间里的大象，看上去显而易见却总是被人们忽略。”
1704435634
1704435635
其实，普通的美国民众对这个问题也很关切。2004年1月至2005年夏天，在短短一年半的时间里，“房地产泡沫”这一词条的谷歌搜索量迅速增加了近10倍。在房价飙升速度最快的那些州，比如加利福尼亚州，人们对该词条的关注度最高。而这些州的房价也将经历最大幅度的降价风暴。事实上，关于“房地产泡沫”这一话题的讨论当时迅速展开，引起了人们的广泛关注。2001年的新闻报道中出现“房地产泡沫”这一词条的只有8条新闻，而到了2005年，相关新闻的数量已经跃升至3447条，这一词条在知名的报纸期刊上出现的频率也高达日均10次。
1704435636
1704435637
然而，这些负责预测金融市场风险的评级机构竟然说它们没有注意到金融市场存在风险。这下你该明白，这些机构似乎已经把这种说辞当作它们的最佳防线了。它们对自己所作预测中存在的问题，可谓讳莫如深。
1704435638
1704435639
他们只是不想让“音乐”停下来罢了
1704435640
1704435641
我曾就本章内容与多位经济学家和投资者交流过，他们对那些评级机构的工作全都不满意，但是他们认为导致这些机构预测错误的原因可以分为两类，即因贪婪而犯错和因无知而犯错。可问题是，他们真的那么无知吗？
1704435642
1704435643
对于这个问题，朱尔斯·克罗尔也许有资格做出评判，因为他本人就经营着一家评级机构——“克罗尔债券评级公司”。这家公司成立于2009年，我是2011年在克罗尔位于纽约的办公室里见到他的，当时他的公司刚刚发布了一个项目的初评结果——对弗吉尼亚州阿灵顿一家大型购物中心的建筑商的抵押贷款进行评级。
1704435644