设为首页收藏本站

JMP数据分析论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
热搜: 活动 交友 discuz
查看: 1484|回复: 0
打印 上一主题 下一主题

马航M370航班失联搜救中的统计数据分析(转)(二)

[复制链接]
跳转到指定楼层
楼主
发表于 2014-6-20 12:14:45 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

三、群体智慧在寻找失事飞机、海底沉船、或珍珠宝藏过程中,当可用数据极其缺乏时,群体智慧 The Wisdom of Crowds 也可以派上用场。
1968年5月,美国潜艇蝎子号(Scorpion)在完成北大西洋参观后,在返回纽波特纽斯(Newport News)途中消失了。虽然海军知道蝎子号最后一次报告的位置,但是海军对蝎子号发生的事故一无所知,只能模糊得知在最后无线电联系后蝎子号前进的距离。为了寻找蝎子号,海军划定了一个半径32千米,数千英尺深的圆形海域。这几乎是一个不可能完成的任务。当时,人们想到的最可行方案是聘用三四个潜艇和海洋环流顶级专家来推断蝎子号的位置。但是,在雪莉桑塔格(Sherry Sontag)和克里斯托弗德鲁(Christopher Drew)的书《Blind Man’s Bluff: The Untold Story of American Submarine Espionage》中记载,一个叫约翰克雷文(John Craven)的海军军官提出了一个不同的计划。
首先,克雷文列出一系列能够解释蝎子号事故的场景。接着,他组建了一个囊括各方面专家的团队。团队成员包括数学家、潜艇专家和救助人员等。有趣的是,他非但不是要求团队成员互相协商寻求一个答案,反而请每个成员提供自己对每个可能场景的发生概率的猜测。为了让事情变得更有趣,他把一瓶芝华士作为猜中的奖品。于是团队成员开始对潜艇可能遇到的麻烦、潜艇的下沉速度、下沉角度等因素下注。
可以预见,团队成员个人推测信息无法告诉克雷文蝎子号的具体位置,但克雷文认为,如果他能把所有答案加在一起,构建一个蝎子号出事全景的复合图像,他应该会得到对潜艇最终位置的很好估计。而这正是他所做的。他收集了所有的猜测,并使用贝叶斯方法来估计蝎子号的最终位置。当一切完成后,克雷文得到一个该团队对于潜艇位置的集体估计。
克雷文最后得到的位置和任何一个团队成员猜测的位置都不同。换句话说,没有一个成员规划的场景和克雷文使用所有收集到的信息构成的场景是重合的。克雷文最后的估计才是真正的集体判断,是该团队作为一个整体取得的,而不是团队中最聪明的人的判断。最后事实证明这个集体的判断非常精彩。在蝎子号消失后的第五个月,海军发现了它。它和克雷文最后得到的位置只差约200米。
这个故事的惊人之处在于是团队成员在几乎没有任何线索和证据的情况下做出的推断。真正的数据只是很小的碎片。没有人知道为什么潜艇沉没,没有人有任何行驶速度和下沉速度的信息。然而,即使在组里没有人知道任何这些事情的情况下,该团队作为一个整体表现得相当出色。
统计学家弗朗西斯高尔顿(Francis Galton)在1906年最先提出群体智慧。在普利茅斯出席了一个农场活动时,他被一个重量猜测比赛所吸引。比赛目标是猜一头牛被屠宰后的重量。那次大约有800名男女老幼参加了比赛,每人写下自己的猜测。猜得最接近牛的屠宰后重量的人得奖。比赛结束后高尔顿拿着所有记录做统计分析。他发现,所有参赛者猜测的平均值1197磅和实际重量1198磅仅差一磅。集体的猜测不仅比比赛的实际赢家准确,而且也比养牛和宰牛专家所做的猜测准确。
有这个话题兴趣的读者可以参看詹姆斯索罗维基(James Surowiecki)的书《群体的智慧》(The Wisdom of Crowds: Why the Many Are Smarter Than the Few and How Collective Wisdom Shapes Business, Economies, Societies and Nations)。在马航事件中,也有人提出是否可以用群体的智慧的方法来寻找它,但目前还没人实现这个想法。
四、贝叶斯与决策当我们在搜救过程中逐渐收集到更多更准确的数据,科学地结合现有数据、科学知识、以及主观经验无疑可为找寻失联客机带来一线曙光。在统计学领域,贝斯方法(Bayesian Methods)提供了一个可以将观测数据、科学知识以及各种经验结合在一起的应用框架。
我们用一个简单例子来说明一下这个框架。假设有一个布袋,装有10个黑球和5个白球,那么随机取出一个球是白色的概率是5/15,即1/3。生活中的情况要更复杂一些——有时我们根本不能事先知道在布袋里到底有几个黑色或者白色的球。这也正是我们有时会进行抽样调查的原因。在不清楚整体情况时,我们会随机抽取一些样本,通过对样本分析以了解整体的情况。若我们不断累积经验,我们的猜测将愈加接近真实情况。贝叶斯方法,作为一种科学的方法,其本质也正是通过不断积累经验,更新对整体的认识 ,从而对真实情形进行把握。
例如,在开始的时候,我们并不知道布袋中白球的比例,那这个比例对我们而言可能是0,也可能是1,或者是1/3,1/5等等。即所有这些比例对我们来说可能性都差不多。假定我们有放回地抽取了六次球,发现有两次抽到的是白球,有四次抽到的是黑球(记做事件A)。利用这六次抽取球的结果,我们大可猜测——在事件A发生的情况下,袋子中白球的比例是1/3的可能性就比较大了。如果加入一些更具体的概率模型和先验知识,用条件概率的计算来计算看到事件A以后我们对袋子内可能情况的描述,就是贝叶斯方法。
再比如说我们去一个陌生的餐馆吃饭。我们因为之前不了解这家餐厅,以至于我们似乎只能随机的做出一个判断。但是贝叶斯方法建议我们去利用可能积累的经验来提供判断的线索。比如,我们的经验是:通常那些坐满了客人的餐厅的食物要更美味些,而那些客人寥寥的餐厅的食物可能不那么可能。这样,我们可以观察餐厅的上座率,从而利用这一条件改变我们的判断:在坐满了客人的条件下,餐厅的食物可口的概率比较大。所以说,在我们认识事物不全面的情况下,贝叶斯方法是一种很好的利用经验帮助作出更合理判断的方法。
现在我们已经对贝叶斯方法有了一定了解,下面我们谈谈如何利用贝叶斯方法帮助寻找失事马航MH370客机呢?对于失事飞机,我们不仅需要找到它的三维坐标,同样需要找到它的失事原因。新线索的出现,帮助我们积累了经验,从而改变飞机是由于自然事故还是遭遇劫机等人为事故造成的概率。两者的概率大小分别由Pr(自然事故|找到的线索)和Pr(遭遇劫机等人为事故|找到的线索)描述。当然,我们还可以利用一些其他的线索帮助我们改变判断,比如飞机的原计划航线,风速,洋流,以及扫描过的海域的情况。法航事件的飞机残骸搜寻工作给我们提供了一个参考案例。

图4-1 飞机残骸可能地点的后验概率分布图(概率由大到小的顺序为:红、橙、黄、绿、蓝)
接着,我们来回顾贝叶斯方法在法航事件搜救过程中的应用。在2009年6月1日早晨,法航447航班在暴风雨中失去了联系。2010年7月,法国航空事故调查处委任Metron负责重新检查分析已有的搜救信息以便绘制一副飞机残骸可能地点的概率分布图,如图4-1所示,概率由大到小的顺序为:红、橙、黄、绿、蓝。2011年1月20日,法国航空事故调查处于其网站刊登了分析结果。直到2011年4月8日,法国航空事故调查处发言人表示2011年1月20日刊出分析结果暗示,在图2-1中的一个圆形范围内有很大可能性会发现飞机残骸;并且,在对该区域进行持续一周的搜寻之后,残骸被发现。随后,飞行数据记录器和驾驶舱语音记录器被找到。最终确认残骸的位置离图4-1中的概率中心位置并不远,可见贝叶斯方法非常有效。
基于贝叶斯方法对整体概率进行计算所利用的信息来自四个阶段的搜寻工作。阶段一:利用被动声学技术搜寻水下定位信号器。法航447装备的飞行数据记录器和驾驶舱语音记录器可以帮助分析事故发生时的状况。同时,在飞机沉入水中时,飞机装配的水下定位信号器发出信号协助通讯。水下定位信号器的电池可以工作至少30天,平均可以工作40天。搜寻持续了31天并于2009年7月10日停止。两台搜救船——费尔蒙特冰川号和探险号,均装备了美国海军提供的声波定位装置——参与了搜救。阶段二:旁侧声呐搜寻。在声波搜寻结束后,BEA决定使用Pourquoi Pas 提供的IFREMER旁侧声呐技术继续搜寻。在本阶段,一些由于时间关系未能在第一阶段搜寻的海域也被搜寻。阶段三:旁侧扫描声呐搜寻。 阶段四:即我们在上一段提及的利用贝叶斯方法进行搜救,并最终找到了飞机残骸。图4-2展示了搜救过程。

图4-2 飞机残骸地点的后验概率分布计算过程
由法航事件,我们可以看到贝叶斯方法确实可以为搜救飞机残骸提供理论依据。由于既得数据有时并不能为计算后验概率提供太多信息,我们需要纠集所有有用的信息,并使所有信息都可以转化为贝叶斯方法中的先验信息。诚如香港城市大学Nozer Singpurwalla教授所言,即使在数据量极为丰富的情况下,应用贝叶斯方法的时候都应考虑专家的主观判断、证据以及想象力。在搜寻飞机的过程中,搜寻队可以估算出已经搜寻过得海域中存在残骸但由于失误没有找到的概率、坏掉一个信号器与坏掉两个信号器是否是独立事件等等。
五、结束语

除了数据分析与统计方法在上面几个方面的应用,其实我们可以看到整个搜寻过程就是一个通过数据收集,数据分析,统计推断,再收集,再分析,再推断,不断提高我们对事件的估计和把握的过程。从科学研究到日常决定,我们都是在不断重复类似这样的过程。多了解一些统计和分析的方法对我们做科学决策肯定会有帮助。

就在本文收稿的时候,搜寻前方传来消息:“在距离珀斯约1600公里处南印度洋水域负责搜寻失联航班的中国舰艇海巡01轮通过黑匣子搜寻仪,侦听到疑似马航失联航班的信号。”而后澳大利亚方面也几次探测到水下信号。希望这些发现和数据信息能够为我们找到马航370提供最新的强心剂。



分享到:  !connect_viewthread_share_to_qq!!connect_viewthread_share_to_qq! QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
收藏收藏 转播转播 分享分享 分享淘帖 支持支持 反对反对
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|JMP数据分析论坛 ( 沪ICP备13022603号-2 )  

GMT+8, 2024-5-17 17:59 , Processed in 0.223977 second(s), 16 queries .

Powered by Discuz! X3

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表