商學院關(guān)注:“大數(shù)據(jù)”的承諾與陷阱

?智能總結(jié)MBAChina網(wǎng)訊 時下最流行的術(shù)語要數(shù)大數(shù)據(jù)了。根據(jù)國際商業(yè)機器公司(IBM)估計的數(shù)據(jù)來看,現(xiàn)在我們每天生成的數(shù)據(jù)高達250兆億個字節(jié),超過過去兩年里生成的數(shù)據(jù)總量的90%。 信息的指數(shù)型增長有時被人們視為萬靈藥,就好比20世紀70年代出現(xiàn)的計算機一樣?!哆B線》雜志的前主編克里斯?安德森曾經(jīng)在2008年的一篇文章中說:數(shù)量龐大的數(shù)據(jù)會使人們不再需要理論,甚至不再需
MBAChina網(wǎng)訊 時下最流行的術(shù)語要數(shù)“大數(shù)據(jù)”了。根據(jù)國際商業(yè)機器公司(IBM)估計的數(shù)據(jù)來看,現(xiàn)在我們每天生成的數(shù)據(jù)高達250兆億個字節(jié),超過過去兩年里生成的數(shù)據(jù)總量的90%。
信息的指數(shù)型增長有時被人們視為萬靈藥,就好比20世紀70年代出現(xiàn)的計算機一樣?!哆B線》雜志的前主編克里斯?安德森曾經(jīng)在2008年的一篇文章中說:“數(shù)量龐大的數(shù)據(jù)會使人們不再需要理論,甚至不再需要科學的方法。”
本書著重介紹了前沿科學和高端技術(shù),我認為其內(nèi)容是積極樂觀的,卻被嚴重曲解了。雖然那些數(shù)字不能為自己辯護,但我們卻可以作為數(shù)字的發(fā)言人,賦予它們意義。這就好比對愷撒密碼解碼一樣,我們可能會以對自己有利的方式對這些數(shù)據(jù)進行分析和解釋,而這些方式很可能與這些數(shù)據(jù)(所代表)的客觀現(xiàn)實不相吻合。數(shù)據(jù)驅(qū)動預測機制可能會成功,也可能會失敗。一旦我們否認數(shù)據(jù)處理過程中存在著主觀因素,失敗的概率就會增加。要提高數(shù)據(jù)分析的質(zhì)量,首先要對我們自身提出更高的要求。如果對我的情況不甚了解,你可能就會對前面的提法頗感意外。我在數(shù)據(jù)和統(tǒng)計學領(lǐng)域還算小有建樹,曾經(jīng)據(jù)此做出不少成功的預測。2003年,由于厭倦了咨詢工作,我設計了一個名為“PECOTA”的系統(tǒng),主要用來預測美國職業(yè)棒球聯(lián)盟球員的各項數(shù)據(jù)。這個系統(tǒng)有很多創(chuàng)新點——其預測是概率性的,比方說其中為每位球員都列出了一系列可能出現(xiàn)的結(jié)果——當我們將這些預測結(jié)果與比賽系統(tǒng)給出的結(jié)果進行比較時,發(fā)現(xiàn)這套系統(tǒng)的性能更加優(yōu)越。2008年,我建立了“FiveThirtyEight”(538網(wǎng)站,因538張選舉人總票數(shù)得名)網(wǎng)站,試圖對即將舉行的美國總統(tǒng)大選進行預測。該網(wǎng)站對兩位美國總統(tǒng)候選人在美國50個州中的競選結(jié)果進行了預測,結(jié)果命中49次競選,只有1次失手。另外,我的網(wǎng)站還預測出美國參議院選舉的35個席位歸屬。
美國總統(tǒng)大選過后,很多出版商找到我,希望我能為《點球成金》和《魔鬼經(jīng)濟學》這類關(guān)于小人物征服大世界的書籍估個價。本書涵蓋很多行業(yè)和領(lǐng)域,從金融領(lǐng)域,到國家安全,對這些行業(yè)和領(lǐng)域中的數(shù)據(jù)驅(qū)動預測機制進行了調(diào)查。
在4年時間里,我曾與十幾個領(lǐng)域中的100多位專家交流過,讀過數(shù)百篇期刊文章和論文,為了實地調(diào)查,我跑遍了從拉斯韋加斯到哥本哈根的許多地方,卻發(fā)現(xiàn)“大數(shù)據(jù)”時代的預測活動發(fā)展得并不順利。我的成功也只是因為我在某種程度上比較幸運,一是盡管出現(xiàn)了本書中提到的一些錯誤,但還是取得了成功;二是選對了調(diào)查案例。
本書提到了幾個值得研究的例子,集人類判斷與計算機功能為一體的天氣預報就是其中之一。雖然氣象學家的名聲不好,可是他們也取得過顯著的進步,比如他們預測颶風著陸位置的準確度比25年前提高了3倍。與此同時,我還拜訪過一些在賭城拉斯韋加斯轟動一時的撲克牌玩家和(體育賽事)賭徒。
但是,這些預測成功的案例必然是建立在一系列失敗案例的基礎之上的。
如果讓我們用一個特點來定義美國人——一個令其與眾不同的特質(zhì)——那就是美國人對卡修斯精神的信仰:我們的命運由我們自己主宰。一些宗教叛逆者迎著工業(yè)革命的曙光建立了美國,他們認為自由流動的思想不僅有助于傳播其宗教信仰,也有助于傳播科學和商業(yè)貿(mào)易,“作為一個民族,我們的智慧、我們的勤勞、我們的傲慢和急躁、我們所有的強項和弱項,都源自我們那不可動搖的信念,那就是我們要為自己做主”。
新千年給美國人帶來的是噩夢般的開始。我們沒有預測到“9?11”恐怖襲擊事件,而這一慘劇的出現(xiàn)并非因為我們的信息匱乏。正如60年前的“珍珠港事件”一樣,其實所有的信號都在那里,只是我們沒能將它們聯(lián)系起來。因為對恐怖分子可能會有的舉動不夠了解,所以我們對那些數(shù)據(jù)視而不見,不知道大難將至。
近期,對全球金融危機的預測也總是失敗。我們天真地相信各種(預測)模式,卻沒有認識到這些模式在我們進行假設選擇時根本不堪一擊,因此總會帶來慘痛的后果。在日常生活中,我發(fā)現(xiàn)盡管人們也在努力嘗試,卻仍然無法提早預測出經(jīng)濟衰退。幸好在控制通脹方面,我們已經(jīng)取得長足進步,否則那些經(jīng)濟決策者就只能“盲目飛行”了。
與20世紀70年代一樣,近來人們十分熱衷于對地震進行預測,其中大部分高度依賴數(shù)學方法和數(shù)據(jù)處理技術(shù)。但是,這些預測只是假想一些從未發(fā)生過的地震,對真正發(fā)生的那些地震卻沒有預測到。福島核反應堆的設計可以抵抗8.6級地震,因為一些地震學家稱不可能發(fā)生更高級別的地震。但是,2011年3月日本卻發(fā)生了9.1級的特大地震。
錯誤地預測整個學科的發(fā)展常會危及整個社會。以生物醫(yī)藥學的研究為例。2005年,一位土生土長的雅典人,醫(yī)學研究者約翰?P?埃尼迪斯,發(fā)表了一篇頗具爭議性的論文,題為“為什么大多數(shù)發(fā)表的研究成果都是騙人的”。該文對那些行業(yè)期刊中刊載的積極的研究成果進行了研究(這些成果認為那些在實驗室實驗中得到驗證的醫(yī)學假設堪稱成功預測),認為大多數(shù)成果在實際生活中很可能是毫無用處的。德國拜耳制藥公司最近證實了埃尼迪斯的這個推斷,他們通過實驗親自對那些醫(yī)學期刊中提到的積極研究成果進行驗證,但發(fā)現(xiàn)其中近2/3的醫(yī)學假設根本不能成立。
這些大數(shù)據(jù)終將推動社會進步,至于這種進步的速度有多快,或者進步的同時是否還會倒退,這些都取決于我們自己。
(本文轉(zhuǎn)載自 ,如有侵權(quán)請電話聯(lián)系13810995524)
* 文章為作者獨立觀點,不代表MBAChina立場。采編部郵箱:news@mbachina.com,歡迎交流與合作。
備考交流
- 【MBAChina 官方社群矩陣】
- 涵蓋 199管理類聯(lián)考備考 · 復試調(diào)劑 · 博士申請 · 中外合辦學 四大板塊。
- ??2027 MBA/MPA/MEM/MPAcc /EMBA聯(lián)考備考群
- ??2026 管理類聯(lián)考復試調(diào)劑群
- ??博士項目交流群
- ??中外合作辦學項目群
- ?? 添加微信:MBAChina001
- 備注【報考項目】,邀請您加入專屬交流群

掃碼關(guān)注我們
- 獲取報考資訊
- 了解院?;顒?/li>
- 學習備考干貨
- 研究上岸攻略
最新動態(tài)
活動日歷
- 01月
- 02月
- 03月
- 04月
- 05月
- 06月
- 07月
- 08月
- 09月
- 10月
- 11月
- 12月
- 06/01 6月1日直播預告:香港理工大學SPEED學院_全新碩士課程專場!26fall入學!
- 06/03 6月3日活動報名 | 北大光華-凱洛格國際EMBA項目Coffee Chat@上海
- 06/03 【活動報名】中國科學技術(shù)大學科技商學院專題講座重磅開啟!
- 06/04 6月4日 席位鎖定中 | 香港中文大學(深圳)MBM2027級招生說明會
- 06/06 長春理工大學2027級工商管理碩士(MBA)考生見面會
- 06/06 重磅!上財?shù)嗡呓?027級全日制金融碩士“新興金融探索日”活動通知
- 06/06 深圳場 | 清華-康奈爾雙學位金融MBA公開課暨2027級招生說明會報名中!
- 06/06 上海 | 紫荊課堂暨2027級清華MBA招生咨詢會報名開啟!
- 06/06 浪潮已至|南科大科創(chuàng)MBA 2027級招生啟動大會來了
- 06/06 活動報名 | “迅策科技”校友企業(yè)參訪暨清華五道口金融EMBA深圳招生說明會
熱門資訊
掃碼關(guān)注 MBAChina
掃碼關(guān)注
EMBA







