一、大數據的劈頭領略

好像一夜之間，大數據（Big Data）釀成一個IT行業中最時髦的詞匯。

首先，大數據不是什么完完全全的新鬧事物，Google的搜索處事就是一個典范的大數據運用，按照客戶的需求，Google及時從全球海量的數字資產（或數字垃圾）中快速找出最大概的謎底，泛起給你，就是一個最典范的大數據處事。只不外已往這樣局限的數據量處理懲罰和有貿易代價的應用太少，在IT行業沒有形成成型的觀念。此刻跟著全球數字化、網絡寬帶化、互聯網應用于各行各業，累積的數據量越來越大，越來越多企業、行業和國度發明，可以操作雷同的技能更好地處事客戶、發明新貿易時機、擴大新市場以及晉升效率，才慢慢形成大數據這個觀念。

有一個有趣的故事是關于奢侈品營銷的。PRADA在紐約的旗艦店中每件衣服上都有RFID碼。每當一個顧主拿起一件PRADA進試衣間，RFID會被自動識別。同時，數據會傳至PRADA總部。每一件衣服在哪個都市哪個旗艦店什么時間被拿進試衣間逗留多長時間，數據都被存儲起來加以闡明。假如有一件衣服銷量很低，以往的作法是直接干掉。但假如RFID傳回的數據顯示這件衣服固然銷量低，但進試衣間的次數多。那就能別的說明一些問題。也許這件衣服的下場就會截然差異，也許在某個細節的微小改變就會從頭締造出一件很是風行的產物。

尚有一個是關于中國糧食統計的故事。中國的糧食統計是一個老浩劫的問題。中國的統計，固然有組織、有流程、有法令，但中央的統計人員依靠省統計人員，省靠市，市靠縣，縣靠鎮，鎮靠村，最后真正干活或上報的是下層兼職的觀測人員，由于眾所周知的KPI查核導向的原因，層層加碼，險些沒有人相信這個觀測數據，而個中國度統計局的人是最不信的。在前兩年北京的一個集會會議上，原國度統計局總經濟師姚景源向我們報告了他們是如何做的。他們回收遙感衛星，通過圖像識別，把中國所有的耕地標識、計較出來，然后把中國的耕地網格化，對每個網格的耕地抽樣舉辦跟蹤、觀測和統計，然后憑據統計學的道理，計較（可能說估算）出中國整體的整體糧食數據。這種做法是典范回收大數據建模的要領，沖破傳統流程和組織，直接得到最終的功效。

最后是一個炒股的故事。這個故事來自于2011年好萊塢的一部高智商影戲《永無盡頭》，報告一位崎嶇潦倒的作家庫珀，服用了一種可以迅速晉升智力的神奇藍色藥物，然后他將這種高智商用于炒股。庫珀是怎么炒股的呢？就是他能在短時間把握無數公司資料和配景，也就是將世界上已經存在的海量數據（包羅公司財報、電視、幾十年前的報紙、互聯網、小道動靜等）挖掘出來，串聯起來，甚至將Face Book、Twitter的海量社交數據挖掘獲得普通公共對某種股票的情感傾向，通過海量信息的挖掘、闡明，使一切黑幕都不是黑幕，使一切趨勢都在面前，功效在10天內他就贏得了200萬美元，神奇的表示讓身邊的職業投資者呆頭呆腦。這部影戲的確是揭示大數據魔力的課本性影戲，推薦沒有看過的IT人士看一看。

從這些案例來看，大數據并不是很神奇的工作。就如同影戲《永無盡頭》提出的問題：人類凡是只利用了20％的大腦，假如剩余80％大腦潛能被引發出來，世界會變得奈何？在企業、行業和國度的打點中，凡是只有效利用了不到20%的數據（甚至更少），假如剩余80%數據的代價激提倡來，世界會變得怎么樣呢？出格是跟著海量數據的新摩爾定律，數據發作式增長，然后數據又獲得更有效應用，世界會怎么樣呢？

單個的數據并沒有代價，但越來越多的數據累加，量變就會引起質變，就仿佛一小我私家的意見并不重要，但1千人、1萬人的意見就較量重要，上百萬人就足以掀起龐大的波濤，上億人足以改變一切。

數據再多，但假如被屏蔽可能沒有被利用，也是沒有代價的。中國的航班晚點很是多，對比之下美國航班準點環境好許多。這個中，美國航空管束機構一個的好做法發揮了努力的浸染，說起來也很是簡樸，就是美國會發布每個航空公司、每一班航空已往一年的晚點率僻靜均晚點時間，這樣客戶在購置機票的時候就很自然會選擇準點率高的航班，從而通過市場手段牽引各航空公司盡力晉升準點率。這個簡樸的要領比任何打點手段（如中國當局的宏觀調控手段）都直接和有效。這里多說一兩句，已往一個虐政國度對內的節制主要是物理上的暴力，就是強力機構權力無限大，搞國度可怕主義；而此刻一個虐政國度，主要是就靠把持信息、封閉信息，讓公眾難以得到遍及而真實的信息，從而實現國度的節制。這個信息封閉，就是對大數據的封閉。