人認為 Hadoop 正在失敗，但硅谷數(shù)據(jù)打點公司 Hortonworks 的總司理 Vamsi K. Chemitiganti 并不這么看，為了辯駁此前一篇文章《為什么 Hadoop 正在消亡？（Why Hadoop is Failing）》的概念，他在本身的博客上寫了一篇闡述本身觀點的文章，他認為達爾文式的開源生態(tài)系統(tǒng)正在確保 Hadoop 成為穩(wěn)固和成熟的技能平臺。

「密斯，那么剛出生的孩子醒目什么？」——邁克爾·法拉第，在 18 世紀被問及新發(fā)現(xiàn)的電有什么用的時候。

為什么 Hadoop 正在成長壯大

已往兩年來，我一直致力于大數(shù)據(jù)方面的研究，美國抗攻擊服務器 亞洲服務器，并在這段時間里經(jīng)驗了令人感想震撼的厘革，因為我一直在全球各地為銀行業(yè)的率領者們提供咨詢處事。

這也是為什么當近期 KDnuggets 呈現(xiàn)了一篇搬弄性質的《為什么 Hadoop 正在消亡》時，我必需站出來阻擋了。在那篇文章中，作者的接頭具有建樹性，但問題在于其接頭基于一些毫無按照的假設。在深入研究之前，我們要思量個中的配景。

公司業(yè)務中數(shù)字架構的呈現(xiàn)意味著公司可以或許與全球客戶/消費者/病人一連地在線互動。其目標并不只僅是為了提供友好的可視化內(nèi)容，而是為了提供跨渠道，多范例的本性化處事。移動應用首先迫使企業(yè)將處事形式進級為與消費者在多渠道中展開相同。譬喻銀行業(yè)，所有銀行此刻都涵蓋了四到五種處事方法：移動 app、電子銀行、呼喚中心、快捷銀行等。醫(yī)療保健業(yè)有但愿成為下一個改變面孔的行業(yè)，照顧護士人員已經(jīng)開始回收 iPad 來協(xié)助診斷，存儲和處理懲罰患者的藥物和疾病數(shù)據(jù)。大數(shù)據(jù)技能的成長是為了降服以往要領（RDBMS 和 EDW）的范圍性，辦理在數(shù)字應用倉庫中數(shù)據(jù)架構和闡明的挑戰(zhàn)。

這些挑戰(zhàn)包羅：

數(shù)據(jù)體量擴大的挑戰(zhàn)。公司數(shù)據(jù)種類的飛速膨脹。Hadoop 顯然也有本身的限制——譬喻支持低延遲 BI（Business Intelligence，貿(mào)易智能）查詢的本領?？墒?Hadoop 之前的要領顯然有更多的缺陷，它們無法處理懲罰和打點大量數(shù)據(jù)，從而為數(shù)字架構的業(yè)務帶來了兩大挑戰(zhàn)。第一個挑戰(zhàn)是在企業(yè)數(shù)據(jù)流架構中及時提供洞見；第二個挑戰(zhàn)是舉辦進一步闡明的本領：快速舉辦預測闡明和深度進修（常常需要每秒處理懲罰百萬條信息），從而可以或許跨規(guī)模辦理巨大問題。Hadoop 是獨一能讓這些挑戰(zhàn)化為有效貿(mào)易時機的方法。

達爾文式的開源生態(tài)系統(tǒng)正在確保 Hadoop 成為穩(wěn)固和成熟的技能平臺。

今朝的絕大大都 Hadoop 大數(shù)據(jù)項目（高出 25 個）都依靠開源社區(qū)在 Apache 生態(tài)系統(tǒng)中孵化、開拓和維護。開源社區(qū)本質上是達爾文式的。它專注于代碼質量和行業(yè)應用，依賴于蹊徑圖和提交者的正確性，假如一個項目缺乏這些，那它會很快走進宅兆。換句話說，生態(tài)系統(tǒng)中沒有落伍者的位置。

讓我們看看那篇文章中作者的主要假設吧。

假設 1：Hadoop 回收不再增長，最多持平

我日常事情中的最重要的部門是與多個客戶相助探討他們的業(yè)務打算以及尋找應用技能來辦理這些巨大困難的要領。我可以證明最大企業(yè)對 Hadoop 的回收絕對沒有裹足不前。盡量我的概念必定是耳食之聞，并且不是來自于企業(yè)內(nèi)部的黑幕，但在銀行業(yè)、電信業(yè)、制造業(yè)和保險業(yè)，Hadoop 的回收卻實實在在地在飛漲。在早期就與領先的供給商相助的企業(yè)已經(jīng)或多或少找到了將這項技能應用于它們的業(yè)務困難的好要領?；厥?Hadoop 的模式正在成熟，并且它們也正在意識到個中龐大的貿(mào)易代價。一家領先的供給商 Hortonworks 在實現(xiàn) 1 億美元年收入的階梯上比其它任何科技創(chuàng)業(yè)公司都跑得快——這是該規(guī)模潛力的有力證明。Cloudera 方才已經(jīng)上市。在見證著這樣的增長的同時，我們也看到領先的 EDW 供給商的收入和股價卻略有下跌。我估量，將來 5-7 年內(nèi)就會呈現(xiàn)第一家年收入到達 10 億美元的大數(shù)據(jù)「創(chuàng)業(yè)公司」，與備受尊敬的開源先驅 Red Hat 對比還幾多快一點。至少，Hadoop 項目能輔佐企業(yè)從昂貴和不機動的企業(yè)數(shù)據(jù)客棧項目上節(jié)減成百上千萬美元。險些所有組織都已經(jīng)開始陳設 Hadoop，以作為它們的企業(yè)登岸區(qū)（ELZ：Enterprise Landing Zone），從而加強它們的 EDW。

假設 2：利用 Hadoop 締造的項目標貿(mào)易代價不明明

該作者在這方面尚有點原理，但讓我表明一下為什么這是組織機構所面對的困難，而實際上并不是任何技能倉庫（中間件或云或大數(shù)據(jù)）的過失。這個困難在于：尋找大數(shù)據(jù)項目標貿(mào)易代價往往是一個風雅活，涉及到整個巨大的組織布局。IT 部門雖然可以將 POC（觀念驗證）作為一門科學或一項「一次性簡歷構建」項目而開始，但其業(yè)務線需要從一開始就參加進來，比其它任務技能種別都早。大數(shù)據(jù)并不是關于存儲大量數(shù)據(jù)的基本設施的施工，而是關于如安在收集和籌謀的數(shù)據(jù)上締造業(yè)務闡明。不管這些闡明是簡樸而老套的貿(mào)易智能（BI），照舊數(shù)據(jù)科學導向的，它們都依賴于一個組織自己的文化和創(chuàng)新。