大數(shù)據(jù)時代,大數(shù)據(jù)分析與應用大肆盛行。越來越多的大公司大企業(yè)大集團,都越來越重視大數(shù)據(jù)的影響和作用。可以說,誰想搶得大數(shù)據(jù)的一手可靠資料,誰就在未來的業(yè)務發(fā)展和拓寬中占據(jù)優(yōu)勢,誰就會在相關領域首先拔得頭籌。但是,大數(shù)據(jù)發(fā)展前景現(xiàn)在到底如何,大數(shù)據(jù)的可靠性由誰說了算,大數(shù)據(jù)的真實性有誰可以保證?甚至還可以再倒退一點點來問問,如今的大數(shù)據(jù)究竟發(fā)展到了什么階段?
我想,應該很少人能夠清楚地知道這一點吧!畢竟在大數(shù)據(jù)分析與應用火爆的年代,一般人都只是了解大數(shù)據(jù)的皮毛和表面,而對于大數(shù)據(jù)發(fā)展前景、大數(shù)據(jù)背后的來源及處理分析等等精密的工作程序,肯定不了解,也不會感興趣。而且對于一般人,也不可能會去真正弄明白大數(shù)據(jù)分析與應用背后蘊藏的種種可靠性、客觀性、真實性的來源支撐與科學手段處理。下面,小編就用大白話的方式來跟大家講講,如今的大數(shù)據(jù)究竟發(fā)展到了什么階段,由此來窺探一下大數(shù)據(jù)發(fā)展前景到底是怎么個情況。
在日新月異且喜新厭舊的技術初創(chuàng)企業(yè)界,已有3年歷史的 “大數(shù)據(jù)” 聽起來似乎已經(jīng)有點過氣。雖然 Hadoop 在 2006年 已經(jīng)出來,但 “大數(shù)據(jù)” 這個概念大概是在 2012 到 2015年左右才真正火起來的。也就是在這段時間里,至少是在媒體或者專家眼里,“大數(shù)據(jù)” 才開始慢慢成為了新的 “金子” 或者 “石油”。然而,至少在我跟業(yè)界人士交談中,大家越來越感覺到這項技術已經(jīng)在某種程度上陷入了停滯或迷惑期。2017年可能是數(shù)據(jù)領域的那些酷小子轉(zhuǎn)移興趣,開始沉迷于 AI 以及機器智能、深度學習等許多相關概念的年份。
拋開不可避免的炒作周期曲線態(tài)勢不管,國內(nèi)服務器租用 服務器托管,我們的 “大數(shù)據(jù)版圖” 已經(jīng)進入第 4 個年頭了,趁這個時候退一步來反思一下去年發(fā)生了什么,思考一下這個行業(yè)的未來會怎樣是很有意義的,看看如今的大數(shù)據(jù)到底發(fā)展到了什么階段。那么 2019年大數(shù)據(jù)到底還有多大的發(fā)展和進步空間呢?我們不妨探討一下。
企業(yè)技術=艱苦工作
大數(shù)據(jù)有趣的一點在于,它不再像當初經(jīng)歷過那樣有可能成為炒作的題材了。
經(jīng)過炒作周期后仍能引起廣泛興趣的產(chǎn)品和服務往往那些大家能夠接觸、可以感知,或者與大眾相關聯(lián)的:比如移動應用、社交網(wǎng)絡、可穿戴、虛擬現(xiàn)實等。
但大數(shù)據(jù)基本上就是管道設施的一種。當然,大數(shù)據(jù)為許多消費者或商業(yè)用戶體驗提供了動力,但它的核心是企業(yè)技術:數(shù)據(jù)庫、分析等,這些東西都是在后端運行的,沒幾個人能看得見。就像在那個世界工作的任何人都知道那樣,用一個晚上的時間就想適應企業(yè)端的新技術是不可能的。
大數(shù)據(jù)現(xiàn)象在早期主要是受到了與一批骨干互聯(lián)網(wǎng)公司(尤其是 Google、Facebook、Twitter 等)的共生關系的推動,這些公司既是核心大數(shù)據(jù)技術的重度用戶,同時也是這些技術的創(chuàng)造者。這些公司突然間面對著規(guī)模前所未有的龐大數(shù)據(jù)時,由于本身缺乏傳統(tǒng)的(昂貴的)基礎設施,也沒有辦法招募到一些最好的工程師,所以只好自己動手來開發(fā)所需的技術。后來隨著開源運動的迅速發(fā)展,一大批此類新技術開始共享到更廣的范圍。然后,一些互聯(lián)網(wǎng)大公司的工程師離職去創(chuàng)辦自己的大數(shù)據(jù)初創(chuàng)企業(yè)。其他的一些 “數(shù)字原生” 公司,包括嶄露頭角的獨角獸公司,也開始面臨著互聯(lián)網(wǎng)大公司的類似需求,由于它們自身也沒有傳統(tǒng)的基礎設施,所以自然就成為了那些大數(shù)據(jù)技術的早期采用者。而早期的成功又導致了更多的創(chuàng)業(yè)活動發(fā)生,并獲得了更多的 VC 資助,從而帶動了大數(shù)據(jù)的起勢。
快速發(fā)展了幾年之后,現(xiàn)在我們面臨的是更加廣闊、但也更加棘手的機遇:讓中等規(guī)模到跨國公司級別的更大一批企業(yè)采用大數(shù)據(jù)技術。這些公司跟 “數(shù)字原生” 公司不一樣的是,他們沒有從零開始的有利條件。而且他們失去的會更多:這些公司絕大部分的現(xiàn)有技術基礎設施都是成功的。那些基礎設施當然未必是功能完備的,組織內(nèi)部許多人也意識到對自己的遺留基礎設施進行現(xiàn)代化應該是早點好過晚點,但他們不會一夜間就把自己的關鍵業(yè)務取代掉。任何革命都需要過程、預算、項目管理、試點、局部部署以及完備的安全審計等。大企業(yè)對由年輕的初創(chuàng)企業(yè)來處理自己基礎設施的關鍵部分的謹慎是可以理解的。還有,令創(chuàng)業(yè)者感到絕望的是,許多(還是大多數(shù)?)企業(yè)仍頑固地拒絕把數(shù)據(jù)遷移到云端(至少不愿遷移到公有云)。