大數(shù)據(jù)強(qiáng)勢滲透，現(xiàn)實「痛」在哪里？ 開發(fā)者需要關(guān)注什么？

Follow 新應(yīng)用，人工智能、區(qū)塊鏈擁抱大數(shù)據(jù)

雙十一余韻未歇，剛處理完一波售后及退件等“剁手后遺癥”的各方人馬也已經(jīng)為再戰(zhàn)雙十二做好了準(zhǔn)備。截至 12 日零點，天貓雙十一成交額達(dá) 2135 億元。與此同時，據(jù)國家郵政局監(jiān)測數(shù)據(jù)顯示，主要電商企業(yè) 11 日全天共產(chǎn)生快遞物流訂單 13.52 億件，各郵政、快遞企業(yè)共處理 4.16 億件，再創(chuàng)歷史新高——這一系列龐大的數(shù)字背后，是否也包含了你的戰(zhàn)績？隨手滑開購物界面，是否曾被“猜你喜歡”中的某樣單品達(dá)成取向狙擊，看穿你的心意？

以互聯(lián)網(wǎng)行業(yè)為例，大數(shù)據(jù)應(yīng)用貫穿電商、社交、游戲娛樂等多個領(lǐng)域，企業(yè)可以通過分析、挖掘數(shù)據(jù)的價值，提前觸達(dá)用戶需求，預(yù)測其消費習(xí)慣和趨勢，從而為相關(guān)決策提供依憑。除此之外，大數(shù)據(jù)還可以提供咨詢服務(wù)，為關(guān)聯(lián)產(chǎn)業(yè)的個性化產(chǎn)品提供戰(zhàn)略協(xié)助。

企業(yè)數(shù)據(jù)的爆炸性增長也埋下了隱患，隨著大數(shù)據(jù)不斷向水平及垂直領(lǐng)域發(fā)展延伸，人才匱乏的問題日益凸顯。當(dāng)企業(yè)準(zhǔn)備利用大數(shù)據(jù)大展拳腳之時，卻發(fā)現(xiàn)數(shù)據(jù)人才供不應(yīng)求，大數(shù)據(jù)復(fù)合型人才更是稀缺，這一掣肘直接阻礙了大數(shù)據(jù)產(chǎn)業(yè)的創(chuàng)新發(fā)展。數(shù)據(jù)人才的缺口一直備受關(guān)注，依據(jù) CSDN 發(fā)布的 2017 中國開發(fā)者大調(diào)查顯示，企業(yè)構(gòu)建大數(shù)據(jù)平臺面臨的主要問題在于人才的缺失。大數(shù)據(jù)系統(tǒng)研發(fā)工程師、大數(shù)據(jù)分析師、大數(shù)據(jù)應(yīng)用開發(fā)程序師、數(shù)據(jù)安全研發(fā)人才、數(shù)據(jù)可視工程師等皆在緊俏風(fēng)口崗位之列。

人才缺口在哪里？

如果你也關(guān)注大數(shù)據(jù)，想了解大數(shù)據(jù)技術(shù)如何更好地服務(wù)于實體經(jīng)濟(jì)，以及熱門技術(shù)在行業(yè)中的實踐和應(yīng)用，歡迎報名參加即將于 12 月 6-8 日在北京新云南皇冠假日酒店舉行的 2018 中國大數(shù)據(jù)技術(shù)大會（BDTC）——本次大會攜主題“大數(shù)據(jù)新應(yīng)用”再度強(qiáng)勢來襲，除了超強(qiáng)內(nèi)容配置的 Keynote 外，還特別設(shè)置了 13 場專題技術(shù)和行業(yè)論壇，涵蓋大數(shù)據(jù)分析與生態(tài)系統(tǒng)、深度學(xué)習(xí)、推薦系統(tǒng)、大數(shù)據(jù)安全與政策、大數(shù)據(jù)可視分析、精準(zhǔn)醫(yī)療大數(shù)據(jù)、數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)教育、數(shù)據(jù)庫、金融大數(shù)據(jù)、知識圖譜、工業(yè)大數(shù)據(jù) 、區(qū)塊鏈、交通與旅游大數(shù)據(jù)等主題，既包含對技術(shù)核心及前沿進(jìn)展的深度挖掘，亦關(guān)注行業(yè)落地實踐及案例分享，廣度、高度、深度三者兼?zhèn)洌轿涣Ⅲw解讀大數(shù)據(jù)時代的技術(shù)進(jìn)程，聆聽業(yè)內(nèi)需求，打造技術(shù)純享論壇。

從金融、電信、交通到互聯(lián)網(wǎng)，大數(shù)據(jù)風(fēng)口長立

據(jù)中國信息通信研究院于 2018 年 4 月發(fā)布的《大數(shù)據(jù)白皮書（2018年）》對行業(yè)應(yīng)用大數(shù)據(jù)的深層分析顯示，“企業(yè)和行業(yè)大數(shù)據(jù)應(yīng)用體系其實就是在生產(chǎn)業(yè)務(wù)系統(tǒng)之外構(gòu)建統(tǒng)一的企業(yè)級數(shù)據(jù)倉庫。回顧各個領(lǐng)先行業(yè)企業(yè)級數(shù)據(jù)倉庫建設(shè)路徑，從技術(shù)架構(gòu)上大都經(jīng)歷了從傳統(tǒng)數(shù)據(jù)庫或者數(shù)據(jù)倉庫的架構(gòu)到 MPP 數(shù)據(jù)庫架構(gòu)再到 Hadoop 的架構(gòu)體系。除技術(shù)架構(gòu)外，企業(yè)級數(shù)據(jù)倉庫的建設(shè)還包括數(shù)據(jù)模型、數(shù)據(jù)管理體系以及數(shù)據(jù)應(yīng)用體系的建設(shè)，整個企業(yè)級數(shù)據(jù)倉庫最終實施效果依賴于企業(yè)內(nèi)部專業(yè)而有力度的組織機(jī)構(gòu)來推動”。

然而理想和現(xiàn)實總有一線之隔，在大數(shù)據(jù)深入滲透各行各業(yè)的同時，服務(wù)器租用 免備案服務(wù)器，“數(shù)據(jù)孤島”問題也一直存在。隨著海量數(shù)據(jù)的生成，大數(shù)據(jù)時代的我們理論上應(yīng)該擁有大量數(shù)據(jù)，但在實際進(jìn)行數(shù)據(jù)分析的過程中，逐漸暴露出一個嚴(yán)重的問題——底層數(shù)據(jù)缺乏。而造成這一痛點的原因有三，其一是很多企業(yè)慣以“節(jié)省數(shù)據(jù)整理成本”和“保護(hù)商業(yè)機(jī)密”為由，拒絕公開自己所擁有的數(shù)據(jù)；其二是基于信息安全的考量，身為“大數(shù)據(jù)時代的楚門”，公眾大量重要的私人信息幾乎都有數(shù)據(jù)留存，而這部分信息往往也是企業(yè)不愿對外透露的；其三則是正處于商業(yè)化應(yīng)用中不會共享的數(shù)據(jù)。對此，中國科學(xué)院院士、北京大數(shù)據(jù)研究院院長鄂維南指出，“數(shù)據(jù)孤島的痛不是技術(shù)問題，是利益問題，背后隱藏的利益導(dǎo)致了數(shù)據(jù)孤島的產(chǎn)生”。

數(shù)據(jù)時代當(dāng)前，歡迎來到楚門的世界。

大數(shù)據(jù)時代之下，一如我們無法抗拒科技進(jìn)步帶來的便捷及歡愉，我們同樣也無法避免在享受這一切的過程中留下自己的“數(shù)字足跡”。正因如此，數(shù)據(jù)如今已然被納入企業(yè)的戰(zhàn)略資源，開始指導(dǎo)決策，歐洲服務(wù)器租用 云服務(wù)器，成為其提高行業(yè)核心競爭力的關(guān)鍵一環(huán)。從電商平臺的個性化商品推薦，到各大新聞媒體及音視頻網(wǎng)站的首頁推送，乃至電競比賽的觀賞性和專業(yè)性等應(yīng)用實現(xiàn)的背后，都仰賴海量數(shù)據(jù)的支撐。

談及數(shù)據(jù)的價值，馬云曾在接受 CNBC 采訪時表示，“整個世界將變成數(shù)據(jù)，我認(rèn)為這還只是數(shù)據(jù)時代的開始。新浪潮即將來臨，很多就業(yè)機(jī)會即將被奪走。有些人會趕上潮流，變得更加富有和成功。但是對于那些落后的人，未來將是痛苦的”。

除此之外，大數(shù)據(jù)底層技術(shù)、產(chǎn)業(yè)服務(wù)水平也有待提高。當(dāng)數(shù)據(jù)孤島的壁壘被打破后，如何將收集到的海量數(shù)據(jù)，進(jìn)行高效安全的數(shù)據(jù)分析和管理，為用戶提供切實可行的解決方案又迫在眉睫；當(dāng)我們在重視技術(shù)的過程中，服務(wù)也應(yīng)當(dāng)齊頭并進(jìn)，類似針對大數(shù)據(jù)產(chǎn)業(yè)知識產(chǎn)權(quán)保護(hù)、投資、咨詢、品牌推廣等第三方系列機(jī)構(gòu)較少，面向大數(shù)據(jù)產(chǎn)品和服務(wù)提供系列評估、檢測的機(jī)構(gòu)也未形成規(guī)模，而這恰恰對大數(shù)據(jù)行業(yè)生態(tài)建設(shè)極為重要。