5G、AI和云的技術(shù)應(yīng)用逐漸普及伴隨數(shù)據(jù)量暴增。據(jù)預(yù)測，2018年至2025年，全球數(shù)據(jù)量將從33ZB翻增至180ZB，從2K向4K、8K分辨率過渡數(shù)據(jù)增長達(dá)到40倍。從4K轉(zhuǎn)向4K/VR還會有6倍數(shù)據(jù)增長，再加上未來L4級自動駕駛汽車每天都將產(chǎn)生可觀的64TB級數(shù)據(jù)量。
將這些日常數(shù)據(jù)進(jìn)行時限三十天的存儲已經(jīng)是非常驚人的數(shù)字了。但未來我們還要保存的更多更久，從而導(dǎo)致了巨大的存儲需求落差。
然而落差不僅限于此。這些數(shù)據(jù)僅2%得以保存，在這2%的數(shù)據(jù)中，又只有10%的數(shù)據(jù)可以進(jìn)行分析利用轉(zhuǎn)化價值，進(jìn)而出現(xiàn)數(shù)據(jù)激增與我們對實際應(yīng)用于計算。存儲資源之間的落差。因此，我們亟需構(gòu)建更完善、更具優(yōu)勢的數(shù)據(jù)基礎(chǔ)設(shè)施助力各行各業(yè)實現(xiàn)數(shù)據(jù)存儲智能化、管理簡單化和價值最大化。
近日，由百易傳媒（DOIT）主辦，以“數(shù)智·未來”為主題的2019中國數(shù)據(jù)與存儲峰會（DATA & STORAGE SUMMIT）在北京召開。華為智能數(shù)據(jù)與存儲領(lǐng)域副總裁張福鵬在會上發(fā)表了《打造“融合、智能、開放”數(shù)據(jù)基礎(chǔ)設(shè)施，攜手邁入智能時代》主題演講。
開局：從數(shù)據(jù)存儲進(jìn)階數(shù)據(jù)基礎(chǔ)設(shè)施建設(shè)
如果是在去年來到這里，我可能會講存儲，但自今年5月15號華為發(fā)布GaussDB數(shù)據(jù)庫，華為開始講數(shù)據(jù)基礎(chǔ)設(shè)施，剛才DOIT發(fā)布了數(shù)據(jù)基礎(chǔ)設(shè)施全景白皮書，華為11月份也發(fā)布了數(shù)據(jù)基礎(chǔ)設(shè)施白皮書，數(shù)據(jù)基礎(chǔ)設(shè)施已經(jīng)逐漸成為大家的共同認(rèn)知。今天有幸和大家分享一下我們怎樣打造數(shù)據(jù)基礎(chǔ)設(shè)施。
華為公司使命和愿景是把數(shù)字世界帶入每個人每個家庭每個組織構(gòu)建萬物互聯(lián)的智能世界，我們不再按照原來的以產(chǎn)品捕捉市場。現(xiàn)在智能世界的新認(rèn)知是，算力成為新生產(chǎn)力，數(shù)據(jù)成為新生產(chǎn)資料，5G+云+AI成為新生產(chǎn)工具，三者相互作用將帶來智能時代的最佳實踐，使得數(shù)字經(jīng)濟(jì)獲得更好發(fā)展。
9月18號，華為首次發(fā)布整體計算戰(zhàn)略，發(fā)布“一云兩翼雙引擎”，今天主要介紹這個戰(zhàn)略中如何圍繞數(shù)據(jù)的采、存、算、管、用構(gòu)建自身的能力，打造融合智能開放數(shù)據(jù)基礎(chǔ)設(shè)施，釋放數(shù)據(jù)價值，讓智能無所不及。
首先數(shù)據(jù)驅(qū)動客戶體驗。我們打開一個APP能收到自己感興趣的內(nèi)容，精準(zhǔn)推送背后是數(shù)據(jù)在驅(qū)動。例如快手平臺上每天產(chǎn)生1.2億個數(shù)據(jù)標(biāo)簽，背后與用戶畫像進(jìn)行實時匹配，站群服務(wù)器，然后進(jìn)行內(nèi)容精準(zhǔn)推送。
數(shù)據(jù)驅(qū)動企業(yè)決策。以某油田為例，多年的開采導(dǎo)致產(chǎn)能產(chǎn)量有所下降，采用華為大數(shù)據(jù)和AI解決方案以后，通過測井曲線分析找到新的油層滲透率和空隙率，從而找到新的油層，保持每年500萬噸的產(chǎn)量。
數(shù)據(jù)驅(qū)動體驗變化。以華為為例，每年約有三百萬人出差，過去差旅費用考勤，需要十幾個電子流，現(xiàn)在一個電子流足矣，每天有45萬數(shù)據(jù)碰撞，讓華為可以更好地做到內(nèi)容的開發(fā)。
綜上所述，華為不再局限于單一場景，而是致力于對數(shù)據(jù)的采、存、算、管、用進(jìn)行端到端整合優(yōu)化，讓數(shù)據(jù)在全生命周期內(nèi)更好地用，數(shù)據(jù)每比特價值最大，每比特成本最優(yōu)是數(shù)據(jù)未來的方向。
如何打造融合、智能、開放的數(shù)據(jù)基礎(chǔ)設(shè)施
打造融合、智能、開放的數(shù)據(jù)基礎(chǔ)設(shè)施要通過打破數(shù)據(jù)處理與數(shù)據(jù)存儲的邊界，實現(xiàn)數(shù)據(jù)的高效共享和分析，降本增效。通過AI+存儲+云的方式，數(shù)據(jù)周期內(nèi)自動管理自動運營，存儲越用越快，價值越來越大。通過數(shù)據(jù)虛擬化引擎，讓用戶像使用數(shù)據(jù)庫一樣使用數(shù)據(jù)，數(shù)據(jù)系統(tǒng)從孤立走向融合，從復(fù)雜走向簡單，從封閉走向開放。
融合，數(shù)據(jù)應(yīng)用核心是存儲和分析，過去煙囪式IT系統(tǒng)帶來兩個問題——不同場景下產(chǎn)生多個副本，數(shù)據(jù)不能流動，成本高，分析時導(dǎo)致大量數(shù)據(jù)遷移，出現(xiàn)分析效率問題。華為通過打破存儲內(nèi)部的系統(tǒng)墻，數(shù)據(jù)庫與存儲的鏈路墻，大數(shù)據(jù)與存儲之間的配置墻，數(shù)據(jù)庫和大數(shù)據(jù)協(xié)同墻實現(xiàn)數(shù)據(jù)每筆成本會更優(yōu)。
智能，過去整個網(wǎng)絡(luò)數(shù)據(jù)的運營靠人工配置，靠個人經(jīng)驗和能力決定效率高低，華為基于AI芯片、存儲設(shè)備和華為云三體架構(gòu)，云上訓(xùn)練、云下推理的方式，越用越快，越用越省。依托生成AI的能力，自動學(xué)習(xí)和識別IO流中的數(shù)據(jù)，提升cache預(yù)取命中率，提升20%系統(tǒng)整體性能。
依托鯤鵬多核計算的能力，依據(jù)不同業(yè)務(wù)類型數(shù)據(jù)類型實時進(jìn)行數(shù)據(jù)縮減算法的調(diào)整，讓TCO降低20%。
