5月26日,由貴陽數博會執委會與國家工業信息安全發展研究中心聯合承辦的《大數據優秀產品和應用解決方案案例集(2019)》發布會暨中國“十佳大數據案例”揭曉活動(以下簡稱“發布會”)在貴陽國際會議展覽中心成功舉辦。
2019年數博會案例評選是有史以來參與廠家最多,條件最苛刻的一次。專家評審團透露,為貫徹落實國家大數據戰略,全面掌握我國大數據產業發展和應用情況,本次大數據案例評選成立了專家評審團,制定案例應用需求、產品架構、關鍵技術、應用效果和企業綜合實力五個維度的綜合考量標準,歷時3個多月,從1706個大數據中共評出100余個案例入選“2019大數據優秀產品和應用解決方案案例集”,并經過現場答辯最終評選出2019“大數據十佳案例”。
騰訊大數據處理套件TBDS(Tencent Big Data Suite)憑借過硬的產品實力,以及政府、金融、工業等領域大量的行業應用,從1706個案例中脫穎而出,喜獲數博會2019“十佳大數據案例”以及“全國百家大數據優秀案例”。
圖 2 騰訊大數據榮獲2019“十佳大數據案例” 和百家大數據優秀案例
TBDS是基于騰訊多年海量數據處理經驗,集實時/離線場景高性能分析引擎、數據開發以及數據治理功能于一體的大數據平臺,其核心包含TBDS大數據基礎平臺、多集群多租戶管控平臺,數據接入,數據開發,數據治理,機器學習,智能運營平臺等。
TBDS產品結構分為四部分:
平臺運維和管理能力:為大數據平臺基礎的配置、啟停、監控、告警、診斷、審計、安全管控等基礎能力;
高性能數據分析引擎:基于分布式存儲和資源調度能力,分析引擎覆蓋了在線數據計算、離線數據分析、近線數據分析、流式數據分析等大數據分析場景;
數據開發微服務:提供包含實時/離線數據集成、數據自由探索、數據開發IDE以及可視化機器學習等大數據開發工具支持,使數據開發者能高效進行大數據開發;
數據治理微服務:提供技術/業務層面的元數據管理、數據生命周期管理、數據血緣管理、數據地圖、數據質量以及數據訪問審計等能力,使業務數據能得到有效組織和管理。
TBDS通過樂高架構,融合多個組件系統,構建開箱即用的大數據平臺,提供拖拽式的可視化數據開發IDE及機器學習平臺,可支持用戶自定義功能,具有非常好的產品擴展性。為客戶的大數據集成、存儲、計算環節提供完整而穩定的企業級解決方案。客戶能借助于TBDS快速構建中臺能力,聚焦于進行企業的業務創新。
TBDS的核心優勢體現在:
技術開放性,云主機,其存儲標準兼容開源 Hadoop 標準,使歷史構建在 Hadoop 上的大數據平臺可以平滑遷移;
支持多驅動接入、完美兼容社區標準,支持跨IDC、異構數據源聯合分析;
安全可靠,支持數據節點分布式部署,客戶可自助選多個備份。所有系統控制節點主從熱備,故障秒級切換,可用性99.999%。支持數據加密傳輸、存儲;
國際認證的系統安全加固技術保障系統級數據安全,自定義算法的數據加密,確保數據在傳輸、存儲過程中的安全管控;
基于角色的數據管控體系,支持列級粒度權限控制。全平臺單點登錄,統一策略管控中心。健全的訪問審計及預警模型,助力安全事件的事后追蹤和企業的定期安全審計;
性能卓越,高性能數據接入引擎,內部業務日接入十八萬億條數據;支持萬級維度、萬億數據的秒級多維分析,性能全面超越社區方案,數據處理能力提升30%左右;
簡單易用,支持一鍵式部署;支持數據接入、處理、存儲、分析、機器學習的拖拽式全鏈路大數據開發,開箱即用的數據治理工具集,數據開發者只需專注于業務開發。
現代社會新技術不斷發展,改變著人們生活方式的同時,也產生著大量的數據,數據已經成為像“石油”一樣的核心生產要素,同時又像“血液”一樣串聯起整個社會體的運轉。如何有效的匯聚、管理、應用數據,在保障個人隱私與數據安全的前提下釋放數據的社會、經濟、衍生價值成為了擺在政府和企業面前的一道難題。