1980年,directadmin授權(quán),美國(guó)學(xué)者Alvin Toffler在《第三次浪潮》中將大數(shù)據(jù)認(rèn)為是“第三次浪潮的華彩樂章”,但直到2009年,大數(shù)據(jù)技術(shù)才在IT產(chǎn)業(yè)中嶄露頭角。現(xiàn)在大數(shù)據(jù)已不是一個(gè)新鮮詞匯,但隨著5G、物聯(lián)網(wǎng)時(shí)代的到來,人工智能的迅速發(fā)展,數(shù)據(jù)增長(zhǎng)進(jìn)入了空前的發(fā)展階段,企業(yè)擁有更多數(shù)據(jù)資產(chǎn)的同時(shí),也對(duì)現(xiàn)有的大數(shù)據(jù)處理技術(shù)提出更高的需求。
目前無處不在的PC、物聯(lián)網(wǎng)、智能終端等設(shè)備就像開著的水管,產(chǎn)生的數(shù)據(jù)源源不斷。但因缺乏快速的數(shù)據(jù)處理技術(shù),海量數(shù)據(jù)就成了一個(gè)很難挖掘的礦井。
時(shí)至今日,大數(shù)據(jù)搜索引擎已經(jīng)成為企業(yè)大數(shù)據(jù)平臺(tái)的標(biāo)配。正如互聯(lián)網(wǎng)搜索引擎打開了互聯(lián)網(wǎng)價(jià)值之門的鑰匙,大數(shù)據(jù)搜索引擎也已經(jīng)成為了打開大數(shù)據(jù)價(jià)值之門的鑰匙。
速度為王,如何滿足大數(shù)據(jù)的1秒定律?
大數(shù)據(jù)的三個(gè)特征中,velocity(速度)最為關(guān)鍵,甚至有人提出了大數(shù)據(jù)的“1秒定律”,即龐大的數(shù)據(jù)量要在1秒內(nèi)處理完畢,才會(huì)對(duì)業(yè)務(wù)產(chǎn)生應(yīng)有的價(jià)值。
速度決定一切,這在時(shí)間要求嚴(yán)苛的公安等行業(yè)更為重要,甚至有可能關(guān)系到整體技戰(zhàn)法的改變。怎么能夠加快海量數(shù)據(jù)計(jì)算的速度?專家認(rèn)為,應(yīng)該針對(duì)不同類型的數(shù)據(jù)提供不同的處理算法,比如專門針對(duì)長(zhǎng)文本數(shù)據(jù)、音視頻等非結(jié)構(gòu)化數(shù)據(jù)等設(shè)計(jì)專用檢索、計(jì)算方法等,而這都是目前行業(yè)通用的搜索技術(shù)不能滿足的。
據(jù)悉,目前市場(chǎng)上市搜索引擎普遍為國(guó)外來源引擎Elastic Search技術(shù),缺乏安全保障,速度慢,資源要求高,也不支持非結(jié)構(gòu)化數(shù)據(jù)搜索,更沒有智能認(rèn)知能力,不能充分發(fā)揮大數(shù)據(jù)的價(jià)值。尤其一個(gè)不可忽視的問題是,與計(jì)算機(jī)的操作系統(tǒng)市場(chǎng)一樣,國(guó)內(nèi)絕大多數(shù)的大數(shù)據(jù)平臺(tái),包括政府、公安、大型企業(yè)在內(nèi)的核心部門,都是基于ES產(chǎn)品做上層應(yīng)用。近一段時(shí)間以來,由于搜索引擎導(dǎo)致的大規(guī)模數(shù)據(jù)泄露問題時(shí)有發(fā)生。
研發(fā)中國(guó)自主可控的安全、高效、智能的數(shù)據(jù)搜索及認(rèn)知引擎,促進(jìn)我國(guó)大數(shù)據(jù)產(chǎn)業(yè)向縱深發(fā)展,已經(jīng)成為一個(gè)越來越迫切的問題。
日前,Rich AI睿企科技正式對(duì)外發(fā)布又一款全自主智能產(chǎn)品 —— 睿企大數(shù)據(jù)搜索引擎。據(jù)悉,其搜索速度可達(dá)業(yè)界通用開源方案Elastic Search的10倍之多。
聚行業(yè)伙伴合作之力,拓睿企科技產(chǎn)業(yè)生態(tài)
全球已進(jìn)入以數(shù)據(jù)研究應(yīng)用為導(dǎo)向的“大時(shí)代”,大數(shù)據(jù)正成為一種生產(chǎn)資料、稀有資產(chǎn),全面融入社會(huì)生產(chǎn)生活。小到解決特定企業(yè)業(yè)務(wù)效率,大到政府實(shí)時(shí)洞察城市情況,大數(shù)據(jù)正深刻改變著世界的經(jīng)濟(jì)格局、利益格局、安全格局,全球正在同步上演一個(gè)大片:大數(shù)據(jù)的速度與激情。
過時(shí)的數(shù)據(jù)分析結(jié)論是沒有價(jià)值的, 時(shí)間對(duì)數(shù)據(jù)平臺(tái)來說永遠(yuǎn)是緊缺的。沒有好的性能,亞洲服務(wù)器租用,數(shù)據(jù)的價(jià)值會(huì)被打很大的折扣,這要求數(shù)據(jù)平臺(tái)要在數(shù)據(jù)查詢、統(tǒng)計(jì)處理、結(jié)果展現(xiàn)上,都必須具備良好的性能。
此外,國(guó)家對(duì)數(shù)據(jù)安全和數(shù)據(jù)隱私管理的要求也日益提升,如歐盟已出臺(tái)“GDPR”法案,對(duì)數(shù)據(jù)的保存和處理提出了新的要求。這就要求產(chǎn)業(yè)在進(jìn)行大數(shù)據(jù)處理技術(shù)選型時(shí)須以“數(shù)據(jù)安全性”作為第一考慮,其他需求在該準(zhǔn)則前必須讓步,這就要求相關(guān)核心技術(shù)必須自主可控,睿企自主大數(shù)據(jù)搜索引擎的出現(xiàn)給我國(guó)大數(shù)據(jù)產(chǎn)業(yè)提供了一個(gè)低成本、高可靠、強(qiáng)安全的大數(shù)據(jù)搜索解決方案。