行業(yè)正在尋求自動化流程以提高效率并增強最終用戶體驗。為此,各行業(yè)正在尋求人工智能和物聯(lián)網(wǎng)等技術(shù)。許多行業(yè)現(xiàn)在已經(jīng)在試驗人工智能,而物聯(lián)網(wǎng)是一個相對較舊的概念。換句話說,物聯(lián)網(wǎng)已經(jīng)成為更多行業(yè)的一部分。雖然自動化以及人工智能和物聯(lián)網(wǎng)的集成促進了多個工業(yè)流程,但它們也產(chǎn)生了大數(shù)據(jù)和大數(shù)據(jù)湖。企業(yè)可以通過人工智能和物聯(lián)網(wǎng)獲得多少價值?這取決于公司如何處理這些數(shù)據(jù)湖。在本文中,我們探討了全球人工智能和物聯(lián)網(wǎng)的采用率,我們在數(shù)據(jù)生成方面討論了什么,以及企業(yè)需要什么樣的存儲解決方案來有效地存儲、管理和控制人工智能和物聯(lián)網(wǎng)的大數(shù)據(jù)。
全球組織整合人工智能和物聯(lián)網(wǎng)
人工智能 (AI) 正在幫助組織和行業(yè)實現(xiàn)流程自動化和分散化,同時消除人為錯誤。人工智能能夠獨立工作并幾乎沒有錯誤地完成任務(wù),這使得它對所有行業(yè)都具有吸引力。
許多行業(yè)已經(jīng)在以一種或另一種方式整合人工智能,許多行業(yè)正計劃效仿。
物聯(lián)網(wǎng) (IoT) 是一個比人工智能稍早的概念,對于組織和行業(yè)同樣重要。物聯(lián)網(wǎng)使組織內(nèi)的不同系統(tǒng)能夠相互通信以執(zhí)行特定任務(wù),為智能網(wǎng)絡(luò)、辦公室和智能城市奠定了基礎(chǔ)。
人工智能和物聯(lián)網(wǎng)都在當(dāng)今的數(shù)字商業(yè)模式中找到了獨特且不可替代的位置。此外,世界各地的企業(yè)都在投資這兩種技術(shù)。
AI Adoption Worldwide
Gartner 的調(diào)查顯示,37% 的組織已經(jīng)以某種形式實施了人工智能。
考慮到人工智能的好處和應(yīng)用,這種采用率很可能在未來繼續(xù)增長。
全球物聯(lián)網(wǎng)采用
同樣,2018 年物聯(lián)網(wǎng)支出估計約為151B 美元。此外,據(jù) IDC 稱,預(yù)計 2022 年物聯(lián)網(wǎng)支出將達到 1.2T 美元。可以肯定地說,來自各行各業(yè)的組織和國內(nèi)用戶都有望積極投資物聯(lián)網(wǎng)。確實,人工智能和物聯(lián)網(wǎng)的集成使組織和最終用戶的生活變得輕松。然而,與所有偉大的事物一樣,有一個問題:人工智能和物聯(lián)網(wǎng)生成大數(shù)據(jù)和大數(shù)據(jù)湖。
人工智能和物聯(lián)網(wǎng)技術(shù)的數(shù)字足跡:大數(shù)據(jù)和大數(shù)據(jù)湖
人工智能依賴于數(shù)據(jù)處理、分析和使用。物聯(lián)網(wǎng)為了完成任務(wù)并與連接的設(shè)備進行通信,會生成大量數(shù)據(jù)。
這兩種技術(shù)都依賴于數(shù)據(jù)并生成許多數(shù)據(jù),這些數(shù)據(jù)組合成難以管理且?guī)缀鯚o法控制的巨大復(fù)雜池。這使得組織很難充分利用它們。
無論應(yīng)用程序/用例如何,AI 的效率與其所提供的數(shù)據(jù)及其流程的數(shù)量和質(zhì)量一樣高。任務(wù)的復(fù)雜性越高,需要存儲和處理的數(shù)據(jù)就越多,數(shù)據(jù)湖也就越大。
這可能是一個不利因素,但這里的一線希望是,由于這種能力,人工智能已經(jīng)為醫(yī)療保健、金融、研究和許多其他行業(yè)做出了貢獻。因此,這些廣泛的數(shù)據(jù)位是“必要的邪惡”。
物聯(lián)網(wǎng)產(chǎn)生多少數(shù)據(jù)?
物聯(lián)網(wǎng)依賴于連接的設(shè)備數(shù)量和分配任務(wù)的復(fù)雜性。這在原理上類似于人工智能。思科估計,到 2019 年底,物聯(lián)網(wǎng)每年將產(chǎn)生超過 500ZB (Zettabytes) 的數(shù)據(jù)。根據(jù)這些信息,很明顯,希望集成或已經(jīng)使用 AI 和 IoT 的組織會發(fā)現(xiàn)自己擁有大型數(shù)據(jù)湖。反過來,這些數(shù)據(jù)湖將需要能夠有效存儲、保留、管理和控制它們的存儲介質(zhì)。這意味著傳統(tǒng)的存儲基礎(chǔ)設(shè)施不會削減它。
如何有效處理大數(shù)據(jù)和大數(shù)據(jù)湖?
大量數(shù)據(jù)需要高度可擴展、強大且冗余的存儲基礎(chǔ)架構(gòu)。為了有效地存儲、保留、管理和控制大型數(shù)據(jù)湖,數(shù)據(jù)存儲解決方案必須具有以下屬性:
- 高可擴展性
- 高可用性和冗余
- 混合存儲 - 本地云原生設(shè)備
- 簡化管理
- 自動存儲分層
讓我們簡要介紹一下這些屬性:
高可擴展性
我們談?wù)摰氖侨斯ぶ悄芎臀锫?lián)網(wǎng)的結(jié)合;因此,這轉(zhuǎn)化為 GB 的數(shù)據(jù),這些數(shù)據(jù)增長為 TB,然后是 PB。指定的存儲解決方案必須具有同等的可擴展性。它應(yīng)該能夠從 TB 開始,并且應(yīng)該可以擴展到 PB。即使需要增加更多性能和存儲容量,大多數(shù)組織也無法容忍中斷。因此,這種擴展能力需要是動態(tài)的和無中斷的。
高可用性和冗余
如前所述,不可用或中斷不是大多數(shù)行業(yè)的選擇。
醫(yī)療保健服務(wù)提供商不能等待數(shù)據(jù)的可用性,這可能意味著某人的生死。同樣,最終用戶現(xiàn)在正在養(yǎng)成快速處理和高性能的習(xí)慣。企業(yè)必須以類似方式發(fā)展。這就是為什么高可用性和冗余至關(guān)重要。
存儲解決方案需要是冗余的,以便它具有容錯性。即使發(fā)生硬件故障,它也應(yīng)該能夠繼續(xù)運行。換句話說,存儲系統(tǒng)不應(yīng)該有單點故障。同樣,它不應(yīng)該依賴一個電源。它應(yīng)該有冗余電源。它還應(yīng)該具有RAID 和擦除編碼,以便即使在驅(qū)動器發(fā)生故障的情況下,數(shù)據(jù)仍然可以無縫使用。
混合存儲——本地云原生數(shù)據(jù)存儲
“云”不僅僅是一個流行詞,企業(yè)也不會僅僅因為它的便利性而轉(zhuǎn)向云。云在塑造數(shù)據(jù)存儲方面發(fā)揮著至關(guān)重要的作用,使其更適合大數(shù)據(jù)和大數(shù)據(jù)湖。云具有可擴展性、成本效益,并有助于減輕本地存儲基礎(chǔ)架構(gòu)的負載。更不用說,云原生設(shè)備提供了更大的可訪問性和數(shù)據(jù)移動性。這反過來又與大型企業(yè)設(shè)置和研究環(huán)境相得益彰。云也有利于存檔目的。隨著數(shù)據(jù)變舊,它會繼續(xù)消耗空間,同時降低價值。通過將這些舊數(shù)據(jù)移動到云中,IT 環(huán)境可以將高端存儲基礎(chǔ)設(shè)施專用于頻繁訪問(熱層)數(shù)據(jù)。從而提高存儲性能并優(yōu)化數(shù)據(jù)存儲。
簡化管理
即使有“正確的”存儲基礎(chǔ)設(shè)施和正確的功能,如果它不容易管理,它也幾乎沒有意義。如果您的 IT 人員在管理和控制大量數(shù)據(jù)方面遇到困難,并且需要花費時間,需要花費大量培訓(xùn)時間并且仍然效率低下,那么它會產(chǎn)生相反的效果。這就是簡化管理的重要性。數(shù)據(jù)存儲,特別是對于大型數(shù)據(jù)池,必須易于管理。管理取決于您選擇使用的軟件。有幾種第三方軟件使企業(yè)能夠使用單個管理界面來管理所有存儲資源。
自動存儲分層
自動存儲分層有助于簡化管理,但值得單獨提及。理想的存儲基礎(chǔ)架構(gòu)應(yīng)該能夠支持混合安裝,例如企業(yè)硬盤 (SAS) 和閃存 (SSD) 的組合,以及云的集成。這會在單個存儲解決方案中創(chuàng)建具有各種使用情況的不同存儲層。通過設(shè)置自動存儲分層,您可以在存儲層之間移動數(shù)據(jù)并優(yōu)化數(shù)據(jù)存儲,同時降低成本影響。自動數(shù)據(jù)傳輸提高了數(shù)據(jù)存儲的效率,并幫助 IT 管理員專注于其他任務(wù)。這就是為什么對于希望使用人工智能和物聯(lián)網(wǎng)技術(shù)的大數(shù)據(jù)的組織來說,自動化存儲分層是必不可少的。組織還可以做些什么來為大數(shù)據(jù)和大型數(shù)據(jù)湖準備數(shù)據(jù)中心?我們已經(jīng)撰寫了有關(guān)數(shù)據(jù)中心設(shè)計的五種最佳實踐來幫助實現(xiàn)這一點。
結(jié)論
人工智能和物聯(lián)網(wǎng)是許多行業(yè)難題的重要組成部分,也是前進的一種方式。由人工智能和物聯(lián)網(wǎng)產(chǎn)生的數(shù)據(jù)湖需要專用、高性能、冗余和可擴展的數(shù)據(jù)存儲解決方案。這些數(shù)據(jù)存儲解決方案必須強大且易于管理,這樣它們才能補充運營并提高生產(chǎn)力和效率,這一點至關(guān)重要。行業(yè)推進人工智能和物聯(lián)網(wǎng)的唯一途徑是為兩種技術(shù)產(chǎn)生的大數(shù)據(jù)選擇最佳的存儲解決方案。