高性能計算HPC,香港免備案主機,通過聚合大量的計算和存儲資源來解決復雜問題,在科學研究、基因測序、油氣勘探、芯片制造、氣象預測等場景已經獲得了廣泛的應用。歐洲粒子物理研究所(CERN)在HPC的幫助下,從5年間累積的海量監測數據中找到了“上帝粒子”存在的證據;汽車制造過程中,通過HPC來模擬汽車碰撞過程,無需真實的碰撞,不僅節省研發成本,也大幅縮短了研發周期。
過去,追求更高的算力一直是HPC產業的主旋律,從1976年至今,TOP1機器的算力增長了42.1億倍,站群服務器,比任何一個領域的技術發展速度都要快,多樣性算力的崛起更讓算力不再成為瓶頸。而HPC中的存力,逐步成為焦點。大數據、AI等技術逐步與HPC融合,讓數據價值能夠被更充分地挖掘,而被分析的數據也逐步從冷數據,變化為大量動態的、不斷變化的熱數據。HPC的重心開始從以計算為中心的計算密集型HPC,向以數據為中心的數據密集型HPC演進。存儲作為數據的核心承載者,成為了推動HPC產業發展的新動能。Hyperion 2020年HPC全球市場的預測顯示,從2019年到2024年,HPC存儲市場將保持12.1%的年化增速,遠高于計算的8.7%,也在一定程度上印證了這一趨勢。
IDC預測到2021年,全球HPC存儲的市場空間可達148億美金,其中新興的HPDA(high performance data analysis)和HPC-based AI場景將以年化17%、29.5%的增速快速增長。HPC與大數據結合產生的HPDA方案,當前主要應用在金融反欺詐、電子商務等領域,是一種典型的數據密集型業務。這些新的場景將為HPC存儲帶來更大挑戰,包括多應用跨協議高效訪問、同一個數據流中的混合負載處理能力、面對EB級數據的TCO優化方案,以及如何確保數據安全的問題。
產業變化催生了新的市場空間,面向HPDA業務的存儲已成為存儲領域最熱門的創新方向,也成為巨頭們角逐的新戰場。近年來,存儲領域的主流玩家Dell EMC、NetAPP、華為以及專攻HPC存儲的DDN等也在不斷加碼HPDA存儲方案,以期在新的變革浪潮中拔得頭籌。
Dell EMC的PowerScale(原Isilon)分布式文件存儲推出已久,除了在媒資等領域廣泛應用外,一直以來也是HPC存儲領域不可忽視的力量。近兩年針對HPDA的高速發展,Dell EMC敏銳的推出了新的全閃產品和專為數據分析和AI優化的全棧方案以提升客戶吸引力,并取得了良好的市場進展,據悉已經承載了超過1000PB的自動駕駛訓練數據。
原本主要聚焦EDA等小文件HPC市場的NetApp,近兩年來也覺察到HPC存儲的巨大市場潛力,投入大量資源全面重構主力產品,從而在新一輪HPC和HPDA競爭中,依托小文件AI場景的高性能,也取得了不錯的市場地位。
中國廠商中,華為也迅速瞄準HPC存儲新機會開始加大投入,并于2020年發布了全新的OceanStor Pacific系列高密全閃和高密大容量兩款產品,同時支持多協議互通以及混合負載。據了解,上海交大在暗物質探測中的使用顯示,其性能遠超預期。
作為專注HPC存儲領域的玩家,DDN曾經撬動了服務器并行文件系統+SAN存儲10億美金的市場。在HPDA大勢之下,DDN又積極擴展HPDA方案與生態,增加全閃存產品投入,成為HPDA市場的主力軍,也是英偉達的最佳合作伙伴之一。
此外,還有一批初創公司紛紛入局,如WekaIO依托分布式文件存儲已經成為了新一輪benchmark性能的佼佼者。
每一次產業變革機會窗的開啟,總是幾家歡喜幾家愁,一批公司的崛起也總會伴隨著另一批的隕落。相信誰都不想掉隊。面對HPC存儲的新機會,誰能笑到最后,不妨讓子彈再飛一會。