近日,中國電子工業標準化技術協會發布公告,批準T/CESA 1312-2024《高性能計算 分布式存儲系統技術要求》等十項團體標準(以下簡稱“團標”)。據悉,團標由國內知名頭部存儲廠商和使用單位共同發起并編撰,首次提出高性能計算分布式存儲系統技術要求,填補了高性能存儲標準的空白。

高性能計算呼吁統一標準

前有ChatGPT迅速刮起大模型熱,后有Sora推動AI應用持續深化。近年來,隨著人工智能瘋長,其背后的算力及高性能計算(High-performance computing, HPC)也被提到了前所未有的高度。

HPC用于高速運行各種計算和分析任務,通常涉及大量的數據運算及存儲。高性能存儲是HPC重要的組成部分,HPC應用中的計算能力必須與數據的存儲與調用相匹配。與此同時,分布式存儲憑借廣泛兼容、靈活擴展、多節點高可靠的特性,成為了HPC的“最佳拍檔”。

然而,由于分布式存儲架構各異,導致HPC應用中計算、存儲、網絡各模塊無法有效銜接和管理,而且建設和運營成本居高不下。因此,有必要制定規范的技術要求,在解決上述問題的同時,促進HPC產業鏈上下游技術和產品的融合,推動建立成熟完善的存儲生態系統。

據了解,此次公布的團標規定了高性能計算分布式存儲系統的技術要求(以下簡稱“技術要求”),包括基礎設施、集群軟件系統、安全管理、功能模塊、運維管理和綠色節能等方面的要求,適用于高性能計算分布式存儲系統的設計與部署。

“技術要求”成行業最強輔助

HPC可以廣泛的應用于科學研究、氣候模擬、基因測序、災害預報、能源勘探等眾多領域,對國民經濟建設和民生福祉都有不可替代的重大作用。而團標確定的“技術要求”無疑是對HPC應用的“神助攻”。

科研教育:分布式存儲系統可以提供高速、可靠的數據存儲和訪問能力,滿足科研領域對于海量數據處理和計算能力的需求。“技術要求”確立統一的基礎設施和功能模塊標準,為科研技術創新提供堅實保障,也進一步提高了科研效率和成果質量。

氣象預測:隨著氣象數據種類、數量日益繁多,范圍尺度越來越大,時空分辨率越來越高,在大數據實時存儲、實時處理、響應時間等方面提出了巨大挑戰。“技術要求”的確立,提高了氣象數據底座建設水平,為地方氣象局存儲系統建設提供了參考。

能源勘探:海量數據采集及分析的數量、質量、精度直接影響能源勘探決策方向,通過設計與部署高性能計算分布式存儲系統,從高速網絡、高效模塊、智能運維管理等方面保證能源行業對存儲I/O的需求,為勘探、開發、鉆井等業務應用提供信息服務與支持。

除此之外,HPC及高性能計算分布式存儲系統還可用于車輛設計、化學反應模擬、材料學等領域。“技術要求”的發布有助于提升分布式存儲的性能和技術標準,推動產業規模的健康發展,并進一步提高整個高性能計算領域的技術水平和服務質量。