近日,中國電子工業(yè)標(biāo)準(zhǔn)化技術(shù)協(xié)會發(fā)布公告,批準(zhǔn)T/CESA 1312-2024《高性能計算 分布式存儲系統(tǒng)技術(shù)要求》等十項(xiàng)團(tuán)體標(biāo)準(zhǔn)(以下簡稱“團(tuán)標(biāo)”)。據(jù)悉,團(tuán)標(biāo)由國內(nèi)知名頭部存儲廠商和使用單位共同發(fā)起并編撰,首次提出高性能計算分布式存儲系統(tǒng)技術(shù)要求,填補(bǔ)了高性能存儲標(biāo)準(zhǔn)的空白。

高性能計算呼吁統(tǒng)一標(biāo)準(zhǔn)

前有ChatGPT迅速刮起大模型熱,后有Sora推動AI應(yīng)用持續(xù)深化。近年來,隨著人工智能瘋長,其背后的算力及高性能計算(High-performance computing, HPC)也被提到了前所未有的高度。

HPC用于高速運(yùn)行各種計算和分析任務(wù),通常涉及大量的數(shù)據(jù)運(yùn)算及存儲。高性能存儲是HPC重要的組成部分,HPC應(yīng)用中的計算能力必須與數(shù)據(jù)的存儲與調(diào)用相匹配。與此同時,分布式存儲憑借廣泛兼容、靈活擴(kuò)展、多節(jié)點(diǎn)高可靠的特性,成為了HPC的“最佳拍檔”。

然而,由于分布式存儲架構(gòu)各異,導(dǎo)致HPC應(yīng)用中計算、存儲、網(wǎng)絡(luò)各模塊無法有效銜接和管理,而且建設(shè)和運(yùn)營成本居高不下。因此,有必要制定規(guī)范的技術(shù)要求,在解決上述問題的同時,促進(jìn)HPC產(chǎn)業(yè)鏈上下游技術(shù)和產(chǎn)品的融合,推動建立成熟完善的存儲生態(tài)系統(tǒng)。

據(jù)了解,此次公布的團(tuán)標(biāo)規(guī)定了高性能計算分布式存儲系統(tǒng)的技術(shù)要求(以下簡稱“技術(shù)要求”),包括基礎(chǔ)設(shè)施、集群軟件系統(tǒng)、安全管理、功能模塊、運(yùn)維管理和綠色節(jié)能等方面的要求,適用于高性能計算分布式存儲系統(tǒng)的設(shè)計與部署。

“技術(shù)要求”成行業(yè)最強(qiáng)輔助

HPC可以廣泛的應(yīng)用于科學(xué)研究、氣候模擬、基因測序、災(zāi)害預(yù)報、能源勘探等眾多領(lǐng)域,對國民經(jīng)濟(jì)建設(shè)和民生福祉都有不可替代的重大作用。而團(tuán)標(biāo)確定的“技術(shù)要求”無疑是對HPC應(yīng)用的“神助攻”。

科研教育:分布式存儲系統(tǒng)可以提供高速、可靠的數(shù)據(jù)存儲和訪問能力,滿足科研領(lǐng)域?qū)τ诤Ａ繑?shù)據(jù)處理和計算能力的需求。“技術(shù)要求”確立統(tǒng)一的基礎(chǔ)設(shè)施和功能模塊標(biāo)準(zhǔn),為科研技術(shù)創(chuàng)新提供堅實(shí)保障,也進(jìn)一步提高了科研效率和成果質(zhì)量。

氣象預(yù)測:隨著氣象數(shù)據(jù)種類、數(shù)量日益繁多,范圍尺度越來越大,時空分辨率越來越高,在大數(shù)據(jù)實(shí)時存儲、實(shí)時處理、響應(yīng)時間等方面提出了巨大挑戰(zhàn)。“技術(shù)要求”的確立,提高了氣象數(shù)據(jù)底座建設(shè)水平,為地方氣象局存儲系統(tǒng)建設(shè)提供了參考。

能源勘探:海量數(shù)據(jù)采集及分析的數(shù)量、質(zhì)量、精度直接影響能源勘探?jīng)Q策方向,通過設(shè)計與部署高性能計算分布式存儲系統(tǒng),從高速網(wǎng)絡(luò)、高效模塊、智能運(yùn)維管理等方面保證能源行業(yè)對存儲I/O的需求,為勘探、開發(fā)、鉆井等業(yè)務(wù)應(yīng)用提供信息服務(wù)與支持。

除此之外,HPC及高性能計算分布式存儲系統(tǒng)還可用于車輛設(shè)計、化學(xué)反應(yīng)模擬、材料學(xué)等領(lǐng)域。“技術(shù)要求”的發(fā)布有助于提升分布式存儲的性能和技術(shù)標(biāo)準(zhǔn),推動產(chǎn)業(yè)規(guī)模的健康發(fā)展,并進(jìn)一步提高整個高性能計算領(lǐng)域的技術(shù)水平和服務(wù)質(zhì)量。