NEWS
新聞動(dòng)態(tài)
華為AI存儲(chǔ)榮獲2024年MLPERF? AI基準(zhǔn)測(cè)試性能全球第一
發(fā)布時(shí)間：
2024-09-29
全球最權(quán)威、影響力最廣的AI基準(zhǔn)測(cè)試MLPERF發(fā)布了Storage V1.0 AI基準(zhǔn)測(cè)試結(jié)果，華為OceanStor A800全新AI存儲(chǔ)在全球廠商中脫穎而出，總性能、每節(jié)點(diǎn)性能、每U性能均是全球第一。
[中國(guó)，深圳，2024年9月26日] 全球最權(quán)威、影響力最廣的AI基準(zhǔn)測(cè)試MLPERF發(fā)布了Storage V1.0 AI基準(zhǔn)測(cè)試結(jié)果，華為OceanStor A800全新AI存儲(chǔ)在全球廠商中脫穎而出，總性能、每節(jié)點(diǎn)性能、每U性能均是全球第一。
MLPerf benchmark是一個(gè)衡量人工智能硬件、軟件和服務(wù)性能的標(biāo)準(zhǔn)化基礎(chǔ)測(cè)試平臺(tái)，它由圖靈獎(jiǎng)得主大衛(wèi)•帕特森（David Patterson）聯(lián)合谷歌、斯坦福、哈佛大學(xué)等頂 尖企業(yè)和學(xué)術(shù)機(jī)構(gòu)成立，是權(quán)威性最大、影響力最廣的國(guó)際AI性能基準(zhǔn)測(cè)試。為了緊跟行業(yè)前沿，MLPERF每年發(fā)布基準(zhǔn)測(cè)試數(shù)據(jù)，獲得全球廣泛認(rèn)可。其中，3D U-Net工作負(fù)載測(cè)試匹配業(yè)界多模態(tài)大模型趨勢(shì)，對(duì)存儲(chǔ)帶寬要求最高，能夠更全面、更準(zhǔn)確地反映存儲(chǔ)在大規(guī)模AI集群的性能表現(xiàn)。
本次存儲(chǔ)性能測(cè)試共有業(yè)界主流的13廠商參與，通過(guò)運(yùn)行一個(gè)分布式訓(xùn)練測(cè)試程序，模擬GPU計(jì)算過(guò)程，最大程度還原AI服務(wù)器對(duì)存儲(chǔ)系統(tǒng)的訪問(wèn)模型。以模擬AI存儲(chǔ)系統(tǒng)能夠支撐的最大GPU數(shù)量，來(lái)評(píng)估存儲(chǔ)系統(tǒng)測(cè)試性能表現(xiàn)。其中3D U-Net工作負(fù)載每FLOPS算力所需存儲(chǔ)帶寬最高，且數(shù)據(jù)需要從存儲(chǔ)節(jié)點(diǎn)讀取，不允許提前在主機(jī)上緩存，能夠真實(shí)體現(xiàn)存儲(chǔ)系統(tǒng)性能，實(shí)際體現(xiàn)大模型存儲(chǔ)體驗(yàn)。
本次獲得存儲(chǔ)性能測(cè)試全球第一的AI存儲(chǔ)——華為OceanStor A800，通過(guò)單臺(tái)設(shè)備成功滿(mǎn)足了255張GPU模擬訓(xùn)練的數(shù)據(jù)吞吐需求，GPU利用率保持90%以上，單框穩(wěn)定帶寬高達(dá)679 GB/s，是傳統(tǒng)存儲(chǔ)性能的10倍。平均每節(jié)點(diǎn)提供高達(dá)340GB/s帶寬，每U提供高達(dá)85GB/s的帶寬，分別是第二名2.88倍和1.44倍，體現(xiàn)了OceanStor A800全面領(lǐng)先的競(jìng)爭(zhēng)力。同時(shí)可以通過(guò)OceanStor A800大規(guī)模橫向擴(kuò)展提供百TB級(jí)帶寬，checkpoint讀寫(xiě)時(shí)間從10分鐘縮短至秒級(jí)，斷點(diǎn)續(xù)訓(xùn)時(shí)間小于15分鐘，極大減少GPU等待，端到端算力利用率提升30%+，全面提升大模型訓(xùn)練效率。首次參與即在MLPerf Storage V1.0基準(zhǔn)測(cè)試性能榜單登頂，這一成就不僅彰顯了華為數(shù)據(jù)存儲(chǔ)技術(shù)的卓越實(shí)力，更標(biāo)志著華為數(shù)據(jù)存儲(chǔ)在業(yè)界又達(dá)成一個(gè)關(guān)鍵里程碑。
華為數(shù)據(jù)存儲(chǔ)深耕細(xì)作，持續(xù)創(chuàng)新，推出全新OceanStor A系列AI存儲(chǔ)。面向AI場(chǎng)景混合負(fù)載，基于全新硬件，打造架構(gòu)領(lǐng)先的存儲(chǔ)系統(tǒng)，具備卓越性能、EB級(jí)彈性擴(kuò)展、推理長(zhǎng)記憶等能力，全面加速AI大模型訓(xùn)推業(yè)務(wù)。
面向未來(lái)，華為AI存儲(chǔ)在AI大模型領(lǐng)域?qū)⒊掷m(xù)深耕，不斷突破性能極限，駕馭AI大模型數(shù)據(jù)浪潮，引領(lǐng)數(shù)據(jù)未來(lái)。
相關(guān)新聞
掃描訪問(wèn)手機(jī)版