浪潮信息采用3臺(tái)AS13000G7服務(wù)器搭建分布式存儲(chǔ)集群，搭載ICFS自研分布式文件系統(tǒng)，在3D-UNet和CosmoFlow兩大評(píng)測(cè)任務(wù)中 共獲得五項(xiàng)*佳成績(jī)。其中，在圖像分割3D-UNet多客戶端2評(píng)測(cè)任務(wù)中，服務(wù)于10個(gè)客戶端264個(gè)加速器，集群聚合帶寬達(dá)到360GB/s，單個(gè)存儲(chǔ)節(jié)點(diǎn)的帶寬高達(dá)120GB/s；在宇宙學(xué)分析CosmoFlow單客戶端2和多客戶端2評(píng)測(cè)任務(wù)中，分別提供了18 GB/s和52 GB/s的帶寬*佳成績(jī)。

本次測(cè)試，浪潮信息采用3臺(tái)AS13000G7服務(wù)器搭建分布式存儲(chǔ)集群，搭載ICFS自研分布式文件系統(tǒng)，在3D-UNet和CosmoFlow兩大評(píng)測(cè)任務(wù)中 共獲得五項(xiàng)*佳成績(jī)。其中，在圖像分割3D-UNet多客戶端2評(píng)測(cè)任務(wù)中，服務(wù)于10個(gè)客戶端264個(gè)加速器，集群聚合帶寬達(dá)到360GB/s，單個(gè)存儲(chǔ)節(jié)點(diǎn)的帶寬高達(dá)120GB/s；在宇宙學(xué)分析CosmoFlow單客戶端2和多客戶端2評(píng)測(cè)任務(wù)中，分別提供了18 GB/s和52 GB/s的帶寬*佳成績(jī)。

近年來(lái)，浪潮信息基于存算協(xié)同的理念，持續(xù)加大存儲(chǔ)研發(fā)投入，從整體架構(gòu)到各技術(shù)棧持續(xù)創(chuàng)新，優(yōu)化升級(jí)存力，提升了GPU算力整體性能表現(xiàn)，實(shí)現(xiàn)了模型訓(xùn)練數(shù)據(jù)處理的即時(shí)性，消除了GPU資源閑置（即“饑餓GPU”現(xiàn)象），提升大模型訓(xùn)練效率。

架構(gòu)層面，采用新數(shù)控分離架構(gòu)。數(shù)據(jù)面和控制面完全解耦，控制面實(shí)現(xiàn)數(shù)據(jù)管理和訪問(wèn)，數(shù)據(jù)面讀寫(xiě)操作直通到盤(pán)，達(dá)到120 GB/s的單存儲(chǔ)節(jié)點(diǎn)的高性能，單存儲(chǔ)節(jié)點(diǎn)支撐5臺(tái)8卡計(jì)算節(jié)點(diǎn)規(guī)模，同時(shí)計(jì)算集群GPU利用率90%以上；

軟件層面，通過(guò)多路并發(fā)透?jìng)骷夹g(shù)，減少I(mǎi)/O操作中頻繁的上下文切換，降低單次I/O時(shí)延50%，同時(shí)達(dá)到高并發(fā)下時(shí)延穩(wěn)定性。本次測(cè)試中1430個(gè)高并發(fā)讀線程支撐下，保證每個(gè)線程單次I/O的時(shí)延均在0.005秒，AI端到端訓(xùn)練中I/O占比低于10%。此外，通過(guò)元數(shù)據(jù)VRANK技術(shù)，達(dá)到單個(gè)元數(shù)據(jù)進(jìn)程多單元并發(fā)處理，提供高性能元數(shù)據(jù)服務(wù)；

軟硬協(xié)同層面，通過(guò)內(nèi)核親和力調(diào)度，I/O請(qǐng)求動(dòng)態(tài)調(diào)整，增強(qiáng)文件系統(tǒng)與計(jì)算節(jié)點(diǎn)親和性，確保負(fù)載均衡，將數(shù)據(jù)移動(dòng)與多核CPU之間的訪問(wèn)效率提升400%。