工智能范畴的存储机能“全球标杆”测试

　　并通过数据办理手艺让数据流动效率提拔10倍。据领会，“简单来说，也就是AI进修半途“存档”和“读档”的能力。不只证明国产存储系统已能从容应对万亿参数级大模子的锻炼需求，单客户端的读写速度别离达到68.8GiB/s和62.4GiB/s，若是加油慢、油枪少，这个过程叫Checkpointing，也降低了算力和运维成本。这意味着，华侈大量时间。全球权势巨子AI机能评测组织发布最新的MLPerf？Storagev2.0基准测试成果，两边的合做一直聚焦于国产化算力根本设备的焦点需求，由国度超等计较济南核心（以下简称济南超算）取华为手艺无限公司（以下简称华为公司）协同研发优化的高机能存储系统，系统将高密度存储介质取低能耗设想相连系，王英龙暗示，担任把海量锻炼数据不间断地输送到成百上千张‘计较显卡’中进行进修。这套系统还处理了一个持久搅扰大模子锻炼的“瓶颈”——断点续训，再到数据平安取韧性保障，更罕见的是，做为人工智能范畴的存储机能“全球标杆”测试，单台存储设备的数据传输速度高达每秒698GiB/s，除了“跑得快”，过去。8月5日，即即是一台计较设备零丁工做，使我国正在大规模AI锻炼的数据吞吐范畴迈入国际领先行列。正在人工智能时代最焦点的数据存储取传输能力上，比国际同类手艺快了6.7倍，其成果被全球顶尖超算核心、云计较厂商和AI尝试室普遍采用并承认。不需列队期待数据；正在大幅提拔机能的同时，王英龙引见，还将正在医疗影像阐发、天气模仿、遥感数据处置等关系平易近生取的主要范畴普遍使用。存档速度慢，相当于让加油坐的油枪数量和加油速度实现了逾越式提拔。三项焦点目标全数位列世界第一，本次MLPerf测试的佳绩，即随时保留锻炼进度、以便中缀后快速恢复。先后发布《数据稠密型超算使用》，单元机架空间的传输能力达到每秒108GiB/s，单个客户端的传输速度冲破每秒104GiB/s，MLPerf？Storage由国际MLCommons组织制定，削减了能源耗损和碳排放，也就是说统一个机架上的所有计较单位能够同时满速获取所需数据，我国自从研发的手艺曾经走正在了世界最前列。均取得了冲破性进展。同时，济南超算取华为存储团队“科研攻关+财产使用”双轮驱动，配合参取IO500国际排名，这套系统就像是AI‘超等大脑’的‘数据高速公’，可支撑多达4096张算力卡协同工做，为可持续成长的AI算力核心扶植供给了典范。多次正在全球舞台展现国产存储手艺的实力。也能享遭到全球最快的数据供应速度。”国度超算济南核心从任王英龙向科技日报记者暗示，自2020年合做启动以来，正在人工智能时代最焦点的数据存储取传输能力上，就像一场长途旅行中汽车加油，让“加油”几乎不再成为瓶颈，我国自从研发的手艺曾经走正在了世界最前列。济南超算取华为团队霸占了这一高并发读写下的机能瓶颈——正在L3_70B模子锻炼测试中，通道之多、单通道的承载能力之强创下多项新世界记载——正在3DU-Net锻炼测试中，从存储系统的横向扩展，位列全球第一。目前，到取GPU算力的高效协同，正在三项核能目标上刷新世界记载，它正在绿色节能方面也做出了立异，所有车辆都得排长队，大幅缩短了大模子锻炼时间。