GB/Z 251-2026 人工智能 智算集群异构人工智能加速器混合训练技术要求

ICS35020

CCSL.70

中华人民共和国国家标准化指导性技术文件

GB/Z251—2026

人工智能智算集群异构人工智能加速器

混合训练技术要求

Artificialintelligence—TechnicalrequirementsofheterogeneousAIaccelerating

processorcollaborativetraininginintelligentcomputingcluster

2026-08-27发布

国家市场监督管理总局发布

国家标准化管理委员会

GB/Z251—2026

目次

前言

…………………………Ⅲ

范围

1………………………1

规范性引用文件

2…………………………1

术语和定义

3………………1

缩略语

4……………………1

总体架构

5…………………2

统一异构算网协同管理调度平台功能要求

6……………3

统一异构人工智能加速器通信库功能与性能要求

7……………………4

统一异构人工智能加速器混合训练框架和拆分策略功能要求

8………4

异构人工智能加速器端到端混合训练大模型功能与性能要求

9………6

附录资料性模型类型和参数配置

A()…………………8

附录规范性混合训练效率计算公式

B()………………9

Ⅰ

GB/Z251—2026

前言

本文件为规范类指导性技术文件

。

本文件按照标准化工作导则第部分标准化文件的结构和起草规则的规定

GB/T1.1—2020《1:》

起草

。

请注意本文件的某些内容可能涉及专利本文件的发布机构不承担识别专利的责任

。。

本文件由全国信息技术标准化技术委员会提出并归口

(SAC/TC28)。

本文件起草单位上海壁仞科技股份有限公司中国电子技术标准化研究院上海智能算力科技有

:、、

限公司中国电信股份有限公司研究院中兴通讯股份有限公司北京电子数智科技有限责任公司中国

、、、、

电力科学研究院有限公司科华数据股份有限公司浦江国家实验室北京智源人工智能研究院中国移

、、、、

动通信有限公司研究院中移九天人工智能科技北京有限公司北京大学北京大学长沙计算与数字

、()、、

经济研究院中国科学院计算技术研究所中科寒武纪科技股份有限公司海光信息技术股份有限公司

、、、、

上海天数智芯半导体股份有限公司上海燧原科技股份有限公司平头哥上海半导体技术有限公司

、、()、

河南昆仑技术有限公司浪潮电子信息产业股份有限公司京东科技信息技术有限公司蚂蚁科技集团

、、、

股份有限公司杭州海康威视数字技术股份有限公司上海文鳐信息科技有限公司南京南瑞瑞腾科技

、、、

有限责任公司中国电子技术标准化研究院华东分院北京智芯微电子科技有限公司中移物联网有限

、、、

公司浙江大华技术股份有限公司天翼云科技有限公司浪潮云信息技术股份公司山东省计算中心

、、、、

国家超级计算济南中心

()。

本文件主要起草人徐洋丁瑞全张琦李志邢冯杨雨泽孙兆群秦甘尧黄现翠孙梦宇黄志兰

:、、、、、、、、、、、

黄程王昱苏郭文高昆仑王岳全康王辉钟普敖玉龙刘颖黄蕾秦日臻杨超李喆涵乔欢

、、、、、、、、、、、、、、、

王煜炜梁帆黄岩哲段爱民杨朋霖瞿昊旻姚涛王思善张艺伯李卓群刘劲楠邸贺亮韩冬

、、、、、、、、、、、、、

郭智慧彭剑峰仲凯韬石超王绍飞严小格董月文刘勇郑哲孔栋丁源孔维生丁立戈郑佳佳

、、、、、、、、、、、、、、

逄锦山

。

Ⅲ

GB/Z251—2026

人工智能智算集群异构人工智能加速器

混合训练技术要求

1范围

本文件确立了智算集群异构人工智能加速器混合训练的总体架构规定了混合训练的功能和性能

,

要求

。

本文件适用于由不同厂商人工智能加速器组建的异构智算集群同一厂商不同型号的人工智能加

。

速器组建的异构智算集群参考使用

。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款其中注日期的引用文

。,

件仅该日期对应的版本适用于本文件不注日期的引用文件其最新版本包括所有的修改单适用于

,;,()

本文件

。

信息技术人工智能术语

GB/T41867—2022

3术语和定义

界定的以及下列术语和定义适用于本文件

GB/T41867—2022。

31

.

人工智能加速器artificialintelligenceacceleratingprocessor

人工智能加速芯片

artificialintelligenceacceleratingchip

具备适配人工智能算法的运算微架构能够完成人工智能应用运算处理的集成电路

,。

注在本文件中在不引起误解的语境下将人工智能加速器简称为加速器

:,,。

32

.

异构人工智能加速器heterogeneousartificialintelligenceacceleratingprocessor

异构AI加速器heterogeneousAIacceleratingprocessor

不同厂商的人工智能加速器

。

33

.

异构人工智能加速器混合训练heterogeneousAIacceleratingprocessorcollaborativetraining

在异构智能计算集群中使用异构人工智能加速器协同完成同一个模型的训练任务

,。

4缩略语

下列缩略语适用于本文件

。

人工智能

AI:(ArtificialIntelligence)

数据并行

DP:(DataParallel)

专家并行

EP:(ExpertParallel)

直接访问远程内存

GDR:GPU(GPUDirectRDMA)

1