GB/T 38673-2020 信息技术 大数据 大数据系统基本要求

３５．２４０

７

中华人民共和国国家标准

—

３８６７３２０２０

信息技术大数据

大数据系统基本要求

２０２００４２８发布

国家市场监督管理总局

发布

国家标准化管理委员会

目次

前言…………………………Ⅲ

１范围………………………１

２规范性引用文件…………………………１

３术语和定义………………１

４缩略语……………………１

５大数据系统框架…………………………２

６功能要求…………………３

６．１数据收集模块………………………３

６．２数据预处理模块……………………３

６．３数据存储模块………………………３

６．４数据处理模块………………………４

６．５数据分析模块………………………５

６．６数据可视化模块……………………６

６．７数据访问模块………………………６

６．８资源管理模块………………………６

６．９系统管理模块………………………６

７非功能要求………………６

７．１可靠性要求…………………………６

７．２兼容性要求…………………………７

７．３安全性要求…………………………７

７．４可扩展性要求………………………８

７．５维护性要求…………………………８

７．６易用性要求…………………………８

Ⅰ

前言

本标准按照／—给出的规则起草。

ＧＢＴ１．１２００９

请注意本文件的某些内容可能涉及专利本文件的发布机构不承担识别这些专利的责任

Ⅲ

／—

犌犅犜３８６７３２０２０

信息技术大数据

大数据系统基本要求

１范围

本标准规定了大数据系统的功能要求和非功能要求。

、、。

本标准适用于各类大数据系统要求的设计选型验收和检测

２规范性引用文件

下列文件对于本文件的应用是必不可少的凡是注日期的引用文件仅注日期的版本适用于本文

。，

件凡是不注日期的引用文件其最新版本包括所有的修改单适用于本文件

。，（）。

／—信息技术大数据术语

ＧＢＴ３５２９５２０１７

／—信息技术大数据技术参考模型

ＧＢＴ３５５８９２０１７

３术语和定义

／—。，

ＧＢＴ３５２９５２０１７界定的以及下列术语和定义适用于本文件为了便于使用以下重复列出了

／—中的某些术语和定义。

ＧＢＴ３５２９５２０１７

３．１

大数据系统犫犻犱犪狋犪狊狊狋犲犿

犵狔

实现大数据参考体系结构的全部或部分功能的系统。

／—，］

［定义

ＧＢＴ３５２９５２０１７２．１．１４

３．２

分布式计算犱犻狊狋狉犻犫狌狋犲犱犮狅犿狌狋犻狀

狆犵

一种覆盖存储层和处理层的用于实现多类型程序设计算法模型的计算模式

、。

注：分布式计算结果通常加载到分析环境。ＭａＲｅｄｕｃｅ是数据分布式计算中默认的处理构件。

ｐ

［／—，］

ＧＢＴ３５２９５２０１７定义２．１．２２

３．３

集群犮犾狌狊狋犲狉

一组相互独立的通过高速网络互联的计算机或服务器

、。

３．４

租户狋犲狀犪狀狋

对一组物理和虚拟资源进行共享访问的一个或多个云服务用户。

４缩略语

下列缩略语适用于本文件。

１

／—

犌犅犜３８６７３２０２０

：（）

ＡＰＩ应用程序接口ＡｌｉｃａｔｉｏｎＰｒｏｒａｍｍｉｎＩｎｔｅｒｆａｃｅ

ｐｐｇｇ

：（）

ＣＰＵ中央处理器ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎＵｎｉｔ

ｇ

：（）

ＤＡＧ有向无环图ＤｉｒｅｃｔｅｄＡｃｃｌｉｃＧｒａｈ

ｙｐ

：（）

ＯＬＡＰ联机分析处理ＯｎＬｉｎｅＡｎａｌｔｉｃａｌＰｒｏｃｅｓｓｉｎ

ｙｇ

：（）

ＲＥＳＴ表述性状态转移ＲｅｒｅｓｅｎｔａｔｉｏｎａｌＳｔａｔｅＴｒａｎｓｆｅｒ

ｐ

：（）

ＳＱＬ结构化查询语言ＳｔｒｕｃｔｕｒｅｄＱｕｅｒＬａｎｕａｅ

ｙｇｇ

５大数据系统框架

定义了大数据参考架构如图所示大数据参考模型是一个通用的大数据

／—，。

ＧＢＴ３５５８９２０１７１

系统概念模型它表示了通用的与技术无关的大数据系统的逻辑功能构件及构件之间的互操作接口

，、，

作为开发各种具体类型大数据应用系统架构的通用技术参考框架。

图大数据参考架构

１

本标准参考大数据参考架构逻辑功能构件划分将大数据系统划分为数据收集数据预处理数据

，、、

存储、、、、、、。

数据处理数据分析数据访问数据可视化资源管理系统管理个模块大数据系统框架如

９

图２所示。

２

／—

犌