RB/T 025.3-2019 认证认可支撑贸易便利化信息技术与服务规范 第3部分：数据质量控制

ICS03.120.20

A00

中华人民共和国认证认可行业标准

/—

RBT025.32019

认证认可支撑贸易便利化信息技术与

:

服务规范第部分数据质量控制

3

Secificationsforinformationtechnoloandservicesofcertificationand

pgy

—:

accreditationsuortintradefacilitationPart3Dataualitcontrol

ppgqy

2019-06-26发布2019-07-01实施

中国国家认证认可监督管理委员会发布

/—

RBT025.32019

目次

前言…………………………Ⅲ

引言…………………………Ⅳ

1范围………………………1

2规范性引用文件…………………………1

3术语和定义………………1

4数据质量控制原则………………………1

4.1规范性………………1

4.2完整性………………2

4.3准确性………………2

4.4协调性………………2

4.5及时性………………2

5数据质量控制规则………………………2

5.1数据校验规则………………………2

5.2数据质量分级规则…………………2

5.3数据核查规则………………………2

6数据质量控制要求………………………2

6.1总则…………………2

6.2数据规范……………2

6.3数据校验……………3

6.4数据分级……………3

6.5数据整合……………3

6.6数据核查……………3

()………………

附录资料性附录数据质量控制流程

A5

()……………………

附录资料性附录数据规范示例

B6

参考文献………………………9

Ⅰ

/—

RBT025.32019

前言

/《》:

认证认可支撑贸易便利化信息技术与服务规范共分为个部分

RBT0255

———:;

第部分基本规则

1

———:;

第部分数据众筹

2

———:;

第部分数据质量控制

3

———:;

第部分信息共享

4

———:。

第部分信息服务

5

本部分是/的第部分。

RBT0253

本标准按照/—给出的规则起草。

GBT1.12009

本标准由国家认证认可监督管理委员会提出并归口。

:、、

本标准起草单位国家市场监管总局信息中心国家市场监管总局认证认可技术研究中心深圳市

、、、

标准技术研究院江苏检验检疫质量研究中心中国合格评定国家认可中心新疆维吾尔自治区产品质

量监督检验研究院。

:、、、、、、、、、、、

本标准主要起草人宋琪李锋朱烨张涛李卫华吴海文尹凤军温利峰吕恺文孙焰吴随录

、。

姚远吴斌

Ⅲ

/—

RBT025.32019

引言

,、

认证认可作为国际贸易便利化通行的技术手段对简化协调贸易程序加速要素的跨境流通具有重

要的推动作用。

,

本系列标准给出了以认证认可信息平台为技术载体以众筹数据为主要认证认可数据来源的贸易

,、、,

便利化信息技术与服务的有关要求提出了数据众筹数据质量控制信息共享和信息服务规范有利于

、、,

政府企业个人等贸易相关方持续获得认证认可信息在便利贸易的同时有效降低了平台运行和维护

成本。

、,,,

通过数据质量控制原则数据质量控制规则和数据质量控制要求对数据进行清洗改善数据质量

,。

实现众筹来源的认证认可数据由数据到信息的转换为贸易便利化信息共享和信息服务提供技术保障

Ⅳ

/—

RBT025.32019

认证认可支撑贸易便利化信息技术与

:

服务规范第部分数据质量控制

3

1范围

/的本部分规定了认证认可支撑贸易便利化信息技术与服务规范中数据质量控制的原

RBT025

,、、。

则以及数据校验数据质量分级数据核查等要求

本部分适用于以众筹数据为主要来源的认证认可贸易便利化信息共享和服务活动中的数据质量

控制。

2规范性引用文件

。,

下列文件对于本文件的应用是必不可少的凡是注日期的引用文件仅注日期的版本适用于本文

。,()。

件凡是不注日期的引用文件其最新版本包括所有的修改单适用于本文件

/—:

认证认可支撑贸易便利化信息技术与服务规范第部分基本规则

RBT025.120191

3术语和定义

/。,

RBT025.1界定的以及下列术语和定义适用于本文件为了便于使用以下重复列出了

/中的一些术语和定义。

RBT025.1

3.1

数据质量控制dataualitcontrol

qy

、、,。

通过监测数据的存贮访问执行和对数据结构的优化以满足数据质量要求的控制过程

[/—,]

RBT0252019.13.11

3.2

数据校验dataverification

、,

数据在接收传输和存储过程中将数据与预先设置好的规则进行比对并给出判定结果的一种验证

操作。

3.3

数据质量分级dataualitradin

qygg

,。

根据数据的校验结果对数据质量进行分类以便于后续对数据的治理和应用

3.4

数据核查datacheck

定期对已接收入库的数据质量开展再检查的活动。

4数据质量控制原则

4.1规范性

填报的数据应符合预设的格式要求。

1

/—

RBT025.32019

4.2完整性

数据内容应无缺项。

4.3准确性

、,。

数据应是对其代表对象的客观真实的描述其数值应符合客观逻辑

4.4协调性

数据应与平台中已有的数据无矛盾。

4.5及时性

数据质量控制活动应保证将众筹数据及时转换成信息。

5数据质量控制规则

5.1数据校验规则

5.1.1应制定符合贸易便利化数据众筹需求的数据校验规则。

5.1.2应细化到每一个数据字段上。

5.1.3应利用信息技术手段自动化实现数据校验活动。

5.1.4校验活动结束后应及时反馈校验结果。

5.2数据质量分级规则

5.2.1应对进入平台的所有众筹数据执行数据质量分级。

5.2.2数据质量级别应根据评定结果动态调整。

5.3数据核查规则

5.3.1应根据数据质量分级结果对进入平台的众筹数据执行数据核查。

5.3.2核查工作应利用信息技术手段定期开展。

5.3.3核查结果应系统记录并反馈给数据提供方给予及时改正。

6数据质量控制要求

6.1总则

,

数据质量控制应根据数据规范设置数据校验规则依据数据校验规则对进入平台中的数据依次进

、()、、。。

行校验分级包括质量分级和使用分级整合核查数据质量控制流程示例参见附录A

6.2数据规范

6.2.1数据质量控制范围内所有数据的产生与使用都应当建立一套规范来进行约束和管控。

、、、、、、

6.2.2数据包括但不限于国别或组织名称被通报国名称信息名称编号发布日期实施日期废止

、、、、。

日期对应分类数据来源摘要原文文本

、、(、、、、、

6.2.3元数据应包括编码规则代码表元数据结构数据项名中文含义数据类型长度约束值空

、),。

间说明等信息应结合认证认可贸易便利化信息特点提出明确的规范要求

2

/—

RBT025.32019

,。。

6.2.4数据规范应对外公开以便于数据提供者参考和遵循数据规范示例参见附录B

6.3数据校验

6.3.1数据格式校验

,、、、

数据格式校验应根据数据项类型要求检验其是否符合按照其取值范围存在性类型限制长度限

制等方面给予判定。

6.3.2数据内容校验

,:

数据内容校验宜通过计算机智能专家系统进行自动判定判定的方面包含但不限于以下方面

)数据含义;

a

)与需求含义相近性;

b

)数据含义合规性;

c

)数据含义合法性。

d

6.4数据分级

6.4.1数据质量分级

,,

6.4.1.1平台应建立数据质量分级标准根据填报数据的完整性及用户评价两方面进行综合评定评定

结果动态更新。

数据质量级别至少应包括质量级和质量级两个级别。

6.4.1.2ⅠⅡ

):;

数据质量级所有数据符合数据规范要求并通过数据格式校验和数据内容校验的

aⅠ

):,

数据质量级所有必填数据符合数据规范要求并通过数据格式校验和数据内容校验但非必

bⅡ

填数据不完全符合数据规范要求的。

质量级数据是后续数据改正和补录的主要对象。

Ⅱ

6.4.2数据使用分级

、、,、

应根据数据的含义包含内容适用范围对其设置数据使用等级按照等级来管理数据开放程度数

。:

据共享范围一般设置为可以共享和不可共享两个等级

):;

a可以共享根据共享规则提供共享服务

):,、。

b不可共享不对外提供公开和访问如涉及知识产权暂时处于保密期内的数据

6.5数据整合

,,。、

应建立数据统一管理模式对多渠道来源数据进行必要的整合避免数据冲突对数据进行科学

,。、、

合理的分类和标签方便数据的快速检索与共享使用在汇聚多个维度多个来源多种结构的数据之

,,、。

后需要对数据进行预处理更正修复错误数据并对数据进行归并整理

6.6数据核查

。,

6.6.1数据核查应采用人工审核或计算机审核的形式进行计算机审核用于结构化数据的审核人工

审核主要用于非结构化数据及汇总统计结果的审核。

,:

数据核查主要针对质量级的数据开展应包括但不限于

6.6.2Ⅱ

)数据完整性;

a

)数据规范性;

b

)数据准确性;

c

3

/—

RBT025.32019

)逻辑关系;

d

)数据合理性。

e

,,。

平台管理方应制定相关工作机制定期开展数据核查工作持续提高数据质量

、,、,

6.6.3对于数据核查中需要修改补正的数据平台应联系原数据提供方进行补录更正或通过数据

、。

众筹方式进行补录更正

4

/—

RBT025.32019

附录

A

()

资料性附录

数据质量控制流程

。,

数据校验应包括数据格式校验和数据内容校验在数据接收时首先使用数据格式校验方法进行

,;,

数据格式校验未通过校验的数据重新填报通过格式校验的数据使用数据内容校验方法对数据进行

,,;

内容校验未通过校验的数据的不予接收通过校验的数据进入数据库对进入数据库中的数据进行数

,;、,

据分级包括数据质量分级和数据使用分级对分级后的数据按照数据整合数据核查的顺序分别处理

,。

最后进入信息库中形成认证认可贸易便利化信息

数据质量控制流程图见图A.1。

图A.1数据质量控制流程图

5

R

6B

/

T

0

2

5

.

3

—

2

0

1

9

/—

RBT025.32019

B.2栏目名称代码见表B.2。

表B.2栏目名称代码

序号栏目名称代码号

1法律法规0101

技术法规

2规范性文件0102

3国际标准0201

4国外标准0202

5国家标准0203

6技术标准行业标准0204

7地方标准0205

8企业标准0206

9团体标准0207

10实施规则0301

合格评定

11认证方案0302

12双边协议0401

国际互认

13多边协议0402

14TBT通报0501

15SPS通报0502

16信息通报召回信息0503

17突发事件0504

18新闻通报0505

B.3国家代码见表B.3。

表B.3国家代码

序号国别组织名称代码号

1蒙古001

2中国002

3印度101

4尼泊尔102

5巴基斯坦103

6斯里兰卡104

7马尔代夫105

8孟加拉国106

9不丹107

7

/—

RBT025.32019

()

表B.3续

序号国别组织名称代码号

10阿富汗108

………………

B.4产品类别代码见表B.4。

表B.4产品类别代码

序号产品类别代码号

1电热水壶8516

2电冰箱8418

3手机适配器8504

4空调8415

5燕窝0410

6奶油0401

7酸乳0403

8乳清及改性乳清0404

9黄油0405

10鲜乳酪0406

………………

8

/—

RBT025.32019

参考文献

[]/—:

信息技术词汇第部分基本术语

1GBT5271.120001

[]/—质量管理体系要求

2GBT190012016

[]/—个人位置导航电子地图数据质量规范

3GBT284452012

[]/—:

信息技术服务治理第部分数据治理规范

4GBT34960.520185

[]/—信息技术数据质量评价指标

5GBT363442018

[]/—科学数据共享工程质量管理规范

6SDST21332004

[]第一次全国海洋经济调查领导小组办公室著第一次全国海洋经济调查标准规范质量控制

7.

:,

技术规范北京海洋出版社

.2017.