DB23/T 3157-2022 政务信息共享交换平台数据汇聚

ICS35.240.01

CCSL67

DB23

黑龙江省地方标准

DB23/TXXXX-XXXX

政务信息共享交换平台

数据汇聚

XXXX-XX-XX发布XXXX-XX-XX实施

黑龙江省市场监督管理局发布

DB23/TXXXX-XXXX

前言

本文件依据GB/T1.1-2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起

草。

请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。

本文件由黑龙江省营商环境建设监督局提出并归口。

本文件起草单位：黑龙江省营商环境建设监督局、黑龙江省标准化研究院、浪潮软件集团有限公司。

本文件主要起草人：张建峰、江中阳、蒋毅、谭嘉宁、王磊、于运来、董鹏飞、张桐瑗、陈要武、

杨大志、吕猛、李严。

I

DB23/TXXXX-XXXX

政务信息共享交换平台数据汇聚

1范围

本文件规定了黑龙江省政务信息资源数据汇聚的总体架构，以及数据汇聚的基本要求。

本文件适用于黑龙江省政务信息资源数据汇聚的规划、设计、建设和应用。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，

仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本

文件。

GB/T22239信息安全技术网络安全等级保护基本要求

3术语和定义

下列术语和定义适用于本文件。

3.1

政务信息资源

政务部门在履行职责过程中制作或获取的，以一定形式记录、保存的文件、资料、图表和数据等各

类信息资源，包括政务部门直接或通过第三方依法采集的、依法授权管理的和因履行职责需要依托政务

信息系统形成的信息资源等。

3.2

数据汇聚

采集各政务部门可提供的政务信息资源，按照一定的数据更新频率及共享条件，将政务数据汇聚至

省共享交换平台。

3.3

资源提供方

对外提供政务信息资源共享的政务部门。

3.4

库表资源

库表资源是指资源提供方以数据库的形式提供的数据。

3.5

文件资源

文件资源是指资源提供方以文件形式提供的数据，一般使用的文件类型是Excel、CSV、TXT等。

4缩略语

1

DB23/TXXXX-XXXX

下列缩略语适用于本文件。

UTF-8：Unicode的可变长度字符编码（8-bitUnicodeTransformationFormat）

5数据汇聚总体框架

5.1政务信息资源数据汇聚由信息资源、信息资源目录、数据交换、数据共享交换平台组成，标准规

范和安全保障贯穿于各部分，为各部分提供指导和支撑保障。政务信息资源数据汇聚总体架构见图1。

图1数据汇聚总体框架

5.2信息资源目录是信息资源共享交换工作的基础，用于快速检索、定位、发现相应的信息资源。通

过汇聚基础信息资源、主题信息资源、政务部门信息资源和其他信息资源以数据交换服务为工具，为数

据共享交换平台提供数据应用支撑。

6数据汇聚总体要求

6.1汇聚方式

6.1.1库表模式汇聚

库表模式汇聚流程

库表模式汇聚流程见图2。

2

DB23/TXXXX-XXXX

图2库表模式汇聚流程图

汇聚流程

汇聚流程包括：

a)完成数据提供方与电子政务外网的联通，并能成功访问省共享交换平台提供的部门前置库，要

求资源提供方通过安全设备保证资源提供方业务数据中心的安全；

b)通过数据共享中心数据处理工具把需要推送的库表数据推送至共省共享交换平台部门前置库

中（增量推送）；

c)省共享交换平台数据交换系统把部门前置库的数据采集至中心前置库中。

数据要求

数据要求包括以下方面，需提供字段见表1：

a)提供数据表的主键，这是表中的某一条记录的唯一标识，为必须提供项；

b)数据更新时间戳，要求默认为业务生成时间或者变更时间；如果无法提供则修改成进入前置库

时间，修改业务时也为进入前置库时间，可采用数据库默认时间和触发器相结合的方式解决此

问题，格式为yyyy-MM-ddhh:mm:ss；

c)新增数据类型，数据新增时为“I”，修改时为“U”，删除时为“D”；

d)来源部门，该字段填入各部门的监管编码，省级厅局为23+“#”+“三位机构代码”（三位机

构编码参考附录A.1），地市为6位行政区划编码；

e)批次号：规则为日期+次数，例如2019年8月11日第二次提交数据，批次为“2019081100002”；

f)要求对数据按照时间戳进行增量更新，不可以进行每次全量覆盖式更新。

3

DB23/TXXXX-XXXX

表1库表模式需提供字段

字段名称字段类型字段意义

cd_idC100数据主键id

cd_timetimestamp数据更新时间戳

数据新增时为“I”，

cd_operationC50修改时为“U”，

删除时为“D”

cd_sourceC50来源部门

cd_batchC50批次号

6.1.2文件模式汇聚

基于FTP服务数据汇聚流程

基于FTP服务数据汇聚流程见图3。

图3基于FTP服务数据汇聚流程图

4

DB23/TXXXX-XXXX

汇聚流程

汇聚流程如下：

a)根据自身实际情况选择人工导出并上传至数据中心FTP服务器或者选择机器自动生成文件并

上传至FTP服务器；

b)按照选择的网络图谱配置前置机及网络安全设备并打通网络链路；

c)人工导出模式为省共享交换平台为资源提供方提供FTP上传的用户名和密码，资源提供方通过

人工导入至FTP服务器中，共享平台交换工具自动将上传的数据采集至前置库；

d)机器自动上传至资源提供方自建FTP服务器，共享平台交换工具通过资源提供方提供的用户名

和密码自动下载新增文件，并把数据采集至前置库中；

e)交换系统把前置库中的数据采集至中心前置库。

数据要求

数据要求包括：

a)明确每个文件每行数据的主键数据项，且不能为空，如同一条数据记录多次传输必须保证主键

值不变；

b)每个文件每行数据中需增加一个时间戳字段，以方便系统根据时间戳识别增量数据（时间格式

为yyyy-MM-ddhh:mm:ss）；

c)每个文件每行数据中存在无效或者删除数据需提供数据有效性标示字段；

d)按照目录的汇聚频率，更新备份库中的数据；

e)如果导出文件为Excel文件，第一行需为列名称，最后一行必须为数据行，不能出现总计等汇

总型数据；

f)如果导出文件为