HY/T 0370.1-2023 海洋环境数据处理与质量控制规范 第1部分：海洋水文

ICS07060

CCSA.45

中华人民共和国海洋行业标准

HY/T03701—2023

.

海洋环境数据处理与质量控制规范

第1部分海洋水文

:

Specificationformarineenvironmentaldataprocessingandqualitycontrol—

Part1Marinehdrolo

:ygy

2023-07-11发布2023-09-01实施

中华人民共和国自然资源部发布

HY/T03701—2023

.

目次

前言

…………………………Ⅲ

引言

…………………………Ⅳ

范围

1………………………1

规范性引用文件

2…………………………1

术语和定义

3………………1

通则

4………………………2

预处理和标准化处理

5……………………2

质量控制

6…………………3

质量评估

7…………………3

清单制作

8…………………4

元数据制作

9………………4

附录规范性质量控制方法

A()…………5

附录规范性温盐质量控制方法

B()……………………8

附录规范性海流质量控制方法

C()……………………12

附录规范性海浪质量控制方法

D()……………………14

附录规范性水位质量控制方法

E()……………………16

附录规范性水色透明度和海发光数据质量控制方法

F()、…………19

参考文献

……………………20

Ⅰ

HY/T03701—2023

.

海洋环境数据处理与质量控制规范

第1部分海洋水文

:

1范围

本文件确立了海洋环境水文数据处理与质量控制的处理流程处理原则规定了数据预处理和标准

、,

化质量控制处理质量评估数据清单制作和元数据制作等方面的技术内容

、、、。

本文件适用于水温盐度海流海浪水位水色透明度和海发光海洋水文数据的处理和质量

、、、、、、

控制

。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款其中注日期的引用文

。,

件仅该日期对应的版本适用于本文件不注日期的引用文件其最新版本包括所有的修改单适用于

,;,()

本文件

。

海洋数据应用记录格式

GB/T12460—2006

海洋学术语物理海洋学

GB/T15920

所有部分海滨观测规范

GB/T14914()

3术语和定义

和所有部分界定的以及下列术语和定义适用于本文件

GB/T15920GB/T14914()。

31

.

数据处理dataprocessing

对数据包括数值的和非数值的进行分析整理计算和编辑等加工的技术过程

()、、。

32

.

预处理pre-processing

在标准化处理前对资料进行的载体转换信息补充数据文件类型转换文件合并与拆分代码添加

、、、、

和要素名称统一等处理过程

。

33

.

标准化处理standardizedprocessing

按照资料类别采用规范流程对不同来源的资料进行格式编码计量单位和文件名称等规范统一

,,、、

的数据处理过程

。

34

.

质量控制qualitycontrol

采用多种数据处理方法模型和参数综合判断数据质量可靠性并进行质量标识的处理过程

、,,。

35

.

海洋水文数据marinehydrologicaldata

反映海面及海面以下的海洋水文状况及其变化过程的观测数据

。

注本文件涉及的海洋水文数据包括水温盐度海流海浪水位水色透明度和海发光

:、、、、、、。

1

HY/T03701—2023

.

36

.

检验inspection

采用规定的方法和参数判断海洋水文要素数据是否符合特定规律的检查

,。

4通则

41处理流程

.

海洋水文数据处理流程包括以下个方面内容

6:

预处理

———;

标准化处理

———;

质量控制

———;

质量评估

———;

清单制作

———;

元数据制作

———。

42处理原则

.

海洋水文数据处理遵循以下原则

。

完整性海洋水文数据处理过程中保证数据类型和内容观测信息等的完整

a):。

规范性对海洋水文数据进行规范化和统一化的处理同一类型数据采用的存储格式编码和

b):。、

计量单位保持一致

。

真实性海洋水文数据处理过程中保证数据项和辅助项与原始资料一致不在数据处理过程中

c):,

对原始资料做修改或增减

。

可靠性数据处理过程中对数据进行质量控制对正确数据和错误数据进行标识

d):,。

5预处理和标准化处理

51预处理

.

审核海洋水文数据中数据来源获取方式仪器设备名称及参数和处理者等能说明资料状况的信息

、、

是否齐全审核数据类型站次数观测时间和观测位置等是否与任务规定相符能否满足数据标准化

;、、,

要求

。

对于信息收集不完整的数据应从航次调查报告资料处理报告值班日志信息原始观测记录报

,、、、

表观测仪器信息等文档中提取所需要的信息若信息存储在纸介质或图像等模拟信号中还应对其进

、;,

行数字化处理

。

52标准化处理

.

海洋水文数据标准化由以下部分组成

4。

代码标准化对按代码记录的项目应进行代码统一后再行记录

a):,。

计量单位标准化将同一类型要素的不同计量单位统一为相同的计量单位

b):。

记录格式标准化将同一类型要素按照标准格式要求将数据现有格式转换为标准格式

c):,。

文件名称标准化按照统一的命名规则进行文件的标准命名

d):。

2

HY/T03701—2023

.

6质量控制

61质量控制目的

.

为保证海洋水文数据存储的完整性规范性真实性和可靠性对数据异常和缺测等情况进行判

、、,

断并对正确可疑错误和缺测数据进行质量标识

,、、。

62质量控制对象

.

海洋水文数据的质量控制对象包括采用不同观测和调查手段获取的水温盐度海流海浪水位

、、、、、

水色透明度和海发光数据

、。

63质量控制方法

.

631一般说明

..

6311质量控制方法包括自动质量控制和人工审核

...。

6312自动质量控制方法是由计算机软件对数据进行质量检查和质量符标识的过程自动质量控制

...,

方法分为基础信息检验和要素特性检验

。

基础信息检验是各要素通用的检验方法包括格式检验全等性检验日期检验位置检验着陆检

,:、、、、

验深度检验和速度检验按照附录中的规定进行检验

、,AA.1.1。

要素特性检验是对不同类型要素进行的特有的检验方法包括范围检验递增性检验连续性检

,:、、

验尖峰检验极值检验和相关性检验等按照进行检验

、、,A.1.2。

6313人工审核方法是由专业技术人员采用人工或人机交互方式对数据进行质量判断的过程方法

...,

包括航次轨迹检验区域特性检验和时间序列图形检验等按照进行审核

、,A.2。

6314海洋水文数据宜采用自动质量控制和人工审核相结合的方法开展质量控制对有时效要求产

...,

出的实时数据可采用自动质量控制方法

。

632分类质量控制方法

..

针对不同类型的海洋水文数据使用不同的质量控制方法进行数据质量判断其中温盐按照附录

。,

的规定进行质量控制海流按照附录的规定进行质量控制海浪按照附录的规定进行质量控制

B;C;D;

水位按照附录的规定进行质量控制水色透明度和海发光数据按照附录的规定进行质量控制

E;、F。

633质量标识

..

数据质量标识方法采用对数据记录标识质量符的方式质量符为字符型应符合的规定

。,A.3。

7质量评估

71质量评估的形式

.

数据质量评估应编制数据质量评估报告

。

72质量评估指标

.

质量评估指标由以下方法确定

。

有效记录数数据经过质量控制处理后质量标识为正确的数据记录总数

a):,。

有效率有效记录数占全部记录数的百分比

b):。

3

HY/T03701—2023

.

缺测记录数数据经过质量控制处理后质量标识为缺测的数据记录总数

c):,。

缺测率缺测记录数占全部记录数的百分比

d):。

重复率重复记录数占全部记录数的百分比

e):。

73质量评估报告内容

.

数据质量评估报告宜包括以下内容

。

数据概况

a):

包括数据来源机构总数据容量文件数分类型数据容量文件数

●、、、、;

数据种类观测方法观测要素观测频率时制

●、、、、;

数据存储格式是否可读读取方式或软件数据的空间范围描述空间分布站位图数据

●、、、()、

的时间范围

;

观测载体数量航次数站数站次数船数

●(、、、)。

数据质量情况

b):

根据实际需要选择包含数据的总记录数有效记录数有效率

●、、;

各要素的总记录数有效记录数缺测率和有效率等采用数字表格或图形的方式展示

●、、(、);

以船航次站观测仪器等为单位分别说明数据的有效记录数有效率和缺测率

●、、、、;

描述主要存在质量问题作出原因分析

●,。

数据分析选编内容一般包括局地气候代表性对研究解决科学问题的支撑情况等

c):,、。

数据应用价值分析和建议

d):

根据社会普遍需求给出数据的应用价值包括可应用领域经济价值和社会价值等

●,、;

根据目前具体的工作需要给出数据具体的应用价值

●;

提出数据存在的问题和使用时的注意事项以及进一步收集数据的需求

●。

8清单制作

编制标准数据集的数据清单数据清单的内容包括序号项目名称和编号数据名称学科类型开

,:、、、、

始时间结束时间空间范围文件数数据量处理人处理单位部门密级和备注等

、、、、、、()、。

9元数据制作

海洋水文数据经过质量控制处理后形成的标准数据集根据需要编制对应元数据信息

,。

元数据包含的信息如下

。

基本信息数据名称摘要关键词创建日期联系办法数据格式安全级别区域和时间等基

a):、、、、、、、

本信息

。

调查信息项目单位平台仪器和起止时间等与数据调查相关的信息

b):、、、。

质量信息数据处理过程处理方法处理人和资料质量情况等描述数据质量的信息

c):、、。

内容信息要素计量单位精确度等描述数据内容特征的信息

d):、、。

参照系信息参照系统名称投影基准等数据所使用空间参照系统的说明信息

e):、、。

4

HY/T03701—2023

.

附录A

规范性

()

质量控制方法

A1自动质量控制方法

.

A11基础信息检验

..

A111格式检验

...

按照规定的格式进行项目要素记录的检验包括起始位置长度数据记录的类型以及缺测值的填

,、、

写等不满足规定格式要求的数据记录均为错误

,。

A112全等性检验

...

针对观测记录中的某些要素项如资料类型固定站点代码平台代码观测方法仪器名称观测仪

,、、、、、

器海拔高度观测要素代码等进行数据检验这些要素项的参数记录和约定值必须完全一致否则视为

、,,

错误

。

A113时间检验

...

观测时间年月日时分秒和时区的取值应位于合理范围内其中年份取值不大于当前年

(、、、、、)。,

份月份取值范围为日期取值介于当月的天数之间小时取值范围为分秒取值范围为

,1~12,,0~23,、

同批次调查资料时间信息应与调查时间一致

0~59。。

A114位置检验

...

海洋观测资料的测站位置应在合理取值范围内如全球经度范围为纬度范围

。:-180°~180°,

为特定调查可根据具体要求调整经纬度范围固定观测站位漂移范围