T/SAITA 001-2023 自然语言处理系统测评规范
T/SAITA 001-2023 Natural language processing system evaluation specification
团体标准
中文(简体)
现行
页数:0页
|
格式:PDF
基本信息
标准号
T/SAITA 001-2023
标准类型
团体标准
标准状态
现行
发布日期
2023-12-18
实施日期
2023-12-20
发布单位/组织
-
归口单位
上海市人工智能技术协会
适用范围
范围:规定了自然语言处理系统的基本框架、测评指标体系、测评流程、测评方法,并提供了自然语言处理系统的评价指南;
主要技术内容:规定了自然语言处理系统的基本框架;提出了包含10个一级指标和36个二级指标的自然语言处理系统测评指标体系,涵盖功能有效性、性能、兼容性、可维护性、可解释性、安全性等指标;规定了自然语言处理系统测评流程和测试方法。附录部分规定了自然语言理解与自然语言生成功能有效性的计算方法,并提供了自然语言处理系统相关参考数据集和评价指南
发布历史
-
2021年08月
-
2022年12月
-
2023年12月
文前页预览
当前资源暂不支持预览
研制信息
- 起草单位:
- 上海市人工智能技术协会、上海计算机软件技术开发中心、上海依图网络科技有 限公司、达观数据有限公司、公安部第三研究所、科大讯飞股份有限公司、复旦大学、上海交通大学、 上海人工智能实验室、华东师范大学、上海人工智能研究院有限公司、竹间智能科技(上海)有限公司、 上海乐言科技股份有限公司、澳鹏数据科技(上海)有限公司、上海依图智安人工智能科技有限公司、 虎博网络技术(上海)有限公司、上海工程技术大学、木心智能科技集团有限公司
- 起草人:
- 朱伟民、陈敏刚、赵春昊、丁敏捷、汪未雅、王文广、刘彩霞、谢芳艺、王士 进、邱锡鹏、瞿晶晶、贺樑、张志忠、陈玉珑、宋海涛、王资凯、刘权、贺梦洁、马永宁、赵迎功、吴 蕾、钱程、曹嘉彦、杨长林、朱俊杰、吴良敏、李媛媛、穆泽林、隋言东
- 出版信息:
- 页数:- | 字数:- | 开本: -
内容描述
暂无内容
定制服务
推荐标准
- T/SDIRAA 024-2021 海洋数据质量控制 分析系统功能要求 2021-12-29
- T/CQCBDS 0052-2021 基于BFS的综合管廊实施指南 2022-04-21
- T/MSITISA 02-024-2022 科技服务 平台基本功能规范 2022-11-18
- T/CIATCM 063-2020 中医医院综合统计网络直报接口技术规范 2020-10-15
- T/CIATCM 047-2019 基层医疗卫生机构中医诊疗区(中医馆)健康信息平台信息数据元值域代码 2019-03-20
- T/SZAS 47-2022 地中海贫血基因检测数据集 2022-07-01
- T/CASME 921-2023 电子数据恢复系统技术规范 2023-11-17
- T/CCSA 233-2018 公有云计算基础设施即服务(IaaS)安全技术要求 2018-12-06
- T/OVMA 003-2017 融资顾问服务众包管理规范 2017-12-31
- T/CASME 697-2023 IT运维管理系统 2023-09-08