T/SAITA 001-2023 自然语言处理系统测评规范
T/SAITA 001-2023 Natural language processing system evaluation specification
团体标准
中文(简体)
现行
页数:0页
|
格式:PDF
基本信息
标准号
T/SAITA 001-2023
标准类型
团体标准
标准状态
现行
发布日期
2023-12-18
实施日期
2023-12-20
发布单位/组织
-
归口单位
上海市人工智能技术协会
适用范围
范围:规定了自然语言处理系统的基本框架、测评指标体系、测评流程、测评方法,并提供了自然语言处理系统的评价指南;
主要技术内容:规定了自然语言处理系统的基本框架;提出了包含10个一级指标和36个二级指标的自然语言处理系统测评指标体系,涵盖功能有效性、性能、兼容性、可维护性、可解释性、安全性等指标;规定了自然语言处理系统测评流程和测试方法。附录部分规定了自然语言理解与自然语言生成功能有效性的计算方法,并提供了自然语言处理系统相关参考数据集和评价指南
发布历史
-
2021年08月
-
2022年12月
-
2023年12月
文前页预览
当前资源暂不支持预览
研制信息
- 起草单位:
- 上海市人工智能技术协会、上海计算机软件技术开发中心、上海依图网络科技有 限公司、达观数据有限公司、公安部第三研究所、科大讯飞股份有限公司、复旦大学、上海交通大学、 上海人工智能实验室、华东师范大学、上海人工智能研究院有限公司、竹间智能科技(上海)有限公司、 上海乐言科技股份有限公司、澳鹏数据科技(上海)有限公司、上海依图智安人工智能科技有限公司、 虎博网络技术(上海)有限公司、上海工程技术大学、木心智能科技集团有限公司
- 起草人:
- 朱伟民、陈敏刚、赵春昊、丁敏捷、汪未雅、王文广、刘彩霞、谢芳艺、王士 进、邱锡鹏、瞿晶晶、贺樑、张志忠、陈玉珑、宋海涛、王资凯、刘权、贺梦洁、马永宁、赵迎功、吴 蕾、钱程、曹嘉彦、杨长林、朱俊杰、吴良敏、李媛媛、穆泽林、隋言东
- 出版信息:
- 页数:- | 字数:- | 开本: -
内容描述
暂无内容
定制服务
推荐标准
- DB65/T 4911-2025 12345政务服务便民热线场地及人员配置规范 2025-11-25
- DB65/T 4639-2025 用水定额 棉浆粕 2025-11-25
- DB37/T 4998-2025 黑色金属铸造企业安全规范 2025-12-29
- DB65/T 4880-2025 地理标志产品且末红枣 2025-11-25
- DB65/T 4941-2025 抽水蓄能电站接入电力系统管理规范 2025-11-25
- DB65/T 4936-2025 电缆铅封涡流检测技术规范 2025-11-25
- DB37/T 4976-2025 河湖生态产品价值核算技术规范 2025-12-29
- SN/T 5475-2025 进境种禽隔离检疫场建设规范 2025-12-11
- DB37/T 4951-2025 公路边坡生态防护技术规范 2025-12-15
- DB37/T 4980.1-2025 儿童福利机构康复服务规范 第1部分:孤独症儿童 2025-12-29