ICS35.240.50 CCS L70 T/SAITA 团体标准 T/SAITA003—2023 工业知识图谱推理决策技术评估规范 Specification for industrial knowledge graph reasoning and decision technology evaluation 2023-12-30发布 2023-12-30实施 上海市人工智能技术协会 发布 1 目次 前言 .III 引言 ..IV 1范围.. 2规范性引用文件.. 3术语和定义... ] 4缩略语.... 5工业知识图谱的推理决策系统评估框架2 6工业知识图谱推理决策系统测评指标体系3 6.1概述. .....3 6.2数据集... .4 6.3系统功能. 4 6.3.1功能有效性 4 6.3.2易用性 4 6.3.3兼容性 4 6.3.4可维护性 5 6.4系统性能.. 5 6.5系统可信赖........ 5 6.5.1安全性- 5 6.5.2可靠性 5 6.5可解释性5 6.5.4鲁棒性 5 7工业知识图谱推理决策系统测试评估流程 .6 7.1确定系统质量目标,. .6 7.2数据集的规范.. .7 7.3构建测试环境.......... ....7 7.4设计测试项...... ..7 7.5开展测试活动........ 7.6分析测试结果.. ...7 8工业知识图谱推理决策系统测评方法.. .....7 8.1数据集指标...、 ...7 8.2系统功能指标... .8 8.2.1功能有效性 8.2.2易用性 10 8.2.3兼容性 10 8.2.4可维护性 I 8.3系统性能指标.. 11 8.4系统可信赖指标...... 12 8.4.1安全性 12 8.4.2可靠性 .13 8.4.3可解释性 .13 8.4.4鲁棒性 13 附录A 15 参考文献 18 II ...