ICS35.080 L77 T/SAITA 团 体 标 准 T/SAITA001—2021 人工智能计算机视觉系统测评规范 Artificial Intelligence-Specification for puter vision system testing and evaluation 2021-08-10发布 2021-09-01实施 上海市人工智能技术协会发布 T/SAITA001—2021 目 次 前言 ..II 引言 III 1范围 1 2规范性引用文件 3术语和定义 4符号和缩略语. 2 5计算机视觉系统基本框架 3 6计算机视觉系统测评指标 3 6.1概述. 3 6.2计算机视觉系统的功能有效性 ..4 6.3计算机视觉系统的性能 .6 6.4计算机视觉系统的兼容性 6.5计算机视觉系统的维护性 7 6.6 6计算机视觉系统的可移植性7】 6.7训练数据集的质量 6.8对抗性样本的影响 .7 6.9对应用场景数据的鲁棒性 .7 6.10计算机视觉系统的可解释性 .8 6.11计算机视觉系统的安全性 8 7计算机视觉系统测评流程 7.1确定计算机视觉系统质量目标 .8 7.2准备测试数据集 9 7.3 建测试环境9 7.4选择测评指标 .9 7.5开展测试活动 .9 7.6统计、汇总并分析测试结果 参考文献 10 I T/SAITA001—2021 前言 本文件按照GB/T1.1一2020《标准化工作导则第1部分:标准化文件的结构和起草规则》的规定 起草. 请注意本文件的某些内容可能涉及专利.本文件的发布机构不承担识别这些专利的责任. 本文件由上海市人工智能技术协会提出并归口. 本文件起草单位:上海计算机软件技术开发中心、上海依图网络科技有限公司、上海人工智能研究 院有限公司、上海思谋科技有限公司、上海眼控科技股份有限公司、上海大学、上海悠络客电子科技股 份有限公司、上海工程技术大学、上海平可行智能科技有限公司、北京亮亮视野科技有限公司、上海红 星美凯龙设计云信息科技有限公司、上海导萃智能科技有限公司. 本文件主要起草人:陈敏刚、陈文捷、蔡立志、赵春吴、宋海涛、刘洋、潘柳华、李晓强、周仁东、 方志军、吴世旺、姚寒星、周善记、王娟娟、王资凯、王天逸、高永彬、周瑜、李润华、马泽宇、胡瑞、 丁敏捷、乐琼华、张娟. II ...