人工智能系统“时灵时不灵”、恶意软件借AI外壳逃逸检测、测试机构能力参差不齐——这些长期困扰产业界的痛点,即将迎来标准化解决方案。
近日,由中国电子商会批准立项,中国电子商会信息工程测试专委会、电设信科(北京)技术有限公司组织编制的《人工智能系统稳定性和可靠性测试方法》《人工智能恶意软件防御与检测要求》《人工智能测试机构评估规范》三项团体标准,已结束编制启动阶段,正式进入征求意见环节。南京大学、中国船舶集团有限公司综合技术经济研究院、麒麟软件有限公司、中科数测(无锡)科技有限公司、航天中认软件测评科技(北京)有限责任公司、安徽工商职业学院、广州掌动智能科技有限公司、山东劳动职业技术学院、宁波城市职业技术学院、宁夏凯信特信息科技有限公司、国网翼北电力有限公司唐山供电公司、物产中大数字安全科技(浙江)有限公司、辽宁工程技术大学鄂尔多斯研究院、福建技术师范学院、东莞理工学院、湖南泛联新安信息科技有限公司、上海博思芯宇信息科技有限公司、方寸跃迁(雄安)科技有限公司、湖南中医药大学、浙江杰峰物联股份有限公司、上海城建职业学院、苏州华克斯信息科技有限公司、柳州城市职业学院、江门职业技术学院等相关单位参与编制。
据悉,这三项标准于2026年4月获批立项,并在同年7月银川召开的第四届信息产业测试大会上完成编制启动。目前标准草案已形成,正面向人工智能企业、科研机构、测试认证机构及产业链相关方广泛征集意见。
一、填补测试方法空白
当前,人工智能技术快速迭代,但与之配套的测试评价体系却明显滞后。以AI系统稳定性为例,传统软件的“输入-输出”确定性测试逻辑,难以应对深度学习模型因数据分布偏移、对抗样本干扰而产生的不可预测行为。产业界亟需一套可量化、可复现的稳定性与可靠性测试方法,来回答“AI系统到底靠不靠谱”这一基础问题。
《人工智能系统稳定性和可靠性测试方法》正是瞄准这一缺口。该标准拟规定AI系统在功能稳定性、性能一致性、鲁棒性边界等方面的测试指标与验证流程,为企业研发、产品验收和第三方检测提供统一的技术依据。
二、瞄准安全新战场
AI恶意软件是另一道棘手的防线。攻击者利用生成式AI制造多态恶意代码、实施深度伪造攻击,传统基于特征码的检测手段日益力不从心。防御方需要“用AI对抗AI”,但缺乏统一的检测要求与评估基准。
《人工智能恶意软件防御与检测要求》拟从恶意样本生成机理、检测模型鲁棒性、逃逸对抗测试等维度,建立AI恶意软件的防御与检测规范。该标准的制定,有望为安全厂商、AI企业及监管机构提供一把衡量防御有效性的“标尺”。
三、为测试机构“定规矩”
谁来测试AI,本身也需要被规范。当前市场上宣称具备AI测试能力的机构众多,但资质水平参差不齐,测试结论的可信度缺乏保障。
《人工智能测试机构评估规范》拟对从事AI系统测试的机构在人员能力、设备设施、测试流程、质量管理体系等方面提出评估要求,旨在筛选出真正具备专业能力的第三方机构,为产业提供可信的测试服务。
四、参编通道持续开放
信息工程测试专委会负责人表示,三项标准的编制坚持“开放、透明、公正”原则,广泛吸纳产业界意见。专委会近期已启动新一轮参编单位征集工作,欢迎在人工智能、大数据、软件工程、电子信息等领域具有技术积累和实践经验的企业、高校及科研机构参与标准编制。
征求意见期满后,标准编制组将对反馈意见进行汇总处理,形成送审稿,预计年内完成审查报批。上述三项标准的出台,将为人工智能产业的规范化、高质量发展提供重要的基础性支撑。
有意参与标准编制或反馈意见的单位,可联系标准编制工作组。
联系电话:010-87660482
邮箱:ceietn@sina.com