2025年8月21日,面向智能制造的工业大模型测评基准研讨会在青岛以线上线下结合的方式成功召开。该会议由中国电子技术标准化研究院主办、海尔卡奥斯生态科技有限公司承办,来自智能制造、工业大模型领域相关开发商、系统集成商、用户企业、科研院所、高校等41家单位的50余名代表参加了会议。
当前,工业大模型等技术正在成为促进智能制造跨越式发展的核心驱动力之一。其中,测评基准作为客观、科学评估工业大模型在智能制造可用水平的重要手段,对于推动工业大模型进一步深化应用具有重要价值。
本次会议从工业大模型与基础通用大模型的区别出发,深入讨论了工业大模型测评基准与现有大模型测评基准的差异,梳理了工业大模型测评基准数据集与测评工具的衔接关系。此后,与会专家结合工业大模型在智能制造应用实践进展,明确测评基准的构建纬度需同时考虑工业大模型核心能力及其在智能制造中应用环节,并详细分析了感知、认知、决策、交互等能力域与各能力子域,调整了文本分类、缺陷识别、根因分析等测评任务与能力子域的对应关系。
会议同时举行了《面向智能制造的工业大模型及其应用系统测评基准协同共建倡议》编制启动仪式。针对工业大模型应用环节多、评价维度丰富、性能要求高等特点,单一机构或组织难以完成高质量测评基准数据集的构建工作,有赖于多方努力共同构建,中国电子技术标准化研究院将牵头编制该项倡议,并邀请相关企事业单位、研究院所、高校加入。
报名链接:
https://docs.qq.com/form/page/DQ2FHem51aXJheVd3
中国电子技术标准化研究院将继续积极组织推进面向智能制造的工业大模型测评基准讨论和研制工作,并同步开展工业大模型应用系统要求、工业大模型可靠性评价指标、工业大模型交互协议等相关国际、国内标准的研制。欢迎有兴趣的单位关注并参与测评基准建设、倡议编制、标准研制与测试。