焊接大语言模型评价方法.pdfVIP

ICS25.160.01

CCSJ33

团体标准

T/CWAN0175—XXXX

GB/T13814—92

焊接大语言模型的评价方法

Evaluationmethodsforweldinglargelanguagemodels

（征求意见稿）

（本稿完成时间：2025年10月30日）

XXXX-XX-XX发布XXXX-XX-XX实施

中国焊接协会发布

T/CWAN0175—XXXX

目录

前II

1范围1

2规范性引用文件1

3术语和定义1

4焊接大模型概述2

5数据合规要求3

6技术要求5

7评估与测试8

I

T/CWAN0175—XXXX

前言

本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起

草。

本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。

本文件由中国焊接协会提出并归口。

本文件起草单位：。

本文件主要起草人：。

II

T/CWAN0175—XXXX

焊接大语言模型评价方法

1范围

本文件规定了焊接大语言模型（WeldLLM）的评价原则、评价维度与指标体系、数据集构建方法、

评测流程、评分与等级划分方法、检验记录要求，并提供了评价报告格式。

本文件主要适用于以自然语言处理为核心的焊接大语言模型的评价，包括通用型大语言模型在焊接

领域的能力评估，以及面向焊接领域开发的专用大语言模型性能测试与验证。同时也适用于焊接通用

大语言模型的评价，也可作为核电、船舶、锅炉等专业领域构建行业专用焊接大语言模型评测试题、

评测方法及结果应用的通用框架。

本文件不适用于对非自然语言处理类的焊接人工智能系统（如基于规则的专家系统、单纯的图像识

别算法）的独立评价，但可为此类系统与LLM融合后的整体性能评估提供参考。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中、注日期的引用文件、

仅该日期对应的版本适用于本文件；不注日期的引用文件、其必威体育精装版版本（包括所有的修改单）适用于

本文件。

GB/T3323焊缝无损检测射线检测

GB/T33