递交截止 2026-10-20 09:30 · 生成于 2026-10-16 15:50
预览稿,非最终投标文件;各节内容以各任务 MAIN.md 为准。
本附录回应招标文件对数据集卡片的要求:每一正式发布版本须产出数据集内容、数据集卡片、版本指纹、质检报告与验证报告五件(b1567、b1568);数据字典与自描述封装文件须使数据集脱离平台后仍能被第三方平台准确解析(b1569、b1570);四类数据集须分别建立数据集项目,项目下按预训练、有监督指令微调、人类偏好对齐、基准评测四个用途子集分别建立生产任务(b1565、b1566)。本附录同时是评测规范说明文档维度的举证材料。
该维度在招标文件第 112—115 页共占 47 个单元(b1912—b1958):维度标题一条(b1912),基本信息完整性、内容特征完整性、建设过程完整性、应用说明完整性四个组标题(b1913、b1926、b1937、b1948),以及二十一项指标各自的指标名与评估说明两条(b1914—b1925、b1927—b1936、b1938—b1947、b1949—b1958)。
这 47 条是本附录逐条对齐的评分依据:评测机构按《高质量数据集质量评测规范》(TC609-5-2025-04)所定的三维度体系给说明文档维度打分(b1911),而整体验收要求三个维度得分均达到最低合格标准、数据集综合总分不低于 85 分(b2145)。因此二十张卡的每一个字段都标注了它所应答的指标,标注办法见第 1.5 小节。
本附录交付的是样章与模板,不是已发布数据集的实际卡片。项目期内每一个正式版本的数据卡,将按本附录各卡的结构、字段顺序与填写粒度产出;统计类字段由奔牛数据智能平台在定版时写入实测值,业务含义类字段由生产任务负责人填写并经质检岗复核。
凡本附录中以示意值出现的统计数字,都在该卡的字段表中标明「示意」或以【待填:…】占位,不构成交付承诺;凡来自招标文件原表的规模数值(预训练 615 亿 Token、指令微调 89 万条、强化学习偏好 6.6 万组、基准评测 0.95 万条)是我方的交付承诺,在各卡中原样填入。
数据卡按「一数据集一用途子集一卡」的粒度产出。四类数据集乘四个用途子集,一个正式发布批次共二十张卡:十六张子集卡,外加四张数据集级汇总卡。汇总卡的用途不是重复子集卡的内容,而是回答三个只有在数据集层面才成立的问题——该数据集跨四个子集的总规模、模态构成与时效构成;四个子集之间的来源隔离与引用关系;该数据集对应哪几个验证场景、由哪几份质检与验证报告支撑。
评测规范中模态种类数、多模态条数占比、三年内数据条数占比三项指标是对整套数据集提出的(b1601r02、b1601r03、b1601r04),在四集汇总层面核算达标,分集与分子集的实测占比如实记录在卡中而不作分集达标承诺,这一口径与技术方案 T1C 节第七部分一致。
表 A10-1 全套数据卡索引(二十张)
| 卡编号 | 数据集 | 用途子集 | 本卡规模 | 本附录出卡位置 |
|---|---|---|---|---|
| GHY26691-DC-01-0000 | 供需计划 | 数据集级汇总 | 276 亿 Token+43.6 万条 | 第 2.1 节 |
| GHY26691-DC-01-0001 | 供需计划 | 预训练 | 276 亿 Token | 第 3.1 节 |
| GHY26691-DC-01-0002 | 供需计划 | 有监督指令微调 | 40 万条 | 第 3.2 节 |
| GHY26691-DC-01-0003 | 供需计划 | 人类偏好对齐 | 3.2 万组 | 第 3.3 节 |
| GHY26691-DC-01-0004 | 供需计划 | 基准评测 | 0.4 万条 | 第 3.4 节 |
| GHY26691-DC-02-0000 | 产品工艺设计 | 数据集级汇总 | 70 亿 Token+10.9 万条 | 第 2.2 节 |
| GHY26691-DC-02-0001 | 产品工艺设计 | 预训练 | 70 亿 Token | 第 4.1 节 |
| GHY26691-DC-02-0002 | 产品工艺设计 | 有监督指令微调 | 10 万条 | 第 4.2 节 |
| GHY26691-DC-02-0003 | 产品工艺设计 | 人类偏好对齐 | 0.8 万组 | 第 4.3 节 |
| GHY26691-DC-02-0004 | 产品工艺设计 | 基准评测 | 0.1 万条 | 第 4.4 节 |
| GHY26691-DC-03-0000 | 制造过程 | 数据集级汇总 | 105 亿 Token+16.2 万条 | 第 2.3 节 |
| GHY26691-DC-03-0001 | 制造过程 | 预训练 | 105 亿 Token | 第 5.1 节 |
| GHY26691-DC-03-0002 | 制造过程 | 有监督指令微调 | 15 万条 | 第 5.2 节 |
| GHY26691-DC-03-0003 | 制造过程 | 人类偏好对齐 | 1 万组 | 第 5.3 节 |
| GHY26691-DC-03-0004 | 制造过程 | 基准评测 | 0.2 万条 | 第 5.4 节 |
| GHY26691-DC-04-0000 | 产品质量 | 数据集级汇总 | 164 亿 Token+25.85 万条 | 第 2.4 节 |
| GHY26691-DC-04-0001 | 产品质量 | 预训练 | 164 亿 Token | 第 6.1 节 |
| GHY26691-DC-04-0002 | 产品质量 | 有监督指令微调 | 24 万条 | 第 6.2 节 |
| GHY26691-DC-04-0003 | 产品质量 | 人类偏好对齐 | 1.6 万组 | 第 6.3 节 |
| GHY26691-DC-04-0004 | 产品质量 | 基准评测 | 0.25 万条 | 第 6.4 节 |
表 A10-1 数据来源:卡编号规则依附录佐证卷 A2 节第 2.3 小节五段式文档编号;业务域码 01—04 依同节业务域码表;各卡规模依招标文件第 92—94 页表格 3-1 至表格 3-4(b1583r02—r05、b1588r02—r05、b1593r02—r05、b1598r02—r05)原值;条数基数依技术方案 T1C 节表 13。
三处内容相邻但不重复,分工如下,便于评标委员会索引。附录佐证卷 A2 节第四部分定数据卡的字段规范——七个分区、八十四个字段、每个字段的必填性、填写方与取值约束,以及字段与说明文档评测指标的映射;它给出两张示意卡用于说明填写粒度,并明确其余子集卡按同一模板填写。
技术方案 T1C 节定四类数据集的规模口径、来源构成、用途子集内容设计与模态时效测算,是各卡统计类字段数值的来源。本附录在这两者之上出实卡:二十张卡逐张按八十四个字段填到可审状态,并为每张卡补三样 A2 节未展开的内容——记录级数据字典、标签体系或元数据标记全表、以及样本示例的实际全文。
因此本附录不重述字段规范(见 A2 节 4.3 小节),不重述规模论证(见 T1C 节第二至第七部分),不重述质检与验证报告的模板(见 A2 节第五、第六部分)。本附录出现的字段号一律沿用 A2 节 4.3 小节的编号,字段名不改写。
每一个字段的取值只能来自三处,卡中以不同写法区分,目的是让审阅者一眼看出哪些数字是承诺、哪些是测算、哪些要等现场。
第一类是招标文件原值与我方承诺值,直接写数字,不加修饰。四个用途子集的规模、模态种类数不低于三种、合成样本在基准评测子集中为零这三项属此类。第二类是规划测算值,写数字并在字段内标「测算」。
各子集的任务类型分解、来源构成比例、分集多模态与时效占比属此类,其依据是我方对甲方现有系统数据留存状况的理解,最终值随现场盘点与蓝图设计确认后在卡中更新。第三类是须由平台实测或由甲方确认的值,一律写 【待填:…】,括号内写明待填内容与来源方。样本总数、存储总量、分布直方、一致性实测值、指纹、数据分级、授权条款属此类。
这三类取值的区分不是文书讲究。数据卡是第三方评测直接取值比对的对象,把测算值写成实测值,评测时就要为一个本来不必承诺的数字作答。
四个用途子集不是同一批数据的四种切法,它们之间有两条硬约束,卡片字段必须把这两条约束的执行结果记录下来。
第一条是基准评测子集与其余三个子集的双重隔离:来源隔离指基准样本取自未被用于训练的项目集合、炉次集合或部件集合,时间隔离指基准样本的业务发生时间晚于训练样本的截止时间。该隔离一旦建立不得回填,执行结果记入各卡 C13 字段(去重与相似度比对结论)与基准卡的 D09 字段。
第二条是跨数据集引用而不跨数据集计量:产品质量数据集的根因追溯样本需要引用制造过程数据集的炉次曲线段与焊道参数段,引用以段落指针形式写入样本的证据字段,被引用的段落在制造过程数据集中计量,不在产品质量数据集中重复计量。这一条决定了两集的 D10 字段互相指向,也决定了两集的规模可以相加而不重复。
二十张卡的字段表都带第三列「对应说明文档指标」,逐格填写该字段所应答的指标号与单元 id,形如 1.1.1(b1914/b1915)——前者是评测规范的指标号,后者是招标文件中该指标的指标名单元与评估说明单元。加这一列的理由很直接:说明文档维度的得分不取决于编写人的经验,而取决于字段是否填齐、填的内容是否正好答到指标问的那件事。把对应关系写在字段旁边,填卡的人知道这一格为什么必填,评测的人知道这一项该去哪一格取值,双方不必在评测现场争论「这一项写在哪里」。
对齐的粒度是一字段对一至三项指标。反向看,二十一项指标每一项都有至少一个字段应答:落点最多的 1.3.3 加工处理流程有十三个字段,最少的 1.2.4 样本示例与 1.3.2 采集方法各一个(B11、C02)。全套反向覆盖见第 7.5 小节表 A10-8。
有三处需要说明清楚,否则这一列会被误读。
第一处是只能对到组级的字段。A02 数据集名称在二十一项指标中没有对应项——规范考的是规模、格式、结构、获取、支持、便捷六项,没有「名称」一项。本附录把它标为「1.1 组级(b1913)」而不是硬塞进某一项。它不是设计缺口:名称是基本信息组的载体,且招标文件另有要求——四个数据集的标准名称前后一致、不换词(b1578),这条约束由名称字段承担。A07 数据集简介同理,既对 1.4.2 目标应用场景,也标组级,因为它同时承担「本子集解决什么业务问题」的概述。
第二处是标「主依据」的字段。E、F、G 三个分区的字段大多在说明文档维度之外另有更直接的招标文件依据:E 区对应五件套与验证报告要求(b1568、b1561),F 区对应入口脱敏与安全合规要求(b1396、b1534),G 区对应版本指纹与自描述封装要求(b1567—b1570)。这些字段在本列中既标它们在说明文档维度中的落点,也标「主依据 b…」,两者并列。这样处理的用意是:评测时按说明文档维度取值取得到,验收时按五件套与安全要求查也查得到,不必为同一件事维护两套字段。
第三处是适用性与缺项的区别。预训练子集无标注,C06—C09 四项不适用,卡中填「不适用」而非留空;这四格的指标列仍填 1.3.4(b1944/b1945),表示该指标在本子集上按「不适用」判定而非按缺项扣分。平台校验规则 R01 据此区分两者:显式填「不适用」通过,省略键名或留空阻断发布(见表 A10-7)。
表 A10-2 二十一项说明文档指标的单元构成与应答字段数
| 指标组(组标题单元) | 指标号 | 指标名(单元) | 评估说明(单元) | 评估说明问的是什么 | 应答字段数 |
|---|---|---|---|---|---|
| 1.1 基本信息完整性(b1913) | 1.1.1 | 数据集规模(b1914) | b1915 | 体量是否量化:样本总数、总时长、总词数或总存储空间 | 3 |
| 1.1 | 1.1.2 | 格式规范(b1916) | b1917 | 文件类型、编码方式、数据结构是否清晰明确定义 | 4 |
| 1.1 | 1.1.3 | 文件结构(b1918) | b1919 | 目录组织方式、文件命名规则、各文件与文件夹内容 | 2 |
| 1.1 | 1.1.4 | 获取渠道(b1920) | b1921 | 下载链接或申请路径是否明确可访问,获取流程 | 3 |
| 1.1 | 1.1.5 | 技术支持(b1922) | b1923 | 是否提供官方支持渠道并能提供有效帮助 | 3 |
| 1.1 | 1.1.6 | 使用便捷性(b1924) | b1925 | 开箱即用:数据字典、解析脚本、示例代码是否齐备 | 5 |
| 1.2 内容特征完整性(b1926) | 1.2.1 | 模态类型(b1927) | b1928 | 是否清晰说明数据集包含的所有模态 | 3 |
| 1.2 | 1.2.2 | 数据分布(b1929) | b1930 | 关键特征上的统计分布:直方图、类别不均衡比例 | 7 |
| 1.2 | 1.2.3 | 标签类别(b1931) | b1932 | 完整、清晰、无歧义的标签清单及其详细定义 | 2 |
| 1.2 | 1.2.4 | 样本示例(b1933) | b1934 | 代表性样本,直观展示数据结构、格式与内容 | 1 |
| 1.2 | 1.2.5 | 局限性说明(b1935) | b1936 | 是否主动坦诚揭示潜在偏见、覆盖不足与已知局限 | 3 |
| 1.3 建设过程完整性(b1937) | 1.3.1 | 数据来源(b1938) | b1939 | 来源渠道、采集时间范围、地理区域等溯源信息 | 5 |
| 1.3 | 1.3.2 | 采集方法(b1940) | b1941 | 获取原始数据的方法、工具或具体流程 | 1 |
| 1.3 | 1.3.3 | 加工处理流程(b1942) | b1943 | 从原始数据到成品所经历的全部清洗、转换、标注步骤 | 13 |
| 1.3 | 1.3.4 | 标注规范(b1944) | b1945 | 标注操作手册:标签定义、标注规则、典型示例 | 6 |
| 1.3 | 1.3.5 | 版本记录(b1946) | b1947 | 变更日志:各版本迭代时间、主要变更内容、版本号 | 12 |
| 1.4 应用说明完整性(b1948) | 1.4.1 | 使用许可(b1949) | b1950 | 授权条款:是否允许商用、是否需要署名 | 8 |
| 1.4 | 1.4.2 | 目标应用场景(b1951) | b1952 | 设计用于支持的 AI 任务或应用的具体领域 | 9 |
| 1.4 | 1.4.3 | 评估方法(b1953) | b1954 | 官方推荐的评价指标与评测协议 | 3 |
| 1.4 | 1.4.4 | 基准测试结果(b1955) | b1956 | 可复现的应用案例或基线模型实现参考 | 6 |
| 1.4 | 1.4.5 | 典型应用案例(b1957) | b1958 | 具体、可复现的应用代码示例或基线模型实现参考 | 2 |
| 合计 | 21 项 | 21 个单元 | 21 个单元 | 加维度标题 b1912 与四个组标题,共 47 个单元 | — |
表 A10-2 数据来源:指标组、指标号、指标名、评估说明的单元 id 以及「评估说明问的是什么」一列,均依招标文件第 112—115 页原文(b1912—b1958)摘述;应答字段数依各卡字段表第三列统计,逐字段明细见第 7.5 小节表 A10-8。应答字段数之和大于 84,原因是部分字段对两项以上指标。
1.3.3 加工处理流程以十三个字段应答,是二十一项中落点最多的一项。这不是重复填写:该指标问的是从原始数据到最终数据集所经历的全部清洗、转换、标注步骤(b1943),而本项目的加工链有十个环节,单靠一个字段写不完——流程主干在 C04,各环节实际参数在 C05,合成与增强两个环节单列在 C10、C12,去重与隔离在 C13,脱敏在 F04、F05,质检门控结论在 E01—E04,血缘在 G09。拆开填的好处是每一环节的记录都能单独核验;合在一格填,评测时无法判断哪一环节的记录缺失。
反过来,1.2.4 样本示例只有 B11 一个字段应答,但它是本附录篇幅占比最大的一项:b1934 要求的是具有代表性的数据样本,用于直观展示数据的结构、格式与内容,一格表格装不下,因此十六张子集卡的 B11 字段都指向该卡的样本示例附件,附件里是可直接阅读的样本全文。指标落点少不等于举证轻。
图 A10-1 二十张数据卡的编号体系、隔离约束与引用关系。数据来源:编号规则与字段分区依附录佐证卷 A2 节第 2.3、4.3 小节;各子集规模依招标文件表格 3-1 至表格 3-4;隔离与引用口径依技术方案 T1C 节第二、第六部分及招标文件 b1554、b1544。
汇总卡与子集卡用同一套八十四个字段,但填写重心不同:汇总卡的 A08/A09 两项填四个子集的合计,B01—B04 填数据集层面的模态与时效构成,D02 填本数据集支撑的验证场景清单,E01/E05 列本批次全部质检与验证报告编号。凡只在子集层面才有意义的字段(如 C06 标注规范编号在预训练子集不适用、B08 难度分布只对指令微调与基准子集成立),汇总卡填「分子集填报,见各子集卡」,不作合并。
十一个验证场景的编号在本附录中统一取自招标文件业务范围原文的列序(b0684):SC-01 产品智能选型、SC-02 板材备料工艺智能设计、SC-03 库存控制智能化、SC-04 热处理过程控制智能化、SC-05 焊接过程控制智能化、SC-06 刮板输送装备健康诊断智能化、SC-07 管理制度智能问答助手、SC-08 技术标准智能问答助手、SC-09 标书智能问答助手、SC-10 决策数据智能问答助手、SC-11 合同合规审查智能助手。本包承担的是向这十一个场景供数并完成场景验证,场景本身的建设不在本包范围内,卡中 D02 字段记录的是供数关系与验证关系,不是场景建设责任。
表 A10-3 四张汇总卡的供数场景与跨集引用关系
| 汇总卡 | 支撑的验证场景 | 对外引用 | 被引用 |
|---|---|---|---|
| DC-01-0000 供需计划 | SC-01、SC-03、SC-07、SC-09、SC-10、SC-11 | 引用产品工艺设计集的型谱与图纸摘要(选型结论校核) | 无 |
| DC-02-0000 产品工艺设计 | SC-02、SC-08 | 引用制造过程集的工序流转记录(工艺可执行性核对) | 被供需计划集引用 |
| DC-03-0000 制造过程 | SC-04、SC-05、SC-06 | 引用产品工艺设计集的工艺卡参数区间(偏离判定基线) | 被产品质量集以段落指针引用 |
| DC-04-0000 产品质量 | SC-04、SC-05、SC-06 | 以段落指针引用制造过程集的炉次曲线段与焊道参数段 | 被制造过程集引用(质量结论作为过程样本的标签来源) |
表 A10-3 数据来源:场景清单依招标文件第 46 页业务范围(b0684);引用关系依技术方案 T1C 节第三至第六部分各集来源构成与第六部分根因追溯链样本结构;被引用关系依同节关于过程数据与质量结论配对的论述。
本卡回应招标文件 3.2.6.4.1 供需计划数据集要求(b1579、b1580、b1581)及其规模表(b1582、b1583r01—r05),并在数据集层面汇总四个子集的规模、模态与时效(b1601r02—r04)。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-01-0000-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 供需计划数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 数据集级汇总(下辖预训练、有监督指令微调、人类偏好对齐、基准评测四子集) | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 01 供需计划 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,与四子集同批定版同日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本数据集面向甲方「以销定产、以产定采」的供需协同主线,覆盖需求识别、方案匹配、合同合规、产销协同、资源调度五个环节。装备按矿井工作面条件定制,选型输入分散在矿方生产规划、地质条件报告与多方会商结论中,历史选型方案以文档散存且投运评价未回流;库存口径多套并存,商机与成交未回溯对齐。本数据集把这些分散事实按施工号、合同号、物料编码、项目号四类业务对象重新组织,形成带标注与证据的样本集合,供产品智能选型、库存控制智能化、合同合规审查等场景的验证使用(b1580、b1581) | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 以条或组计量的三子集合计 43.6 万条(指令微调 40 万条+偏好对齐 3.2 万组+基准评测 0.4 万条);预训练子集篇章级样本条数单列统计,【待填:平台统计值】 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 276.0 亿 Token(预训练子集,招标文件表格 3-1 原值,b1583r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8,一行一条)、.parquet(列存批读)、.md(版面还原文本)、.png/.jpg(扫描件与图表切片)、.csv(口径映射表与分布附表) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 四子集各自的记录结构见各子集卡 A12 字段;跨子集公共字段为 biz_key(业务对象主键)、biz_time(业务发生时间)、source_ref(源系统与原文定位)、lineage_id(血缘标识)四项,逐字段定义见《数据字典》GHY26691-LG-01-0003 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /01_supply_demand/{pretrain,sft,preference,benchmark}/ 四子集各一目录,目录内按业务年份与批次分层;根目录放 manifest.json(清单)、datacard/(本卡与四张子集卡)、dict/(数据字典)、scripts/(读取与校验脚本) | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | <子集码>-<来源码>-<业务年份>-<批次号>-<序号>.jsonl。子集码取 PT/SFT/PREF/BM;来源码按 A 组来源表取值 | 1.1.3(b1918/b1919) |
| A15 获取方式 | 在数据集运营服务管理平台提出申请,经数据所有权部门与安全管理岗两级审批后开通只读访问;含商务条款的批次另需经营管理部门加签。受理时限 2 个工作日,加签批次 3 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,工作日 9:00—18:00 受理,一般问题 4 小时内响应,数据内容类问题 1 个工作日内答复 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-01-0003、四张子集卡、读取脚本 read_01.py、校验脚本 verify_manifest.py、库存口径映射表 inv_mapping_v1.csv、术语词典 term_dict_01.json | 1.1.6(b1924/b1925) |
| B01 模态构成 | 文本 37.06 万条(测算 85%)、图像 5.23 万条(测算 12%)、表格 1.31 万条(测算 3%);按条数计量,含多模态的样本按主模态归一后另在 B03 单列 | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(文本、图像、表格);四集汇总层面另有时序与视频两种模态,由制造过程集与产品质量集承载,汇总后满足不低于 3 种的要求(b1601r02) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 15%,对应 6.54 万条;实测值【待填:平台统计值】。本集占比低于 40% 属业务事实,四集汇总测算 45.9%,达标口径在汇总层面核算(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 55%,对应 23.98 万条;实测值【待填:平台统计值】。按业务发生时间、以发布日前推 36 个月判定(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 需求识别与参数抽取、方案匹配与选型校核、合同与技术协议合规、产销协同与排产、库存与采购决策五个主题,逐子集条数见各子集卡 B05 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 分子集填报,见各子集卡 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 销售与合同文本 24.6%、订单与产销协同 19.6%、客户与矿方工况资料 15.2%、产品型谱与物料主数据 13.8%、库存采购记录 12.3%、协同经验与会商结论整理 9.4%、行业政策公开语料 5.1%(按预训练子集 Token 构成折算,测算值) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 分子集填报,仅指令微调与基准评测子集适用 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 本集标签体系按五个业务主题分三层组织,总表见第 3.2 节附表;预训练子集无标注,仅保留来源与主题元数据标记 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 分子集填报,见各子集卡 B10 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 四子集各不少于 3 条,全文见各子集卡附件 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、配套接口参数(截深、截高、推移步距一类)的会商结论无电子留痕,只能通过历史方案回溯与结构化访谈部分还原,覆盖度以项目为单位统计、近三年项目优先;无法还原的项目在样本中以缺失标记显式保留,不做插补。二、历史选型方案的投运使用评价须从零补录,补录进度取决于填报入口的流程改造推进;若至第三期末覆盖度仍低于测算值,偏好子集「选型推荐排序偏好」一项的样本来源由投运评价为主调整为专家裁定为主,样本量不变并在卡中标注来源构成变化。三、库存口径多套并存,入集前统一到同一时点口径,口径映射表随集发布;映射前的原始口径差异在 source_ref 中保留但不参与统计。以上三项列入《下一版本修订计划》GHY26691-PL-01-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】;客户关系管理系统正在上线、历史数据较少,其项目与商机数据基本落在近三年内 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 分子集填报。上限按子集类型控制:预训练不高于 30%、指令微调不高于 45%、偏好对齐不高于 50%、基准评测为零(b1512、b1513) | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 协同办公系统(制度文件、合同、标书、技术协议)、企业资源计划系统(物料主数据、物料清单、需求计划、采购订单、库存账与价格)、客户关系管理系统(项目与商机)、仓储管理与物流执行系统(实物库存、批次与出入库流水)、制造执行系统(工单与工序流转)、产品全生命周期管理系统(产品结构与型谱)、企业文档(矿方工况与地质资料归档件)、结构化访谈与历史方案回溯(无系统承载部分)。逐源的采集时间范围与所属单位登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 业务系统按已授权数据域开通只读接口或数据库只读视图增量抽取,抽取频次按日;协同办公与企业文档按目录批量导出后文档解析,附件按原文留存并建立版面定位;无系统承载部分按《供需协同经验采集模板》组织结构化访谈与历史方案回溯标注,单独成批次、不与系统导出批次混同计量 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有(合同、订单、库存、型谱、访谈成果);授权使用(矿方提供的工况与地质资料,许可凭证编号【待填】);公开许可(行业与政策公开语料,逐条登记来源与许可凭证,不可商用的不入集) | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记与许可核验 → 多模态文档解析与版面还原 → 对象主键贯通(施工号、合同号、物料编码、项目号)→ 库存与时间口径统一 → 敏感商务条款分级处置 → 分子集加工(预训练语料化/指令样本构造/偏好对构造/基准样本冻结)→ 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 分子集填报,见各子集卡 C05 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-01-0004-V1.0《多模态数据标注规范·供需计划册》(预训练子集不适用) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 分子集填报,见各子集卡 C07 | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 分子集填报;本集统一采用的一致性指标为按标签层级分别计算的标注员间一致率,裁决规则见标注规范 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 分子集填报 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 分子集填报;本集合成样本集中在选型校核推理链与库存决策场景的参数组合扩展两处 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级;所调用模型的许可条件逐条登记(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 分子集填报;增强前后分布对比结论编号见各子集卡 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 预训练、指令微调、偏好对齐三子集均已与基准评测子集完成去重与相似度比对,命中样本从训练侧移除;本集隔离口径为「项目集合隔离+业务发生时间切分」,结论编号【待填】 | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;商务条款类样本的使用范围另受 F08 访问权限约束;用于模型训练产出的模型权重归属按合同约定 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-01 产品智能选型(主)、SC-03 库存控制智能化(主)、SC-11 合同合规审查智能助手(主)、SC-10 决策数据智能问答助手、SC-07 管理制度智能问答助手、SC-09 标书智能问答助手(b0684)。本集承担向上述场景供数与完成场景验证,场景建设不在本包范围内 | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练、指令微调、偏好对齐、基准评测(分子集,见各子集卡 D03) | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 领域知识探针准确率、指令遵循率、选型校核结论与专家结论一致率、参数抽取字段级准确率与召回率、库存决策建议采纳率、偏好对齐胜率。各指标计算口径见各子集卡 D04 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019,含评测环境、推理参数、随机种子与指标脚本版本(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-01-0001 至 -0004 各报告第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | scripts/ 目录下读取、校验、抽样与基线训练脚本及运行说明 | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 产品智能选型场景:输入矿方工况参数表,输出候选配置、逐项校核过程与排序理由,效果数据见 GHY26691-VR-01-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本集样本的选型校核过程依据甲方现行校核公式版本,公式换版后旧版样本不适合直接用于新版公式的能力评测;库存决策类样本带甲方既有储备习惯,迁移到其他物料结构时需重新校准 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-02-0000(产品工艺设计数据集,型谱与图纸摘要的引用来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-01-0001-V1.0 至 GHY26691-QC-01-0004-V1.0(四子集各一份) | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 保真度、完备性、规整性、均衡性、可用性、可信性六维度的实测值与门限对照见各质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填:通过/条件通过/不通过,分子集填报】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填:条件通过时按缺陷编号列出及其关闭计划】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-01-0001-V1.0 至 GHY26691-VR-01-0004-V1.0 | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见各验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 逐场景判定,覆盖 D02 所列六个场景(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测;首轮全量评测与缺陷整改复测按招标文件要求组织并输出正式盖章报告(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 40685—2021;GB/T 38667—2020;GB/T 43697—2024 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填:集中复测时间、范围与结论编号】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—经营管理类、生产经营数据—供应链类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;含客户名称与价格条款的批次按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;部分样本含人员信息(经手人、联系人),按 F04 处置 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 客户单位名称按泛化法处理到矿区与工作面类型层级;联系人、经手人姓名与联系方式按替换法处理;价格条款按分档映射法处理,保留可比性而不保留原值。依据 GB/T 37964 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查;行业与政策公开语料部分按许可范围使用,不可商用内容不入集,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | 《数据许可与合规审查规范》GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 营销业务角色、生产计划角色、供应链角色、数据加工岗、评测岗;含价格条款批次另限经营管理部门授权人员 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按数据集编号 GHY26691-DC-01 前缀检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01 文件清单摘要 | 【待填:清单文件 SM3 摘要值】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G02 内容根摘要 | 【待填:按清单顺序归并计算的根摘要】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G03 摘要算法 | SM3(GB/T 32905—2016) | 1.3.5(b1946/b1947);主依据 b1568 |
| G04 签名算法 | SM2(GB/T 32918.1—2016) | 1.3.5(b1946/b1947);主依据 b1568 |
| G05 签名值 | 【待填:对内容根摘要的签名】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G06 签名时间 | 【待填:YYYY-MM-DD hh:mm:ss】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G07 自描述封装文件 | GHY26691-01-V1.0.pkg,内部结构见第八部分 | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填:数据集与模型版本血缘追溯标识】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
汇总卡的用途在最后一行字段之外还有一处:它是资产台账的对账单位。按招标文件要求,各版本的样本规模、模态构成、时效性占比、许可状态与使用情况记入数据集资产台账(b1573、b1574)。台账中供需计划数据集的一行,其规模、模态、时效三列直接取本卡 A08、A09、B01—B04 的值;台账与平台自动计量结果逐版本对账,差异超过 0.5% 的版本不予发布。
本卡回应招标文件 3.2.6.4.2 产品工艺设计数据集要求(b1584、b1585、b1586)及其规模表(b1587、b1588r01—r05)。本数据集是四集中多模态占比最高、时效占比最低的一集,两项占比的成因与处置口径在 B03、B04、B12 三个字段中写明。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-02-0000-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品工艺设计数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 数据集级汇总(下辖四子集) | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 02 产品工艺设计 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,与四子集同批定版同日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本数据集面向矿山装备结构件的工艺设计主线,覆盖「图纸—特征—工序—卡片—参数」的完整知识链条。甲方累积历史图纸约 63 万张,每一张图纸历史上都配有一张已审核签发的工艺卡片,天然构成成对的监督样本;备料分厂的工序集合固定且封闭,现掌握口径为 28 道,以工艺部门确认的正式工序字典为准。本数据集把成对的图纸与工艺卡结构化,把粗糙度、坡口、倒角、公差等符号表达的加工要求逐项成条,把中性层公式的展开长换算过程完整留存,供板材备料工艺智能设计与技术标准智能问答两个场景的验证使用(b1585、b1586) | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 以条或组计量的三子集合计 10.9 万条(指令微调 10 万条+偏好对齐 0.8 万组+基准评测 0.1 万条);预训练子集篇章级样本条数单列统计,【待填:平台统计值】 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 70.0 亿 Token(预训练子集,招标文件表格 3-2 原值,b1588r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB。图纸版面切片与矢量解析结果占存储主体,与 Token 量不成比例,说明见本卡末段 | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8)、.parquet、.md(版面还原后的图纸技术要求与卡片文本)、.png(图纸版面与局部视图切片,与文本按 doc_id 对齐)、.json(图元与尺寸的矢量解析结果)、.csv(工序字典与工装台账附表) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 跨子集公共字段为 drawing_no(图号)、part_no(零件号)、craft_card_no(工艺卡号)、process_code(工序码,取 28 道封闭字典)、layout_ref(版面定位)、lineage_id 六项,逐字段定义见《数据字典》GHY26691-LG-02-0003 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /02_process_design/{pretrain,sft,preference,benchmark}/;预训练子集内按 {drawing,craft_card,std_process,textbook} 四类来源分目录,各目录内按业务年份分层 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | <子集码>-<来源码>-<业务年份>-<批次号>-<序号>.jsonl,来源码取 DRW(设计图纸)/CRD(工艺卡片)/STP(标准工序文件)/TXB(专业资料)/EQP(设备工装台账) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经工艺部门与安全管理岗两级审批后开通只读访问;图纸原件类批次另需设计部门加签。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径(见 DC-01-0000 卡 A16) | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-02-0003、四张子集卡、《备料工序字典》process_dict_28_v1.csv、读取脚本 read_02.py、版面对齐示例 layout_demo/、术语词典 term_dict_02.json(含机械制图与焊接术语,来源 GB/T 3375、GB/T 324) | 1.1.6(b1924/b1925) |
| B01 模态构成 | 图纸版面图像 6.54 万条(测算 60%)、文本 2.72 万条(测算 25%)、表格 1.09 万条(测算 10%)、图元矢量结构 0.55 万条(测算 5%,按图像模态归类计入 B03) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(文本、图像、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 85%,对应 9.27 万条;实测值【待填:平台统计值】。绝大多数样本带图纸或图纸局部视图,本集是四集中占比最高的一集(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 25%,对应 2.725 万条;实测值【待填:平台统计值】。63 万张历史图纸横跨十余年,近三年新增只占其中一小部分。本集不单独追求时效占比达标:工艺知识的有效期远长于过程数据,为提高时效占比而削减历史样本会损失本集最有价值的部分;四集汇总后由制造过程与产品质量两集补平,汇总测算 60.7%(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 图纸识读与特征抽取、工序选择与排序、卡片字段生成、展开长与定额计算、工艺审查与差异比对五个主题,逐子集条数见各子集卡 B05 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 分子集填报,见各子集卡 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 图纸解析结构化文本 34.3%、历史工艺卡片与工序字典 25.7%、机械制图与工艺专业知识及标准规范 15.7%、设备与工装样板台账及压弯排料参数 12.9%、工艺变更与审查记录 7.1%、排料与定额计算过程记录 4.3%(按预训练子集 Token 构成折算,测算值) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 分子集填报。本集难度分层按零件类型(板材切割件、压弯件、带孔件、带坡口件)与板厚档位两维交叉设定 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 本集标签体系四层:第一层任务类型;第二层图纸要素类别(轮廓、孔与方孔、坡口、倒角、压弯线、粗糙度符号、公差标注、焊缝符号、材料牌号与板厚);第三层工序码(28 道封闭字典);第四层工装与设备资源(设备编码、工装压模号、样板号)。各层取值集与判定边界见第 4.2 节附表 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 分子集填报,长尾标签(条数低于总量 0.5%)在各子集卡 B12 中列明 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 四子集各不少于 3 条,全文见各子集卡附件 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、本集关键前提是原生图纸文件可解析。甲方的产品全生命周期管理系统原生图纸不支持整批导出,须按图号或项目开通只读读取;若接口开通范围受限,按「优先解析已导出的近期项目图纸 → 其余按项目批次分批开通 → 仍不可得的部分改以工艺卡片侧结构化文本为主、图纸侧以缩略图与关键尺寸摘要替代」三步回退,预训练子集总量不变而图纸解析类来源占比下调,缺口由工艺卡片与专业知识两类来源补足。该调整记入 C04 字段并在验证报告中说明对图纸识读类评测结果的影响。二、2021 年以前归档的焊接类工装图纸存在扫描件清晰度不足的情况,该部分样本的尺寸标注抽取可靠性低于整体水平,已在 quality_flags 中标记。三、排料优化主题的历史样本集中于常用板厚规格,薄板与超厚板规格覆盖偏少。四、专业资料以中文为主,少量外文设备资料未纳入本版。以上四项列入《下一版本修订计划》GHY26691-PL-02-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】;历史图纸跨十余年,是四集中时间跨度最长的一集 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 分子集填报。上限同本项目口径:预训练不高于 30%、指令微调不高于 45%、偏好对齐不高于 50%、基准评测为零(b1512、b1513) | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 产品全生命周期管理系统(零件图纸、物料清单、工艺文件)、工艺归档(历史工艺卡片、标准工序文件、工艺变更与审查记录)、设备档案与工装台账(设备编码、工装压模号、样板号)、工时定额系统(工序工时定额)、企业文档与外部标准(机械制图与焊接专业资料、国家标准)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 产品全生命周期管理系统按图号或项目开通只读读取并按接口增量抽取,原生图纸文件的解析在内网就地进行、不外传;归档卡片与标准工序文件按目录批量导入并登记来源;专业资料按授权范围离线导入;设备工装台账按只读视图抽取 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有(图纸、卡片、标准工序、台账、变更记录);授权使用(机械制图与焊接专业资料,许可凭证编号【待填】) | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记与许可核验 → 原生图纸矢量解析与版面还原(图元、尺寸、标注、图层、线型、视图投影关系)→ 符号语义解释(粗糙度、坡口、倒角、公差)→ 图纸与工艺卡配对校验(按图号与卡号)→ 工序名称统一到 28 道封闭字典 → 术语归一 → 分子集加工 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 分子集填报,见各子集卡 C05 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-02-0004-V1.0《多模态数据标注规范·产品工艺设计册》(预训练子集不适用) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 分子集填报;本集图纸要素类标注统一采用「本体驱动规则预标注全覆盖+人工复核+20% 双人交叉+专家仲裁」的组合 | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 分子集填报;图纸要素层一致性按要素类别分别统计,工序码层按序列编辑距离统计 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 分子集填报。黄金集由工艺部门定标,覆盖 28 道工序与四类零件 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 分子集填报;本集合成样本集中于薄板与超厚板规格的参数组合补充,不合成图纸本身 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 分子集填报;图纸类样本的增强限于版面裁切与局部视图抽取,不做几何变形,理由是几何变形会改变尺寸语义 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 三个训练侧子集均已与基准评测子集完成去重与相似度比对;本集隔离口径为「零件集合隔离+业务发生时间切分」,同一零件的图纸与卡片不得分落训练与基准两侧,结论编号【待填】 | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;图纸类样本的再分发限制从严,含标题栏信息的版面切片不得脱离平台导出 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-02 板材备料工艺智能设计(主)、SC-08 技术标准智能问答助手(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练、指令微调、偏好对齐、基准评测(分子集) | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 图纸要素抽取字段级准确率与召回率、工序序列正确率(按序列编辑距离与前后依赖校核双口径)、卡片字段完整率、展开长计算中间参数准确率与结果准确率(分别判分)、工艺审查差异项召回率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019 | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-02-0001 至 -0004 各报告第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | scripts/ 目录下读取、校验、抽样与基线训练脚本及运行说明;另附展开长确定性计算的参考实现 unfold_len_ref.py,用于区分「结果对但过程错」与「过程对但参数取错」两类错误 | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 板材备料工艺智能设计场景:输入零件图纸解析结果,输出工序序列候选与工装设备关联,效果数据见 GHY26691-VR-02-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本集的工序码取自备料分厂的封闭工序集合,不适合直接用于其他分厂或其他企业的工序设计能力评测;展开长样本依据甲方现行中性层公式版本,公式换版后旧版样本不适合用于新版公式的评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-03-0000(制造过程数据集,工序流转记录的引用来源);本集被 GHY26691-DC-01-0000 引用 | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-02-0001-V1.0 至 -0004-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见各质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填:分子集填报】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填:条件通过时填写】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-02-0001-V1.0 至 -0004-V1.0 | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见各验证报告第 3 章 | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 逐场景判定,覆盖 SC-02、SC-08 | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 24734—2009;GB/T 14689—2008;GB/T 4457.4—2002;GB/T 4458.4—2003;GB/T 131—2006;GB/T 1800.1—2020;GB/T 1804—2000;GB/T 324—2008;GB/T 985.1—2008;GB/T 985.2—2008;GB/T 1591—2018;GB/T 699—2015 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—研发设计类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;图纸类样本按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;图纸标题栏含人员信息,按 F04 处置 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 标题栏中的设计、校核、审批人员姓名按替换法处理;客户名称按泛化法处理到矿区与工作面类型层级;企业标识与图框版式保留,理由是版式本身是解析规则的判定依据。依据 GB/T 37964 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查;专业资料部分按授权范围使用,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | 《数据许可与合规审查规范》GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 工艺设计业务角色、设计业务角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-02 前缀检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意;图纸类样本原则上不对外共享 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:清单摘要、内容根摘要与签名值由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016),签名算法 SM2(GB/T 32918.1—2016) | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-02-V1.0.pkg,内部结构见第八部分 | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
本集的存储总量与 Token 量不成比例,须在卡中说明以免被误读为计量错误。原因是图纸版面切片与矢量解析结果占存储主体,而它们本身不产生 Token——产生 Token 的是它们的结构化描述与标注文本。我方不采用把图像折算为等效 Token 的做法,理由是折算系数无公认依据,一旦采用,规模数字就无法被第三方复算(计量规则见技术方案 T1C 节表 2)。
本卡回应招标文件 3.2.6.4.3 制造过程数据集要求(b1589、b1590、b1591)及其规模表(b1592、b1593r01—r05)。本数据集是四集中唯一以时序模态为主的一集,时序样本的构造方式(三段式)在 A12 与 C04 两个字段中写明,这一构造方式同时决定了本集的样本可读性与可复算性。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-03-0000-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 制造过程数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 数据集级汇总(下辖四子集) | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 03 制造过程 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,与四子集同批定版同日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本数据集面向长周期、多工序、跨车间的制造过程主线,覆盖热处理炉次、焊接焊道、工单工序流转与在役装备运行四类过程事实。本集要解决的核心困难是过程事实与物理对象对不上:热处理的炉次、工件、材料批次、实际曲线与检测结果之间没有稳定的一炉一档关联;焊接参数流是连续的而工件与焊道是离散的,一件大型单部件焊缝可达数百条、一条焊缝多层多道可焊四道,两者对不上就无法做同型部件的参数横向比对;在役装备已采集振动、温度、压力与冷却水流量,但「发生了什么故障、那段时间的数据是什么样」这一配对关系目前是空的。本数据集把过程参数按炉次、焊道、工单、设备编码四类对象切段、配证据、成样本,供热处理过程控制、焊接过程控制与刮板输送装备健康诊断三个场景的验证使用(b1590、b1591) | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 以条或组计量的三子集合计 16.2 万条(指令微调 15 万条+偏好对齐 1 万组+基准评测 0.2 万条);预训练子集篇章级样本条数单列统计,【待填:平台统计值】 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 105.0 亿 Token(预训练子集,招标文件表格 3-3 原值,b1593r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB。原始波形不进入样本正文而以段落指针保留,发布态体积远小于源系统时序库的体积 | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8)、.parquet、.csv(降采样后的时序段,一段一文件,首行为测点与量纲)、.json(段落元数据与统计描述)、.png(设备与装炉码装图像、曲线渲染图) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 时序类样本一律三段式:第一段 seg_ref 为原始段落的指针与元数据(设备编码、测点标识、时间窗、工况段、采样粒度档位);第二段 seg_stats 为段落的结构化统计描述(设定值、实际值、偏离幅度与方向、持续时长、分段趋势);第三段 task_output 为任务相关的参考输出(偏离判定、可调量建议、检查顺序)。原始波形不进入样本正文。跨子集公共字段另有 heat_no(炉次号)、weld_seam_id/weld_pass_id(焊缝与焊道标识)、work_order_no(工单号)、device_code(设备编码)、lineage_id。逐字段定义见《数据字典》GHY26691-LG-03-0003 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /03_manufacturing/{pretrain,sft,preference,benchmark}/;预训练子集内按 {heat_treat,welding,equipment,workorder,maintenance,metering} 六类来源分目录,目录内按业务年份与设备编码分层 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | <子集码>-<来源码>-<设备编码>-<业务年月>-<段序号>.jsonl,来源码取 HT(热处理)/WD(焊接)/EQ(在役装备)/WO(工单流转)/MT(运维知识)/MS(装载计量) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经生产管理部门与安全管理岗两级审批;在役装备测点数据批次另需远程运维平台管理方加签。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-03-0003、四张子集卡、《测点与量纲对照表》tag_dict_v1.csv、《工况分段规则》seg_rule_v1.json、读取脚本 read_03.py、时序段回溯脚本 seg_trace.py、术语词典 term_dict_03.json | 1.1.6(b1924/b1925) |
| B01 模态构成 | 时序 9.72 万条(测算 60%)、文本 3.24 万条(测算 20%)、图像 2.27 万条(测算 14%)、表格 0.97 万条(测算 6%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 4(时序、文本、图像、表格);本集是四集中时序模态的唯一承载集,四集汇总的模态种类数由本集与产品质量集共同撑到不低于 3 种的要求之上(b1601r02、b0683) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 80%,对应 12.96 万条;实测值【待填:平台统计值】。本集样本大多包含时序段落或设备图像(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 85%,对应 13.77 万条;实测值【待填:平台统计值】。本集是四集中时效占比最高的一集,原因是采集覆盖范围近年才逐步扩展,更早期间的过程数据在测点覆盖与采样粒度上多数不满足入集条件(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 热处理曲线偏离识别与处置、焊接参数窗口与偏差归因、设备健康异常判断与检查顺序、工单与工序流转、计量与装载登记五个主题,逐子集条数见各子集卡 B05 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 分子集填报。时序类样本的长度分布按段落时长与统计描述字数两个口径分别统计 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 热处理炉次过程时序 29.5%、焊接设备与机器人参数时序 25.7%、在役装备运行时序与报警日志 20.0%、工单工序流转与报工记录 12.4%、运维与检修知识及故障名录 8.6%、装载码装与计量校验记录 3.8%(按预训练子集 Token 构成折算,测算值) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 分子集填报。本集难度分层按「单段判别/同批次横向比对/跨批次归因」三层设定 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 本集标签体系三层:第一层任务类型;第二层异常或偏离类别(热处理按升温段偏离、保温段超限、冷却速率异常、装炉条件异常分类;焊接按电流电压偏离、送丝速度偏离、焊接速度偏离、摆幅与停留时间偏离、预热与层间温度不足分类;设备健康按振动特征异常、温度异常、压力异常、冷却水流量异常、耦合干扰段分类);第三层处置动作与证据等级(四档证据分级)。取值集与判定边界见第 5.2 节附表 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 分子集填报 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 四子集各不少于 3 条,全文见各子集卡附件 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、部分设备仅有分钟级均值,粒度不足以支持细粒度偏离判定;样本在 seg_ref.granularity 中标注粒度档位,评测时按档位分层统计,避免把粒度不足造成的误差记到模型能力上。二、焊接侧最影响气孔与裂纹的预热温度与层间温度目前只能人工抽检、纸质记录,须补齐采集手段;在新增感知设备到位之前,相关样本按人工记录补录,覆盖度与可信度在样本的证据等级字段中标明。三、三机联动使在役装备振动信号含有来自其他设备的耦合干扰,耦合干扰段单独标记并在评测中单列统计;矿方传感器损坏后往往不予补装,造成测点连续性缺口,缺口区间以缺失标记显式保留、不做插补。四、制造执行系统的报工时点相对实际作业有滞后,样本以实际作业时间区间表示而不按报工时点对齐,这一处置使样本与时序段可对齐,但也意味着报工时点本身不可作为时间基准使用。五、装载与码装、计量校验当前无结构化记录,按增设填报入口方式补录,首版覆盖度低于其他来源。以上五项列入《下一版本修订计划》GHY26691-PL-03-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 分子集填报。上限同本项目口径;本集合成样本仅用于稀少异常类型的补充,不合成正常段落 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 数据采集与监控系统(自动化产线与热处理设备过程参数)、物联网与设备数据平台(测点配置、时序数据汇聚、设备报警记录,实际与设定温度、中频电源功率频率电流电压等测点采样周期通常为秒级)、热处理群控(炉次工单下发、开炉与完工记录、工艺程序下发)、焊接产线控制系统与焊接机器人控制器(电流、电压、送丝速度、焊接速度、摆幅、左右停留时间)、装备远程运维平台(在役装备测点配置、时序数据与事件记录)、制造执行系统(工单、工序流转与报工)、售后服务与备件管理系统(服务工单、派工与备件出库)、企业文档(运维与检修知识、故障名录与机理)、热处理分厂记录与计量管理(装载码装、计量校验)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 时序类按只读接口取数,秒级原始数据按工艺段降采样后编码,原始段落保留指针供回溯;炉次与工单类按只读增量接口按日抽取;知识文档按目录批量导入并登记来源;无结构化记录的装载码装与计量校验按增设填报入口由系统预填、经手人确认后补录。采集范围按各场景数据要求分批扩展,首期以试点炉型、试点产线与试点车间所需设备为准,扩展清单以现场勘察结论为准 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有(全部来源);在役装备数据涉及矿方设备运行情况的部分按授权使用处理,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记 → 时间基准统一与时钟校正 → 对象主键贯通(炉次、焊缝与焊道、工单、设备编码)→ 工况分段与降采样编码 → 段落统计描述生成 → 与质量结论配对(配对不成立的段落单列保留)→ 分子集加工 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 分子集填报。降采样口径:升温段 10 秒一点、保温段 30 秒一点、冷却段 10 秒一点;焊接按焊道切段,段内保留全部采样点的统计量与偏离描述 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-03-0004-V1.0《多模态数据标注规范·制造过程册》(预训练子集不适用) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 分子集填报;本集偏离判定类标注采用「规则预标注+工艺人员复核+异常段双人交叉+专家仲裁」组合 | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 分子集填报;偏离类别层按标签一致率统计,处置动作层按动作集合重叠度统计 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 分子集填报。黄金集由工艺与检修部门共同定标 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 分子集填报 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 分子集填报;时序类样本的增强限于时间窗平移与同工况段重组,不做幅值缩放,理由是幅值缩放会改变偏离判定的物理含义 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 三个训练侧子集均已与基准评测子集完成去重与相似度比对;本集隔离口径为「炉次集合与部件集合隔离+业务发生时间切分」,同一炉次或同一部件的段落不得分落训练与基准两侧,结论编号【待填】 | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;在役装备数据中涉及矿方生产情况的部分对外共享须另经矿方同意 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-04 热处理过程控制智能化(主)、SC-05 焊接过程控制智能化(主)、SC-06 刮板输送装备健康诊断智能化(主)(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练、指令微调、偏好对齐、基准评测(分子集) | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 曲线偏离识别准确率与误报率、偏差归因结论与专家结论一致率、处置建议采纳率、检查顺序合理性人工评分、横向比对任务的检出排序质量。各指标按采样粒度档位分层统计 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019 | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-03-0001 至 -0004 各报告第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | scripts/ 目录下读取、校验、抽样与基线训练脚本;另附段落回溯脚本 seg_trace.py,用于由 seg_ref 指针取回原始波形区间 | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 热处理过程控制场景:输入某炉次的设定程序与实际曲线段,输出偏离判定与可调量建议,并给出同材料批次、同装炉方式的历史炉次横向比对结论,效果数据见 GHY26691-VR-03-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本集的偏离判定基线取自甲方现行作业指导书设定的固定工艺程序,不适合用于评测「参数该取多少」一类正算能力;热处理工艺参数本身无自由度,淬火与回火温度、保温时间、淬火次数与冷却时间均按作业指导书固定,本集样本的价值在于执行条件差异而不在参数选择 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-04-0000(产品质量数据集,质量结论的来源与根因追溯的引用方);GHY26691-DC-02-0000(工艺卡参数区间的引用来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-03-0001-V1.0 至 -0004-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见各质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填:分子集填报】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填:条件通过时填写】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-03-0001-V1.0 至 -0004-V1.0 | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见各验证报告第 3 章 | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 逐场景判定,覆盖 SC-04、SC-05、SC-06 | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 231.1—2018;GB/T 228.1—2021;GB/T 3375—1994;GB/T 324—2008;GB/T 1591—2018 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—生产制造类、生产经营数据—设备运维类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;在役装备涉及矿方生产情况的数据按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密、重要行业数据;部分记录含经手人信息,按 F04 处置 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 操作工、检修人员与经手人姓名按替换法处理;矿方名称与井下工作面位置按泛化法处理到矿区层级;设备编码保留,理由是设备编码是对象主键,泛化后样本无法与时序段对齐。依据 GB/T 37964 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | 《数据许可与合规审查规范》GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 工艺业务角色、生产管理角色、设备与检修角色、售后服务角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-03 前缀检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意,涉及矿方生产情况的部分另经矿方同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016),签名算法 SM2(GB/T 32918.1—2016) | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-03-V1.0.pkg,内部结构见第八部分 | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
本集与产品质量数据集的计量边界需在卡中交代清楚,否则两集规模相加会被质疑重复计量。边界是这样划的:过程参数段在本集中计量,质量结论在产品质量集中计量;产品质量集的根因追溯样本以 seg_ref 指针引用本集的段落,引用不产生新的计量;反向地,本集样本若以质量结论作为标签,该结论以编号引用而不复制正文。两集各自的 D10 字段互相指向,第三方可据此核对无重复计量。
本卡回应招标文件 3.2.6.4.4 产品质量数据集要求(b1594、b1595、b1596)及其规模表(b1597、b1598r01—r05)。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-04-0000-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品质量数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 数据集级汇总(下辖四子集) | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 04 产品质量 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,与四子集同批定版同日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本数据集面向从来料到交检的全流程质量主线,覆盖检验项目与检验记录、焊接缺陷图像、无损检测报告、原材料化验、不合格品处置与质量追溯链六类对象。本集要解决的困难有两处:缺陷描述目前为文字、未与工艺参数关联,交检发现咬边、未熔合、气孔或裂纹时无法快速调取同型部件的参数横向比对;纸质检测报告数量可观但尚未数字化,而这部分恰是无损检测结论的主要载体。本数据集把质量结论与被判定对象(工件、焊缝与焊道、炉次、材料批次)绑定,把缺陷标注口径统一到现行判据,并把根因追溯链以引用方式接到制造过程数据集的参数段上,供焊接过程控制、热处理过程控制与装备健康诊断三个场景的验证使用(b1595、b1596) | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 以条或组计量的三子集合计 25.85 万条(指令微调 24 万条+偏好对齐 1.6 万组+基准评测 0.25 万条);预训练子集篇章级样本条数单列统计,【待填:平台统计值】 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 164.0 亿 Token(预训练子集,招标文件表格 3-4 原值,b1598r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB。缺陷图像与纸质报告扫描件占存储主体 | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8)、.parquet、.png/.jpg(缺陷图像、交检拍照、纸质报告扫描件)、.md(版面还原后的报告文本)、.json(缺陷位置坐标与标注多边形)、.csv(检验项目清单与缺陷名录附表) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 跨子集公共字段为 construct_no(施工号)、product_no(产品号)、part_no(零件号)、weld_seam_id/weld_pass_id、heat_no、material_batch_no(材料批次号)、inspect_record_no(检验记录号)、defect_code(缺陷码)、evidence_ref(证据指针,可指向本集原文定位或制造过程集的参数段)、lineage_id。逐字段定义见《数据字典》GHY26691-LG-04-0003 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /04_quality/{pretrain,sft,preference,benchmark}/;预训练子集内按 {inspect,weld_defect,ndt,material,nonconform,traceability} 六类来源分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | <子集码>-<来源码>-<业务年月>-<批次号>-<序号>.jsonl,来源码取 IN(检验记录)/WDF(焊接缺陷)/NDT(无损检测)/MTL(原材料化验)/NCR(不合格品处置)/TRC(追溯链) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经质量管理部门与安全管理岗两级审批。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-04-0003、四张子集卡、《缺陷名录与分级判据对照表》defect_dict_v1.csv、《检验项目清单》inspect_items_v1.csv、读取脚本 read_04.py、标注多边形校验脚本 verify_polygon.py、术语词典 term_dict_04.json | 1.1.6(b1924/b1925) |
| B01 模态构成 | 图像 11.11 万条(测算 43%)、文本 10.08 万条(测算 39%)、表格 3.10 万条(测算 12%)、时序 1.55 万条(测算 6%,检测设备输出的时序曲线) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 4(图像、文本、表格、时序) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 60%,对应 15.51 万条;实测值【待填:平台统计值】。缺陷图像、交检拍照与纸质报告扫描件构成主要部分(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 70%,对应 18.095 万条;实测值【待填:平台统计值】。质量管理系统新上线,结构化检验记录主要产生于近期;更早期间以纸质报告为主,数字化批次按项目重要性分批推进(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 焊接缺陷分类与定级、检验项目与判定规则、质量根因追溯链、无损检测报告生成与复核、不合格品处置与返修决策五个主题,逐子集条数见各子集卡 B05 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 分子集填报 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 检验项目与检验记录(含交检拍照)28.0%、焊接缺陷图像的结构化描述与标注文本 23.2%、无损检测报告 17.7%、原材料化验与来料批次记录 12.8%、不合格品票与返修处置记录 11.0%、质量追溯链与质量报告 7.3%(按预训练子集 Token 构成折算,测算值) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 分子集填报。本集难度分层按「单因素判别/多因素归因/跨工序追溯」三层设定 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 本集标签体系三层:第一层任务类型(5 类);第二层缺陷或问题大类(焊接缺陷按现行判据的十一类缺陷与其检出手段对应关系取值,外观缺陷按企业外观缺陷目录取值,材料问题按化验项取值);第三层具体缺陷项与严重度等级。每个标签给出定义、判定边界与典型图例,取值集见第 6.2 节附表 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 分子集填报;长尾标签(条数低于总量 0.5%)在各子集卡 B12 中列明 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 四子集各不少于 3 条,全文见各子集卡附件 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、低频缺陷类型样本量偏少,模型在这些类型上的判别可靠性低于常见缺陷;基准子集对天然稀少但后果严重的缺陷类别以人工构造样本补充,构造样本单列标记并在评测报告中与真实样本分别统计、不混合计算准确率。二、整改建议与处置决策类样本带甲方既有处置习惯,迁移到其他工艺条件时需重新校准。三、跨工序追溯类样本依赖上游工序记录的完整性,上游记录缺失的案例未纳入本版;质量追溯链的断链处在样本中显式标注而不做补全。四、缺陷判据换版时标注规范随之升版,旧版样本保留其当时所依据的判据版本号、不做追溯重标;代价是同一缺陷在不同版本样本中可能有不同标签,收益是每条样本的标签都能对应到一份当时有效的判据,评测时可按判据版本分层。五、纸质检测报告的实际存量尚待盘点,数字化工作量与三档交付顺序以盘点结果为准。以上五项列入《下一版本修订计划》GHY26691-PL-04-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 分子集填报。上限同本项目口径;本集合成样本集中于低频缺陷类型的补充,基准子集为零 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 质量管理系统(检验项目与记录、交检拍照、质量报告、不合格品与返修票据)、产线图像采集(焊接缺陷图像)、纸质归档(超声与磁粉检测报告、化验报告)、企业资源计划系统(来料批次与材料主数据)、协同办公系统(不合格品票与改造方案流转)、检测设备数据接口(自动硬度计、无损检测设备输出)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 质量管理系统按只读增量接口按日抽取;纸质检测与化验报告扫描后经多模态文档解析导入,抽取结果须回原文定位;缺陷图像按产线采集点取图并与焊缝焊道标识关联;检测时序由检测设备数据接口采集。工艺编制时标注的关键工序与重要尺寸推送到质量管理系统形成的检查项,随检验记录一并入集并保留与工艺卡的对应关系 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有(全部来源) | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记 → 纸质件版面还原与字段抽取(抽取结果回原文定位)→ 对象主键贯通(施工号、产品号、焊缝焊道、炉次、材料批次)→ 缺陷名录与分级判据统一、位置口径统一到焊缝与焊道坐标 → 本体驱动规则预标注 → 人工标注与交叉标注 → 专家仲裁 → 一致性校验 → 与过程参数段配对(以指针引用)→ 分子集加工 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 分子集填报。纸质件解析:版面分区后按表格、正文、签章三类分别抽取;缺陷图像按标注多边形裁切局部视图,保留原图指针 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-04-0004-V1.0《多模态数据标注规范·产品质量册》(预训练子集不适用) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 分子集填报;预标注覆盖全部样本,人工标注复核,其中 15% 的样本做双人交叉标注,不一致样本进专家仲裁 | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 分子集填报;缺陷类别层与严重度层分别统计,严重度层的不一致样本一律进仲裁 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 分子集填报。黄金集由质量管理部门定标,按缺陷类别全覆盖 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 分子集填报;低频缺陷类型按模板化生成与拒绝采样补充,种子取自专家定标样本 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 分子集填报;缺陷图像的增强限于亮度与对比度的有限调整及旋转镜像,不做形变,理由是形变会改变缺陷形貌特征 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 三个训练侧子集均已与基准评测子集完成去重与相似度比对;本集隔离口径为「部件集合与检验记录集合隔离+业务发生时间切分」,同一工件的缺陷图像不得分落训练与基准两侧,结论编号【待填】 | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-05 焊接过程控制智能化(主)、SC-04 热处理过程控制智能化(主)、SC-06 刮板输送装备健康诊断智能化(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练、指令微调、偏好对齐、基准评测(分子集) | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 缺陷分类准确率(按缺陷类别分层)、缺陷定级与判据一致率、检验判定规则问答准确率、根因追溯链完整率与根因结论一致率、报告字段级完整率与表述规范性人工评分 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019 | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-04-0001 至 -0004 各报告第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | scripts/ 目录下读取、校验、抽样与基线训练脚本;另附标注多边形校验脚本与缺陷码映射工具 | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 焊接过程控制场景:输入焊缝超声检测结果与同型部件参数段引用,输出缺陷定级、判据依据与参数差异清单,效果数据见 GHY26691-VR-04-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本集不作为缺陷检出能力的唯一评测依据:本期图像采集承担的是标定后的视觉测量与形貌留痕,缺陷判定仍由无损检测与检验岗位负责,样本的标签来源于检验结论而不是图像本身。本集样本的判据版本绑定甲方现行判据,判据换版后须按版本分层评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-03-0000(制造过程数据集,参数段的引用对象);GHY26691-DC-02-0000(工艺卡中关键工序与重要尺寸的来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-04-0001-V1.0 至 -0004-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见各质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填:分子集填报】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填:条件通过时填写】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-04-0001-V1.0 至 -0004-V1.0 | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见各验证报告第 3 章 | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 逐场景判定,覆盖 SC-04、SC-05、SC-06 | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 19418—2003;GB/T 11345—2023;GB/T 3323.1—2019;GB/T 231.1—2018;GB/T 228.1—2021;GB/T 324—2008;GB/T 1591—2018 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—质量管理类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;不合格品与失效分析类样本按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;检验记录与报告含人员信息,按 F04 处置 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 检验人员、复核人与签章人姓名按替换法处理;签章图像按遮蔽法处理但保留签章位置框,理由是位置框是版面解析的判定依据;客户名称按泛化法处理。依据 GB/T 37964 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | 《数据许可与合规审查规范》GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 质量管理角色、工艺业务角色、检验岗、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-04 前缀检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016),签名算法 SM2(GB/T 32918.1—2016) | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-04-V1.0.pkg,内部结构见第八部分 | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
四张汇总卡的 B02 字段合起来才回答得了模态种类数这一项指标。招标文件表格 3-5 写「数据模态不低于 3 种」(b1601r02),而项目数据质量目标与业务范围两处写「数据集涵盖超过 3 种模态(时序数据、图像、文本、视频等)」(b0670、b0683)。
我方按较高要求承接,建设文本、图像、时序、视频四种模态。视频模态主要用于焊接产线与装配现场的工序记录,规模最小,按场景多样性语料的定位建设,在制造过程集与产品质量集的预训练子集中承载,不追求其在条数上的占比,因此四张汇总卡的 B01 字段未将其单列为主模态;视频样本的条数与占比在各自子集卡的 B01 字段中单列。
本部分出供需计划数据集(业务域 01)的四张子集卡。四子集的规模依招标文件表格 3-1 原值:预训练 276 亿 Token、指令微调 40 万条、强化学习偏好 3.2 万组、基准评测 0.4 万条(b1583r02—r05)。各子集的任务类型分解依技术方案 T1C 节第三部分第 3 小节,本部分不重述分解理由,只把分解结果填入卡的 B05 与附表。
本卡对应供需计划数据集的预训练生产任务(b1565、b1566),回应 b1580、b1581 所列业务数据范围与经验显性化要求,规模依 b1583r02。预训练子集为无标注连续语料,C06—C09 四个标注类字段不适用,卡中如实填「不适用」而非留空——留空在说明文档维度的指标核验中按缺项计(b1912—b1958);本卡字段表第三列仍标注 1.3.4(b1944/b1945),表示该指标在本子集上按「不适用」判定而非按缺项扣分。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-01-0001-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 供需计划数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 预训练 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 01 供需计划 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集面向「以销定产、以产定采」的供需协同业务主线,向通用大模型注入订单到交付这条链上的领域知识。语料取自销售与合同文本、订单与排产记录、矿方工况与地质资料、产品型谱与物料主数据、库存采购记录、协同经验与会商结论整理、以及许可范围内的行业政策公开语料七类来源,经文档解析、版面还原、对象主键贯通与结构化文本化转换后形成连续语料。装备按矿井工作面条件定制,工作面按超长、常规、大采高、薄煤层等类型分化,不同类型对应不同的选型校核方法;本子集中与选型相关的语料按工作面类型组织,使模型在继续预训练阶段即接触到这一分化结构 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 【待填:平台统计值,篇章级样本条数】。按平均 3,000 Token 一条测算约 920 万条,该测算值仅用于说明篇章切分粒度,不计入占比指标分母(口径见技术方案 T1C 节第七部分) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 276.0 亿 Token(b1583r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8,一行一条语料)、.parquet(列存,供批量读取)、.md(版面还原后的合同、方案与资料文本)、.png(矿方资料扫描件与报表图片的版面切片,与文本按 doc_id 对齐)、.csv(库存口径映射表) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 每条记录含 doc_id、source_type、biz_key、biz_time、text、layout_ref、term_refs、quality_flags 共 8 个字段,逐字段定义见本卡附表 A10-3 与《数据字典》GHY26691-LG-01-0003 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /01_supply_demand/pretrain/{contract,order,mine_doc,catalog,inventory,experience,public}/{year}/ 七类来源各一目录,目录内按业务年份分层 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PT-<来源码>-<业务年份>-<批次号>-<序号>.jsonl,来源码取 CTR(销售与合同)/ORD(订单与排产)/MIN(矿方工况与地质)/CAT(型谱与物料主数据)/INV(库存与采购)/EXP(协同经验整理)/PUB(公开语料) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经数据所有权部门与安全管理岗两级审批;含商务条款的 CTR 批次另需经营管理部门加签。受理时限 2 个工作日,加签批次 3 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,工作日 9:00—18:00 受理,一般问题 4 小时内响应,数据内容类问题 1 个工作日内答复 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-01-0003、语料读取脚本 read_pretrain_01.py、术语词典 term_dict_01.json、库存口径映射表 inv_mapping_v1.csv、版面对齐示例 layout_demo/ | 1.1.6(b1924/b1925) |
| B01 模态构成 | 文本【待填】条(测算占比 88%)、扫描件与报表版面图像【待填】条(测算 9%)、表格【待填】条(测算 3%)。本子集以条计量的样本不计入占比指标分母,模态构成单列统计 | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(文本、图像、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 【待填:平台统计值】。本子集按 Token 计量,占比指标在以条计量的三子集与四集汇总层面核算(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 【待填:平台统计值】。按业务发生时间、以发布日前推 36 个月判定 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 六主题:销售合同与技术协议、订单排产与产销协同、矿方工况与地质条件、产品型谱与物料主数据、库存采购与到货、供需协同经验与会商结论。逐主题 Token 量见本卡附表 A10-4 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 中位数【待填】Token,90 分位【待填】Token,最长【待填】Token。切分目标长度 512 Token,长文档按语义段切分后滑窗拼接 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 销售与合同文本 68 亿 Token(24.6%)、订单排产与产销协同 54 亿(19.6%)、客户与矿方工况地质资料 42 亿(15.2%)、产品与部件型谱及物料主数据与价格 38 亿(13.8%)、库存采购与到货记录 34 亿(12.3%)、供需协同经验与会商结论整理 26 亿(9.4%)、行业与政策公开语料 14 亿(5.1%)。合计 276 亿 Token,构成比例为测算值(依技术方案 T1C 节表 5) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 不适用(预训练语料不设难度分层) | 1.2.2(b1929/b1930) |
| B09 标签体系 | 不适用(无标注连续语料)。仅保留来源码与主题码两类元数据标记,取值集见本卡附表 A10-4 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 不适用 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 条,全文见本卡附件一 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、配套接口参数(截深、截高、推移步距一类)的会商结论无规范电子留痕,EXP 类语料只能通过历史方案回溯与结构化访谈部分还原,覆盖度以项目为单位统计、近三年项目优先;未还原的项目在 quality_flags 中标记为 interface_param_absent,不做插补。二、库存口径多套并存,入集前统一到同一时点口径,原始口径差异在 source_ref 中保留但不参与统计;映射规则随集发布,映射本身是一次有损转换,依赖原始口径的分析不应基于本子集进行。三、行业与政策公开语料的许可核验逐条进行,不可商用的内容不入集,因此该类来源的实际 Token 量可能低于测算值 14 亿,缺口由 CTR 与 ORD 两类来源补足。四、客户关系管理系统正在上线、历史数据较少,项目与商机类语料集中在近三年。以上四项列入《下一版本修订计划》GHY26691-PL-01-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 30%(b1512)。本子集的合成用途限于两处:一是把结构化记录转为自然语言陈述句式(保留原字段映射,属格式转换而非内容生成);二是对覆盖偏少的工作面类型补充选型知识陈述,种子取自既有方案与型谱,合成方法与模型版本标识由平台记录 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 协同办公系统(合同、技术协议、投标与选型方案、制度文件)、企业资源计划系统(订单、物料主数据、物料清单、需求计划、采购订单、库存账与价格)、制造执行系统(排产与工序流转)、客户关系管理系统(项目与商机)、企业文档与项目归档(矿方工况与地质资料)、产品全生命周期管理系统(产品与部件型谱)、仓储管理与物流执行系统(库存批次与出入库流水)、结构化访谈与历史方案回溯(协同经验与会商结论)、公开渠道(行业与政策语料)。逐源的采集时间范围与所属单位登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 业务系统按已授权数据域开通只读接口或数据库只读视图,按日增量抽取;协同办公与企业文档按目录批量导出后文档解析,附件原文留存并建立版面定位;矿方纸质资料扫描后版面还原;无系统承载的协同经验按《供需协同经验采集模板》组织结构化访谈与历史方案回溯,单独成批次、不与系统导出批次混同计量;公开语料按许可范围离线导入并逐条登记许可凭证 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有(合同、订单、库存、型谱、访谈成果);授权使用(矿方工况与地质资料,许可凭证编号【待填】);公开许可(行业与政策语料,逐条登记来源与凭证) | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记与许可核验 → 多模态文档解析与版面还原 → 对象主键贯通(施工号、合同号、物料编码、项目号)→ 库存与时间口径统一 → 敏感商务条款分级处置与去标识化 → 术语归一 → 语义切分与滑窗拼接 → 结构化记录的自然语言转述 → 去重 → 质检门控 → 定版。本子集未经标注、合成占比受 B14 上限约束、未做数据增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 切分粒度按语义段,目标长度 512 Token,滑窗重叠 64 Token;表格按行列结构还原为文本并保留表头语义;合同类文档按条款号分块;扫描件按版面分区(标题、正文、表格、签章)分别抽取;去重按段落级最小哈希相似度阈值 0.85 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | 不适用(无标注) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 不适用 | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 不适用 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 不适用 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:若本版含合成样本则填写种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-01-0004 基准评测子集完成去重与相似度比对,命中样本从本子集移除;隔离口径为项目集合隔离+业务发生时间切分,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;含价格条款的语料另受 F08 约束;用于模型训练产出的模型权重归属按合同约定;无署名要求 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-01 产品智能选型、SC-03 库存控制智能化、SC-11 合同合规审查智能助手、SC-10 决策数据智能问答助手、SC-07 管理制度智能问答助手、SC-09 标书智能问答助手(b0684)。本子集承担领域知识注入,场景建设不在本包范围内 | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 供需计划领域知识探针准确率(探针题目覆盖六个业务主题)、保留语料困惑度变化率、术语一致性命中率。计算口径:探针按单选与填空两类分别统计;困惑度在未参与训练的保留集上计算 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019,含评测环境、推理参数、随机种子与指标脚本版本(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 基座模型与继续预训练模型在供需计划知识探针上的对比结果见《数据集验证报告》GHY26691-VR-01-0001 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 继续预训练脚本 cpt_01.sh 与数据加载示例,路径见 A17 配套件清单 | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 产品智能选型场景的参数识读子任务:输入矿方生产规划与地质条件报告文本,输出工况参数表草稿,效果数据见 GHY26691-VR-01-0001 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集为无标注连续语料,不适合直接用于有监督指令微调或作为评测集使用;库存口径经有损映射,不适合用于需要原始口径的账务类分析 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-01-0002(指令微调子集)、GHY26691-DC-01-0004(基准评测子集)、GHY26691-DC-02-0001(产品工艺设计预训练子集,型谱与图纸知识的互补来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-01-0001-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 保真度、完备性、规整性、均衡性、可用性、可信性的实测值与门限对照见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填:通过/条件通过/不通过】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填:条件通过时按缺陷编号列出及其关闭计划】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-01-0001-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章,逐场景判定(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 35295—2017;GB/T 38667—2020;GB/T 43697—2024 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—经营管理类、生产经营数据—供应链类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;含客户名称与价格条款的批次按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;部分语料含人员信息(联系人、经手人) | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 客户单位名称按泛化法处理到矿区与工作面类型层级;联系人与经手人姓名、联系方式按替换法处理;价格条款按分档映射法处理,保留可比性不保留原值。依据 GB/T 37964—2019 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查;公开语料按许可范围使用,不可商用内容不入集,核查记录编号【待填】(b0804r06) | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | 《数据许可与合规审查规范》GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 营销业务角色、生产计划角色、供应链角色、数据加工岗、评测岗;含价格条款批次另限经营管理部门授权人员 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-01-0001 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01 文件清单摘要 | 【待填:清单文件 SM3 摘要值】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G02 内容根摘要 | 【待填:按清单顺序归并计算的根摘要】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G03 摘要算法 | SM3(GB/T 32905—2016) | 1.3.5(b1946/b1947);主依据 b1568 |
| G04 签名算法 | SM2(GB/T 32918.1—2016) | 1.3.5(b1946/b1947);主依据 b1568 |
| G05 签名值 | 【待填】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G06 签名时间 | 【待填:YYYY-MM-DD hh:mm:ss】 | 1.3.5(b1946/b1947);主依据 b1568 |
| G07 自描述封装文件 | GHY26691-01-PT-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填:数据集与模型版本血缘追溯标识】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-3 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
doc_id | 字符串 | PT01-<来源码>-<业务年份>-<批次号>-<序号> | 语料条唯一标识,与文件名同构 | 非空、全集唯一;格式正则校验 |
source_type | 枚举 | CTR/ORD/MIN/CAT/INV/EXP/PUB | 来源码,与 A14 取值集一致 | 非空、在枚举内 |
biz_key | 对象 | {construct_no?, contract_no?, material_code?, project_no?} 至少一项非空 | 本条语料所述业务事实绑定的业务对象主键 | 至少一项非空;主键须在《对象主键映射表》GHY26691-LG-00-0004 中存在 |
biz_time | 日期 | YYYY-MM-DD 或 YYYY-MM | 业务发生时间,非入库时间;仅可定位到月的填月 | 非空;不得晚于发布日;精度档位记入 quality_flags |
text | 文本 | UTF-8,长度 ≤ 4096 Token | 发布态语料正文 | 非空;长度上限校验;禁止出现未脱敏的姓名与原始价格数值 |
layout_ref | 对象 | {file, page, bbox} | 扫描件或版面还原文本的原文定位 | 来源为 MIN/CTR 的扫描件批次必填;bbox 四值在页面范围内 |
term_refs | 数组 | 术语词典条目 id 列表 | 本条命中的归一术语 | 每个 id 须在 term_dict_01.json 中存在 |
quality_flags | 数组 | interface_param_absent/inv_caliber_mapped/time_precision_month/ocr_low_conf/price_bucketed | 本条已知的质量与处置标记 | 取值在枚举内;ocr_low_conf 必须同时有 layout_ref |
附表 A10-3 数据来源:字段设置依本卡 A12;来源码依 A14;标记枚举依 B12 所列局限性与 F04 去标识化处置。
附表 A10-4 本子集主题码取值集与 Token 分布(测算)
| 主题码 | 主题 | 亿 Token | 占比 | 主要来源码 | 入集后的组织方式 |
|---|---|---|---|---|---|
| T01 | 销售合同与技术协议 | 68 | 24.6% | CTR | 按合同主体与项目号绑定;条款按条款号分块 |
| T02 | 订单排产与产销协同 | 54 | 19.6% | ORD | 结构化记录转自然语言陈述句式,保留原字段映射 |
| T03 | 矿方工况与地质条件 | 42 | 15.2% | MIN | 按工作面类型(超长、常规、大采高、薄煤层)分组;工况参数抽取为参数表并与原文定位绑定 |
| T04 | 产品型谱与物料主数据 | 38 | 13.8% | CAT | 标准件库补齐适用条件、替代关系、在产状态三项字段 |
| T05 | 库存采购与到货 | 34 | 12.3% | INV | 多套库存口径统一到同一时点口径后入集 |
| T06 | 供需协同经验与会商结论 | 26 | 9.4% | EXP | 按专项生产任务组织,单独成批次 |
| T07 | 行业与政策公开语料 | 14 | 5.1% | PUB | 逐条登记来源与许可凭证 |
| 合计 | — | 276 | 100% | — | — |
附表 A10-4 数据来源:Token 构成依技术方案 T1C 节表 5;工作面类型分化依甲方业务特征;占比为测算值,最终值随现场盘点确认后在卡中更新。
附件一 本子集样本示例全文(3 条)
示例 1(来源码 ORD,主题 T02,结构化记录的自然语言转述):
{"doc_id":"PT01-ORD-2024-B017-004512",
"source_type":"ORD",
"biz_key":{"construct_no":"【待填:施工号示例,由甲方确认可用于示例的编号】","contract_no":"【待填】"},
"biz_time":"2024-07",
"text":"该施工号对应一套中双链刮板输送机的生产任务,由生产管理部门下发后分解为结构件、动力部与附属件三组工序路线。结构件组的备料工序在备料加工分厂执行,按零件明细分批下料;下道工序须待本车间全部工序报工完成后方可开始。本施工号的排产计划在下达后经两次调整,第一次因来料板材到货推迟将备料开工时间后移,第二次因装配线占用调整了热处理批次的插单顺序。排产调整的原因与调整后的时间区间在工单流转记录中逐次留痕。",
"layout_ref":null,
"term_refs":["T-0117-刮板输送机","T-0233-工序路线","T-0451-插单"],
"quality_flags":["time_precision_month"]}
示例 2(来源码 MIN,主题 T03,扫描件版面还原文本带原文定位):
{"doc_id":"PT01-MIN-2023-B008-001207",
"source_type":"MIN",
"biz_key":{"project_no":"【待填:项目号示例】"},
"biz_time":"2023-04",
"text":"工作面地质条件摘要:煤层平均厚度区间与倾角区间按地质条件报告第三章所列;顶板为中等稳定,底板存在局部底鼓;煤质硬度系数按报告附表取值。工作面长度属超长工作面类型,作业制度为两采一准。上述参数中,产量与作业制度取自矿方生产规划,地质与煤质参数取自地质条件报告;截深、截高与推移步距属配套接口参数,须由矿方与配套装备各方会商确定,本项目的会商结论未见规范电子留痕,本条语料中相应位置以缺失标记保留。",
"layout_ref":{"file":"MIN-2023-B008-0032.png","page":7,"bbox":[96,214,1420,866]},
"term_refs":["T-0012-超长工作面","T-0088-两采一准","T-0301-推移步距"],
"quality_flags":["interface_param_absent"]}
示例 3(来源码 EXP,主题 T06,结构化访谈成果):
{"doc_id":"PT01-EXP-2025-B002-000318",
"source_type":"EXP",
"biz_key":{"project_no":"【待填:项目号示例】"},
"biz_time":"2025-02",
"text":"关于槽宽档位与动力部功率配置的取舍:现有计算公式性质为校核公式而非正算公式,工程师须先预设一整套配置——认定该工作面用哪个槽宽档位的机型、配多大功率的动力部、选链环直径多少的链条——再连同工况参数一并代入,验算整机消耗总功率与链条理论安全系数、以及按力与按功率两个口径的实际安全系数能否过得了门槛。公式回答的是这套配置行不行,回答不了该配哪一套。实际预设时的次序是先定槽宽档位再定功率:槽宽受工作面煤层厚度与运量要求约束,可选范围窄;功率在槽宽确定后仍有余量,调整功率比调整槽宽的代价小。本条结论来自结构化访谈,访谈记录经受访岗位确认后入集,不含访谈人与受访人身份信息。",
"layout_ref":null,
"term_refs":["T-0102-槽宽档位","T-0155-安全系数","T-0177-校核公式"],
"quality_flags":[]}
三条示例覆盖了本子集三类不同的语料形态:结构化记录转述(无原文定位)、扫描件版面还原(有原文定位且带缺失标记)、访谈成果(无系统承载、单独批次)。B11 字段要求示例覆盖不同模态与难度(b1933、b1934),本子集为无标注语料、不设难度分层,因此以来源形态的差异替代难度差异,这一替代在卡中写明。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-01-0001-V1.0
A02_dataset_name: 供需计划数据集
A03_subset_purpose: 预训练
A04_business_domain: "01 供需计划"
A05_version: V1.0
A08_sample_count: 【待填:平台统计值】
A09_token_total_yi: 276.0
B01_modality:
- {type: 文本, count: 【待填】, ratio: 0.88}
- {type: 图像, count: 【待填】, ratio: 0.09}
- {type: 表格, count: 【待填】, ratio: 0.03}
B02_modality_kinds: 3
B07_source_distribution:
- {code: CTR, token_yi: 68}
- {code: ORD, token_yi: 54}
- {code: MIN, token_yi: 42}
- {code: CAT, token_yi: 38}
- {code: INV, token_yi: 34}
- {code: EXP, token_yi: 26}
- {code: PUB, token_yi: 14}
B14_synthetic_ratio: 【待填】 # 上限 0.30
C03_license_status: [企业自有, 授权使用, 公开许可]
C06_annotation_spec_id: null # 不适用
C13_dedup_conclusion_id: 【待填】
D03_target_task: 继续预训练
E01_qc_report_id: GHY26691-QC-01-0001-V1.0
E05_validation_report_id: GHY26691-VR-01-0001-V1.0
F02_data_level: 【待填:按企业分级标准取值】
G02_content_root_digest: 【待填:SM3 值】
G05_signature: 【待填:SM2 签名值】
G09_lineage_id: 【待填】
机器可读卡片与本卡表格由平台从同一份字段数据渲染,内容同源;键名用 A2 节 4.3 小节的字段号,便于校验脚本直接取值。不适用字段写 null 并在注释中说明原因,不省略键名——省略键名会使字段完整性的自动校验无法区分「不适用」与「漏填」。
本卡对应供需计划数据集的有监督指令微调生产任务(b1565、b1566),规模依 b1583r03。本子集是四集指令微调子集中规模最大的一个,其中选型类样本的结构设计直接由甲方现有公式的性质决定,这一点在 A12 与 B11 两处写明。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-01-0002-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 供需计划数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 有监督指令微调 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 01 供需计划 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「指令+输入+参考输出」三元组,覆盖产品智能选型问答与校核推理、库存与补货计划决策、合同与技术协议合规问答、产销协同与排产调度、客户与工况参数抽取五类任务。选型类样本是本子集中结构最复杂的一部分:甲方现有公式是校核公式而非正算公式,工程师须先预设整套配置再代入验算,因此样本不能只做「给参数出结论」的问答对,必须包含配置候选的生成、逐项校核的中间步骤与排序理由,样本结构为「工况参数+候选配置+校核过程+排序结论+理由」五段式。库存类样本把季度储备的经验判断表达为可核算的决策过程,输入含商机预测、需求计划、库存账与实物库存四方口径统一后的数据,输出含物料分层结论与分批锁定建议 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 40 万条(b1583r03)。一条=一组「指令+输入+参考输出」;同一指令配不同输入计多条,同一输入配多个等价参考输出计一条(计量规则见技术方案 T1C 节表 2) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一条含 instruction、input、output、task_type、labels、evidence_ref、difficulty、biz_key 八个字段;.png(随样本引用的扫描件与报表切片);.csv(标签分布与难度分布附表) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 选型类样本的 output 字段为五段式结构化文本,段标记为 #候选配置、#校核过程、#排序结论、#理由、#不确定项;其余四类任务的 output 为自然语言答复加结构化结论块。逐字段定义见本卡附表 A10-5 与《数据字典》GHY26691-LG-01-0003 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /01_supply_demand/sft/{selection,inventory,contract,scheduling,extraction}/ 按五类任务分目录,目录内按批次分层 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | SFT-<任务码>-<批次号>-<序号>.jsonl,任务码取 SEL(选型校核)/INV(库存补货)/CTR(合同合规)/SCH(产销排产)/EXT(参数抽取) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经数据所有权部门与安全管理岗两级审批;CTR 类批次另需经营管理部门加签。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-01-0003、《多模态数据标注规范·供需计划册》GHY26691-ST-01-0004、标签定义表 label_dict_01_sft.csv、样本校验脚本 verify_sft_01.py、库存口径映射表 inv_mapping_v1.csv | 1.1.6(b1924/b1925) |
| B01 模态构成 | 文本 33.60 万条(测算 84%)、含图像引用 4.80 万条(测算 12%)、含表格 1.60 万条(测算 4%)。含图像引用的样本按多模态计入 B03 | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(文本、图像、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 16%(6.40 万条);实测值【待填:平台统计值】。本子集的多模态样本主要来自 MIN 类扫描件与报表图片的引用(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 55%(22.00 万条);实测值【待填】(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 产品智能选型问答与校核推理 13 万条、库存与补货计划决策 9 万条、合同与技术协议合规问答 7 万条、产销协同与排产调度 6 万条、客户与工况参数抽取 5 万条。逐任务的子任务分解见本卡附表 A10-6(依技术方案 T1C 节第三部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 指令中位数【待填】字;输入中位数【待填】字;输出中位数【待填】字。选型类样本输出最长,五段式结构使其长度显著高于其余四类,分布按任务码分别统计 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按任务码对应的源系统统计:SEL 取历史选型方案回溯与型谱主数据,INV 取需求计划与库存账及实物库存,CTR 取合同与技术协议文本,SCH 取工单与排产记录,EXT 取矿方工况与地质资料。逐任务来源构成【待填:平台统计值】 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 单参数判别与字段抽取、L2 多参数校核与方案取舍、L3 跨口径对齐与跨项目比对。测算分布 L1 占 38%、L2 占 45%、L3 占 17%;实测值【待填】 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 三层标签树:第一层任务类型(5 类,取值集见 A14 任务码);第二层子任务(共 19 项,见附表 A10-6);第三层结论类型标记(含 结论明确/需补充输入/多方案并列/依据不足四值)。每个标签给出定义与判定边界,见《多模态数据标注规范·供需计划册》 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐标签条数见附表 A10-6;长尾标签(条数低于总量 0.5%,即 2000 条以下)共【待填】个,集中在 CTR 类的低频条款类型与 SCH 类的插单情形,已在 B12 中说明 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 条,全文见本卡附件二 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、选型类样本的校核过程依据甲方现行校核公式版本,公式换版后旧版样本不适合用于新版公式的能力评测;样本在 labels 中记录所依据的公式版本号,评测时按版本分层。二、库存类样本带甲方既有储备习惯(约每两个月组织一轮储备、参照往年同期用量估算),迁移到其他物料结构时需重新校准;样本的参考输出给出的是决策过程与约束条件,而不只是数量结论,目的是让这一局限可被识别。三、CTR 类的低频条款类型样本量偏少,长尾标签在本版中条数不足,列入下一版本补齐。四、SCH 类的插单情形样本依赖排产调整记录的留痕完整度,留痕不全的调整未纳入本版。五、L3 难度层样本的构造依赖跨项目比对的可比性判定,可比性判定目前由业务专家裁定、尚无成文判据,该判据列入《下一版本修订计划》GHY26691-PL-01-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 45%(b1512)。合成用途集中在两处:选型类样本的校核推理链由思维链构建类工具链生成初稿、由业务专家裁定后入集;库存类样本的参数组合在既有真实案例基础上做受约束扩展。两处的合成样本均在 labels 中标记 synthetic:true 并记录种子样本 id | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 历史选型方案回溯(约四五百套,以文档形式散存)、产品与部件型谱(产品全生命周期管理系统)、物料主数据与价格及需求计划与库存账(企业资源计划系统)、实物库存与批次(仓储管理与物流执行系统)、项目与商机(客户关系管理系统)、合同与技术协议(协同办公系统)、工单与排产记录(制造执行系统)、矿方工况与地质资料(企业文档与项目归档)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 源数据采集方法同 GHY26691-DC-01-0001 卡 C02;本子集另有一道样本构造环节:由业务专家按任务类型提出指令模板,工具链按模板从源数据组装输入与参考输出初稿,再经人工标注与专家裁定定稿 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;矿方工况与地质资料部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记与许可核验 → 文档解析与版面还原 → 对象主键贯通 → 库存与时间口径统一 → 指令模板设计与评审 → 工具链组装样本初稿(含思维链构建)→ 本体驱动规则预标注 → 人工标注与复核 → 20% 双人交叉标注 → 专家仲裁 → 一致性校验 → 合成与增强(受 B14 上限约束)→ 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 输入字段长度上限 3072 Token,超出者按业务对象拆分为多条;选型类样本的候选配置数固定在 3—5 个之间,少于 3 个的样本转入 L1 难度层;参数抽取类样本保留原文定位,抽取结果须能回原文定位 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-01-0004-V1.0《多模态数据标注规范·供需计划册》(b1852) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 预标注覆盖全部样本;人工标注复核全部样本;20% 的样本做双人交叉标注,不一致样本进专家仲裁;选型类与库存类样本的参考输出一律经业务专家裁定后方可定稿(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。指标口径:第二层子任务标签按标注员间一致率统计,第三层结论类型标记按一致率统计,选型类样本的排序结论按序关系一致度统计。低于规范阈值的批次退回重标 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由营销与生产计划部门共同定标,覆盖五类任务与三个难度层,每格不少于 30 条 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514)。合成方法为模板化生成加拒绝采样,拒绝条件为校核过程与确定性计算结果不一致 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515)。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 【待填:增强手段与增强前后分布对比结论编号】(b1528、b1529)。增强限于指令措辞的同义改写;仅改写措辞而语义等价的扩增副本计入增强批次台账,不计入本子集 40 万条的规模(计量规则见技术方案 T1C 节表 2) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-01-0004 基准评测子集完成去重与相似度比对,命中样本从本子集移除;隔离口径为项目集合隔离+业务发生时间切分,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;用于模型训练产出的模型权重归属按合同约定 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-01 产品智能选型(主)、SC-03 库存控制智能化(主)、SC-11 合同合规审查智能助手(主)、SC-10 决策数据智能问答助手、SC-09 标书智能问答助手(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 指令微调 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 指令遵循率;选型校核结论与专家结论一致率(按候选配置集合重叠度与排序一致度两个口径分别计算);参数抽取字段级准确率与召回率(按字段分别统计,带原文定位核对);库存决策建议的约束满足率(保交付红线与资金上限两项约束的满足情况);合同合规问答的条款定位准确率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-01-0002 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 指令微调脚本 sft_01.sh、样本校验脚本 verify_sft_01.py、选型校核的确定性复算参考实现 selection_check_ref.py(用于分辨结论对但过程错的情形) | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 产品智能选型场景:输入矿方工况参数表,输出 3—5 个候选配置、逐项校核过程(整机消耗总功率、链条理论安全系数、按力与按功率两个口径的实际安全系数)与排序理由,效果数据见 GHY26691-VR-01-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;选型类样本的排序理由体现甲方既有偏好(做过且投运良好的成熟组合优先、标准化库内部件优先),不适合用于中性的方案优选能力评测;库存类样本不适合直接用于其他物料结构的决策能力评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-01-0001(预训练子集)、GHY26691-DC-01-0003(偏好对齐子集)、GHY26691-DC-01-0004(基准评测子集) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-01-0002-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填:通过/条件通过/不通过】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-01-0002-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 35295—2017;GB/T 41867—2022 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—经营管理类、生产经营数据—供应链类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;部分样本含人员信息 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 同 GHY26691-DC-01-0001 卡 F04;另有一项:选型类样本中的客户单位名称一律泛化,仅保留工作面类型与工况参数,理由是选型能力评测不需要客户身份 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 营销业务角色、生产计划角色、供应链角色、数据加工岗、评测岗;CTR 类批次另限经营管理部门授权人员 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-01-0002 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016),签名算法 SM2(GB/T 32918.1—2016) | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-01-SFT-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-5 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
instruction | 文本 | 长度 ≤ 256 Token | 任务指令,取自经评审的指令模板库,不逐条自由撰写 | 非空;须命中指令模板库中的某一模板 id |
input | 文本或对象 | 长度 ≤ 3072 Token | 任务输入。选型类为工况参数表,库存类为四方口径统一后的数据块,抽取类为原文片段 | 非空;长度上限校验;选型类须含工作面类型字段 |
output | 文本 | 长度 ≤ 4096 Token | 参考输出。选型类须含五个段标记,缺段不予定稿 | 非空;选型类按段标记完整性校验 |
task_type | 枚举 | SEL/INV/CTR/SCH/EXT | 任务码,与 A14 一致 | 非空、在枚举内 |
labels | 对象 | {subtask, conclusion_type, formula_ver?, synthetic, seed_id?} | 三层标签与公式版本、合成标记 | subtask 须在 19 项清单内;synthetic:true 时 seed_id 必填 |
evidence_ref | 数组 | {file, page, bbox} 或 {doc_id} 列表 | 支撑参考输出的证据定位 | CTR 与 EXT 类必填;其余类允许为空数组但须有 labels.conclusion_type 说明依据状况 |
difficulty | 枚举 | L1/L2/L3 | 难度层,判定口径见 B08 | 非空、在枚举内 |
biz_key | 对象 | 同 DC-01-0001 卡口径 | 样本绑定的业务对象主键 | 至少一项非空;须在《对象主键映射表》中存在 |
附表 A10-5 数据来源:字段设置依本卡 A12;标签层级依 B09;证据定位要求依评测规范对应用说明与建设过程指标的举证要求(b1938—b1947)。
附表 A10-6 本子集任务类型与子任务分解(19 项)
| 任务码 | 任务 | 条数(万条) | 子任务 | 子任务条数(万条,测算) |
|---|---|---|---|---|
| SEL | 产品智能选型问答与校核推理 | 13 | 工况参数识读与补全 | 3.0 |
| SEL | — | — | 候选配置生成 | 3.4 |
| SEL | — | — | 逐项校核推理(功率与安全系数) | 3.6 |
| SEL | — | — | 候选排序与理由生成 | 2.0 |
| SEL | — | — | 相似历史项目检索与可比性说明 | 1.0 |
| INV | 库存与补货计划决策 | 9 | 四方口径对齐与差异说明 | 2.2 |
| INV | — | — | 物料分层(周转性、时效性、单价、专用程度、缺料代价) | 2.4 |
| INV | — | — | 长周期件与项目专用料的分批锁定建议 | 2.0 |
| INV | — | — | 呆滞料识别与套用替代处置建议 | 1.4 |
| INV | — | — | 保交付红线与资金上限双约束下的补货方案 | 1.0 |
| CTR | 合同与技术协议合规问答 | 7 | 条款定位与原文摘录 | 2.4 |
| CTR | — | — | 条款与制度要求的符合性判断 | 2.2 |
| CTR | — | — | 风险条款识别与提示措辞 | 1.6 |
| CTR | — | — | 技术协议参数与型谱一致性核对 | 0.8 |
| SCH | 产销协同与排产调度 | 6 | 工单与工序流转问答 | 2.4 |
| SCH | — | — | 排产调整原因归因 | 2.0 |
| SCH | — | — | 插单影响范围判断 | 1.6 |
| EXT | 客户与工况参数抽取 | 5 | 矿方资料参数抽取(带原文定位) | 3.2 |
| EXT | — | — | 多方资料参数冲突识别与标注 | 1.8 |
| 合计 | — | 40 | — | 40 |
附表 A10-6 数据来源:任务条数依技术方案 T1C 节第三部分第 3 小节;子任务分解与条数为测算值,最终值随指令模板库评审结论确认后在卡中更新。
附件二 本子集样本示例全文(3 条)
示例 1(任务码 SEL,难度 L2,五段式参考输出):
{"instruction":"根据给定的工作面工况参数,生成可行的刮板输送机配置候选,逐项完成校核,并按优先级排序并说明理由。",
"input":{"工作面类型":"大采高","工作面长度档位":"【待填:示例取值,由业务部门确认可用于示例的参数档位】","煤层厚度区间":"【待填】","倾角区间":"【待填】","煤质硬度系数":"【待填】","作业制度":"两采一准","要求运量档位":"【待填】","配套采煤机截深":"【待填:会商确定项,本例给定】","液压支架推移步距":"【待填:会商确定项,本例给定】"},
"output":"#候选配置\n候选一:槽宽档位 A/动力部功率档位 P2(双驱)/链环直径档位 D2/中部槽型式为铸焊结构。\n候选二:槽宽档位 A/动力部功率档位 P3(双驱)/链环直径档位 D3/中部槽型式同上。\n候选三:槽宽档位 B/动力部功率档位 P3(双驱)/链环直径档位 D2/中部槽型式同上。\n#校核过程\n第一步,按给定运量档位与工作面长度档位计算整机消耗总功率,与各候选的装机功率比较,得出功率余量;候选一余量最小但仍过门槛,候选二与候选三余量依次增大。\n第二步,按链条规格与工况计算链条理论安全系数,三个候选均过门槛。\n第三步,分别按力口径与按功率口径计算实际安全系数;候选一在按力口径上接近门槛下限,候选二与候选三均有余量。\n第四步,核对槽宽档位与煤层厚度及运量要求的匹配性;候选三的槽宽档位 B 高于本工况需要,带来的是整机重量与造价上升而非能力提升。\n#排序结论\n候选二优先,候选一次之,候选三最后。\n#理由\n候选二在三项校核上均有余量且槽宽档位与工况匹配;该槽宽与功率组合在既有项目中已投运且使用评价良好,部件多为标准化库内在产件,交付周期与备件保障优于另两个候选。候选一的按力口径实际安全系数接近门槛下限,在工况波动时余量不足。候选三的槽宽档位超出本工况需要,不带来能力提升。\n#不确定项\n截深与推移步距为配套接口参数,本例按给定值校核;该两项若在后续会商中调整,须重新执行第一步与第三步。",
"task_type":"SEL",
"labels":{"subtask":"候选排序与理由生成","conclusion_type":"结论明确","formula_ver":"【待填:现行校核公式版本号】","synthetic":false},
"evidence_ref":[{"doc_id":"PT01-EXP-2025-B002-000318"},{"doc_id":"PT01-CAT-2024-B011-002190"}],
"difficulty":"L2",
"biz_key":{"project_no":"【待填】"}}
示例 2(任务码 EXT,难度 L1,带原文定位的参数抽取):
{"instruction":"从给定的矿方地质条件报告片段中抽取工况参数,逐项给出原文定位;无法确定的项不要推断,标注为缺失。",
"input":"(报告第三章片段,版面还原文本)顶板岩性以中砂岩为主,稳定性评定为中等稳定;底板为泥岩,局部存在底鼓;煤层结构简单,夹矸一层;煤质硬度系数按附表三取值。工作面长度与倾角见附表二。",
"output":"抽取结果:\n1. 顶板岩性=中砂岩(原文定位:第 3 章第 1 段)\n2. 顶板稳定性=中等稳定(第 3 章第 1 段)\n3. 底板岩性=泥岩(第 3 章第 1 段)\n4. 底板异常=局部底鼓(第 3 章第 1 段)\n5. 夹矸层数=1(第 3 章第 2 段)\n6. 煤质硬度系数=缺失(原文指向附表三,本片段未包含该附表,不做推断)\n7. 工作面长度=缺失(原文指向附表二)\n8. 倾角=缺失(原文指向附表二)\n说明:第 6 至第 8 项在本片段内不可确定,已标注缺失并给出原文指向,需补充附表二与附表三后重新抽取。",
"task_type":"EXT",
"labels":{"subtask":"矿方资料参数抽取(带原文定位)","conclusion_type":"需补充输入","synthetic":false},
"evidence_ref":[{"file":"MIN-2023-B008-0032.png","page":7,"bbox":[96,214,1420,866]}],
"difficulty":"L1",
"biz_key":{"project_no":"【待填】"}}
示例 3(任务码 INV,难度 L3,双约束下的补货方案):
{"instruction":"按给定的四方口径数据,对本季度板材类物料给出补货方案,须同时满足保交付红线与资金上限两项约束,并说明分批锁定安排。",
"input":{"口径统一时点":"【待填:季度末时点】","商机预测":"【待填:按工作面类型分布的中标概率加权量】","需求计划":"【待填:企业资源计划系统下达量】","库存账":"【待填】","实物库存":"【待填】","项目占用":"【待填】","呆滞料可用尺寸":"【待填:余料台账,当前无结构化记录,本例按补录结果给定】","外购有效提前期":"【待填:当前无历史统计,本例按供应商承诺期给定】","资金上限":"【待填】","保交付红线":"已签合同的结构件备料不得因缺料停线"},
"output":"口径对齐说明:库存账与实物库存在本时点存在差异,差异来自在途与待检批次,已按入库确认口径统一;项目占用量从可用量中扣除。\n物料分层:按周转性、时效性、单价、专用程度、缺料代价五维分层,本季度板材类划入「低周转高单价重点卡控」层的共【待填】项,划入「通用放宽」层的共【待填】项。\n补货方案:重点卡控层按已签合同需求量加最小安全库存下单,不按商机预测加量;通用放宽层按历史用量滚动补足。呆滞料中可套用尺寸优先消耗,本季度可套用量抵减下单量【待填】吨。\n分批锁定:长周期板材按合同交付节点倒排,分两批锁定,第一批覆盖前两个月备料需求,第二批在第一批到货检验合格后释放,避免一次锁定占满资金上限。\n约束核对:方案下单总额未超资金上限;已签合同结构件的备料需求在有效提前期内可满足,保交付红线成立。\n偏差回流:本方案与实际执行的偏差在季度结束后归因,归因结论用于校准物料分层的阈值参数。",
"task_type":"INV",
"labels":{"subtask":"保交付红线与资金上限双约束下的补货方案","conclusion_type":"结论明确","synthetic":false},
"evidence_ref":[{"doc_id":"PT01-INV-2025-B004-001880"}],
"difficulty":"L3",
"biz_key":{"material_code":"【待填】"}}
三条示例分别对应 L2、L1、L3 三个难度层与 SEL、EXT、INV 三类任务,覆盖「结论明确」与「需补充输入」两种结论类型。示例 2 刻意选了一条输入不足的样本:参数抽取类任务的样本不能只收录能抽全的情形,否则模型学不到「指向附表但附表不在输入内」时应当标缺失而不是推断。这一点在标注规范中列为硬规则。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-01-0002-V1.0
A03_subset_purpose: 有监督指令微调
A08_sample_count: 400000
A09_token_total_yi: null # 本子集按条计量
B05_topic_distribution:
- {task: SEL, count: 130000}
- {task: INV, count: 90000}
- {task: CTR, count: 70000}
- {task: SCH, count: 60000}
- {task: EXT, count: 50000}
B08_difficulty_distribution: {L1: 0.38, L2: 0.45, L3: 0.17} # 测算
B14_synthetic_ratio: 【待填】 # 上限 0.45
C06_annotation_spec_id: GHY26691-ST-01-0004-V1.0
C07_annotation_org: {pre_label: 1.0, human_review: 1.0, cross_label: 0.2, expert_arbitration: 不一致样本全量}
C08_inter_annotator_agreement: 【待填:实测值】
C09_golden_set_pass_rate: 【待填:实测值】
D03_target_task: 指令微调
E01_qc_report_id: GHY26691-QC-01-0002-V1.0
E05_validation_report_id: GHY26691-VR-01-0002-V1.0
G07_package: GHY26691-01-SFT-V1.0.pkg
本卡对应供需计划数据集的人类偏好对齐生产任务(b1565、b1566),规模依 b1583r04。偏好子集的计量单位是「组」:一组=同一提问下的一对或多对可比较回答及其偏好序,含偏好理由字段方计为有效组;缺偏好理由或标注员间不一致未裁决的组不计入(计量规则见技术方案 T1C 节表 2)。本子集的偏好判据有两处来源,其中一处当前尚无系统性记录,这一前提与回退办法在 B12 中写明。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-01-0003-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 供需计划数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 人类偏好对齐 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 01 供需计划 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「提问+候选回答对+偏好序+偏好理由」,覆盖选型推荐排序偏好、补货方案取舍、合同风险提示措辞、报告底稿质量四类偏好对象。偏好判据来自两处:历史选型方案的投运使用评价分级,以及资深工程师对候选排序的裁定。前者更接近业务结果、证据强度更高,但当前无系统性记录,须在既有流程中增设填报入口由系统预填、经手人确认;后者可立即组织,但带裁定人的主观成分。本子集按两处来源分别标记样本,使评测可按判据来源分层 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 3.2 万组(b1583r04) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按组计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一组含 prompt、responses、preference、rationale、pref_object、judge_source、biz_key 七个字段 | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | responses 为候选回答数组,长度 2—4;preference 为偏好序数组,元素为 responses 的下标,允许并列(同名次写同值);rationale 为偏好理由文本,缺此字段的组不计为有效组。逐字段定义见本卡附表 A10-7 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /01_supply_demand/preference/{selection_rank,replenish,risk_wording,report_draft}/ 按四类偏好对象分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PREF-<偏好对象码>-<批次号>-<序号>.jsonl,偏好对象码取 PSR(选型推荐排序)/PRP(补货方案取舍)/PRW(合同风险提示措辞)/PRD(报告底稿质量) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经数据所有权部门与安全管理岗两级审批。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-01-0003、《多模态数据标注规范·供需计划册》GHY26691-ST-01-0004、偏好标注裁决规则 pref_rule_01.md、样本校验脚本 verify_pref_01.py | 1.1.6(b1924/b1925) |
| B01 模态构成 | 文本 2.98 万组(测算 93%)、含图像或表格引用 0.22 万组(测算 7%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(文本、图像、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 7%(0.22 万组);实测值【待填】。偏好样本以文本回答的优劣比较为主,多模态占比在四个子集中最低(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 58%(1.86 万组);实测值【待填】。投运评价类样本集中在近三年,原因是填报入口为本项目期内增设(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 选型推荐排序偏好 1.4 万组、补货方案取舍 0.9 万组、合同风险提示措辞 0.5 万组、报告底稿质量 0.4 万组(依技术方案 T1C 节第三部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 提问中位数【待填】字;单个候选回答中位数【待填】字;偏好理由中位数【待填】字。偏好理由的长度下限按规范设为 40 字,低于下限的组退回重标 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 判据来源为投运使用评价的组测算 45%,为专家裁定的组测算 55%;实测值【待填】。该比例随投运评价填报覆盖度变化,变化情况逐版本记入 C14 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 候选差异明显(一个候选存在明确硬约束违反)、L2 候选均可行而优劣取决于多维权衡、L3 候选优劣取决于长期结果(投运表现、资金占用)。测算分布 L1 占 30%、L2 占 52%、L3 占 18% | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层偏好对象(4 类,取值集见 A14);第二层偏好维度标记,取值集为 硬约束满足/成熟度与可复用性/成本与资金占用/交付与备件保障/表述规范性/依据充分性六值,可多选。每个维度给出定义与判定边界,见标注规范 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐维度命中组数见附表 A10-8;硬约束满足 维度在 PSR 与 PRP 两类中命中最多 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 组,全文见本卡附件三 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、历史选型方案的投运使用评价须从零补录,补录进度取决于填报入口的流程改造推进。若至第三期末覆盖度仍低于测算值,PSR 类样本的判据来源由投运评价为主调整为专家裁定为主,样本量 1.4 万组不变,并在本卡 B07 与 C14 中标注来源构成的变化。这一调整会降低 PSR 类样本的证据强度,相应影响记入验证报告。二、专家裁定类样本带裁定人的个人偏好;处置办法是同一提问由不少于两名资深人员独立裁定,不一致的组进第三人仲裁,仲裁不成立的组不入集而非强行取多数。三、PRD 类(报告底稿质量)样本的偏好维度以表述规范性与依据充分性为主,与业务结果的关联较弱,该类样本在评测中单列、不与前三类合并计算胜率。四、偏好理由字段由标注人撰写,撰写质量参差;规范设定了长度下限与必须包含的要素(指出差异所在、指出判据、指出不确定项),未达要素要求的组退回重标。以上四项列入《下一版本修订计划》GHY26691-PL-01-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 50%(b1512)。合成用途限于候选回答的构造:在真实优选结论的基础上按规则生成劣选候选(如放宽安全系数余量、选用非在产部件、忽略资金上限),偏好序与理由仍由人工裁定。合成候选在 responses 中逐条标记 synthetic:true | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 历史选型方案与其投运使用评价(补录)、资深工程师裁定记录(本项目期内组织)、补货方案与实际执行偏差归因记录、合同风险提示的历史措辞与审核修改痕迹、选型与库存报告底稿的修改痕迹。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 投运使用评价按增设填报入口由系统预填、经手人确认后采集;专家裁定按《偏好裁定作业指引》组织,一次裁定一组、记录裁定人角色而不记录姓名;修改痕迹类来自协同办公系统的文档版本比对 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 提问构造(取自指令微调子集的真实提问或业务场景)→ 候选回答收集(真实历史方案、模型生成、规则构造劣选)→ 去标识化 → 偏好裁定(投运评价预填或专家独立裁定)→ 不一致组仲裁 → 偏好理由撰写与要素校验 → 有效组判定(含理由方计为有效)→ 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 候选回答数固定 2—4 个;同一提问下的候选长度差异控制在 1.5 倍以内,理由是长度差异会引入与内容无关的偏好信号;候选顺序在发布态中随机打乱并记录打乱种子 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-01-0004-V1.0《多模态数据标注规范·供需计划册》偏好分册 | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | PSR 与 PRP 两类:同一组由不少于两名资深人员独立裁定,不一致进第三人仲裁;PRW 与 PRD 两类:单人裁定加抽检 20% 复核(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。指标口径:偏好序一致度按成对比较的一致比例统计;偏好维度标记按标签集合重叠度统计 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由营销与生产计划部门共同定标,覆盖四类偏好对象与三个难度层 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514)。劣选候选的构造规则清单随集发布,便于第三方判断劣选是否构造得过于明显——构造过于明显会虚高对齐效果 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-01-0004 基准评测子集完成去重与相似度比对;提问层面与候选回答层面分别比对,任一层命中即从本子集移除,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本。后续版本须在本字段记录判据来源构成的变化(见 B12 第一项) | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-01 产品智能选型(主)、SC-03 库存控制智能化(主)、SC-11 合同合规审查智能助手(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 偏好对齐 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 偏好对齐胜率(按偏好对象与判据来源分层统计);硬约束违反率(对齐后模型给出违反硬约束候选的比例,该指标越低越好);理由一致性(模型给出的理由与参考理由在判据维度上的重叠度) | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-01-0003 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 偏好对齐脚本 align_01.sh、偏好序校验脚本 verify_pref_01.py | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 产品智能选型场景的推荐排序子任务:同一工况下模型给出的候选排序与资深人员裁定排序的一致度对比,效果数据见 GHY26691-VR-01-0003 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;PRD 类样本与业务结果关联较弱,不适合用于业务决策能力的对齐评测;判据来源为专家裁定的组不适合单独用于论证「对齐后的模型符合业务结果」,该论证须取投运评价类样本 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-01-0002(指令微调子集,提问来源)、GHY26691-DC-01-0004(基准评测子集) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-01-0003-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-01-0003-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 41867—2022 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—经营管理类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;裁定记录涉及人员信息,按 F04 处置 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 裁定人仅记录角色(如「资深选型工程师」)不记录姓名;客户单位名称泛化到矿区与工作面类型层级;投运评价中的矿方反馈按泛化法处理。依据 GB/T 37964—2019 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 营销业务角色、生产计划角色、供应链角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-01-0003 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3,签名算法 SM2 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-01-PREF-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-7 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
prompt | 文本 | 长度 ≤ 2048 Token | 提问,取自指令微调子集的真实提问或业务场景 | 非空;与指令微调子集的提问重复时须标记来源 id |
responses | 数组 | 长度 2—4,元素含 text、origin、synthetic | 候选回答。origin 取值 历史方案/模型生成/规则构造 | 长度在 2—4 内;候选间长度差异 ≤ 1.5 倍 |
preference | 数组 | 元素为 responses 下标,允许同值表示并列 | 偏好序,序号小者优 | 长度等于 responses 长度;下标不越界 |
rationale | 文本 | 长度 ≥ 40 字 | 偏好理由,须含差异所在、判据、不确定项三要素 | 非空;长度下限校验;三要素缺一退回重标 |
pref_object | 枚举 | PSR/PRP/PRW/PRD | 偏好对象码 | 非空、在枚举内 |
judge_source | 枚举 | 投运评价/专家裁定/修改痕迹 | 判据来源,用于评测分层 | 非空、在枚举内 |
biz_key | 对象 | 同 DC-01-0001 卡口径 | 样本绑定的业务对象主键 | 至少一项非空 |
附表 A10-7 数据来源:字段设置依本卡 A12;有效组判定依技术方案 T1C 节表 2 计量规则;候选长度约束依 C05。
附表 A10-8 本子集偏好对象与偏好维度交叉分布(测算,单位万组)
| 偏好对象 | 组数 | 硬约束满足 | 成熟度与可复用性 | 成本与资金占用 | 交付与备件保障 | 表述规范性 | 依据充分性 |
|---|---|---|---|---|---|---|---|
| PSR 选型推荐排序 | 1.4 | 0.52 | 0.61 | 0.34 | 0.40 | 0.08 | 0.25 |
| PRP 补货方案取舍 | 0.9 | 0.41 | 0.12 | 0.58 | 0.30 | 0.05 | 0.18 |
| PRW 合同风险提示措辞 | 0.5 | 0.09 | 0.04 | 0.03 | 0.02 | 0.38 | 0.31 |
| PRD 报告底稿质量 | 0.4 | 0.03 | 0.05 | 0.04 | 0.02 | 0.33 | 0.29 |
| 合计 | 3.2 | 1.05 | 0.82 | 0.99 | 0.74 | 0.84 | 1.03 |
附表 A10-8 数据来源:组数依技术方案 T1C 节第三部分第 3 小节;维度命中数为测算值。维度可多选,故各行维度命中数之和大于该行组数。
附件三 本子集样本示例全文(3 组)
示例 1(偏好对象 PSR,判据来源「投运评价」,难度 L3):
{"prompt":"大采高工作面、给定运量与长度档位,两套配置均通过校核,应优先推荐哪一套,为什么?",
"responses":[
{"text":"推荐槽宽档位 A 配功率档位 P3 的组合。该组合在既有项目中已投运,使用评价为良好,中部槽与链条均为标准化库内在产件,备件保障到位;按力与按功率两个口径的实际安全系数均有余量。","origin":"历史方案","synthetic":false},
{"text":"推荐槽宽档位 B 配功率档位 P3 的组合。槽宽加大后运输能力余量更充分,适应后续产量提升。","origin":"规则构造","synthetic":true}],
"preference":[1,2],
"rationale":"差异所在:两候选的区别是槽宽档位,功率相同。判据:候选一的槽宽与本工况运量要求匹配,且该组合有投运记录与良好使用评价、部件在产,备件保障与交付周期可控;候选二加大槽宽带来的是整机重量与造价上升,运量余量在本工况下并非瓶颈,且该槽宽与此功率的组合无投运记录。不确定项:若矿方明确后续有产量提升计划且已书面提出,候选二的理由才成立,此时应重新取参数校核而不是直接改推荐。",
"pref_object":"PSR",
"judge_source":"投运评价",
"biz_key":{"project_no":"【待填】"}}
示例 2(偏好对象 PRP,判据来源「专家裁定」,难度 L2,含并列偏好序):
{"prompt":"本季度某项目专用板材的补货,在资金上限约束下给出方案。",
"responses":[
{"text":"按已签合同需求量一次性下单锁定,确保不缺料。","origin":"规则构造","synthetic":true},
{"text":"分两批锁定:第一批覆盖前两个月备料需求,第二批在第一批到货检验合格后释放。","origin":"历史方案","synthetic":false},
{"text":"分两批锁定,并先消耗余料台账中可套用尺寸,抵减第一批下单量。","origin":"模型生成","synthetic":false}],
"preference":[3,1,1],
"rationale":"差异所在:三候选的区别在锁定节奏与是否先用余料。判据:候选一一次性锁定会占满资金上限,挤占同期其他物料的下单空间,与资金上限约束冲突;候选二与候选三均满足两项约束,候选三另消耗了呆滞料、减少了资金占用,故最优。候选二与候选三并列于第二顺位——评定时认为候选二在余料台账尚未结构化的情形下是可执行的保守做法,不宜判为劣选。不确定项:余料可套用尺寸当前无结构化台账,候选三的可执行性取决于补录进度;补录未完成时按候选二执行。",
"pref_object":"PRP",
"judge_source":"专家裁定",
"biz_key":{"material_code":"【待填】"}}
示例 3(偏好对象 PRW,判据来源「修改痕迹」,难度 L1):
{"prompt":"技术协议中约定的到货期与合同交付节点存在冲突,如何提示风险?",
"responses":[
{"text":"技术协议第若干条约定的到货期晚于合同交付节点,存在交付风险,建议修改。","origin":"模型生成","synthetic":false},
{"text":"经核对,技术协议第若干条约定的到货期为合同交付节点之后,两者冲突。该冲突影响结构件备料开工时间,进而影响后续工序排产。建议在签署前与对方确认到货期提前,或在合同中相应调整交付节点;两种处置均需经生产计划部门确认可行性。原文定位:技术协议第若干条、合同第若干条。","origin":"历史方案","synthetic":false}],
"preference":[2,1],
"rationale":"差异所在:两候选都识别出了冲突,区别在于是否说清影响范围、是否给出可执行的处置选项、是否给出原文定位。判据:风险提示的作用是让看到提示的人能据此行动;候选二指出了影响传导路径(备料开工—后续排产)、给出两种处置并指明须经哪个部门确认、附原文定位,候选一只给出结论。不确定项:无。",
"pref_object":"PRW",
"judge_source":"修改痕迹",
"biz_key":{"contract_no":"【待填】"}}
示例 2 刻意保留了一组并列偏好序。偏好标注容易出现的一个问题是把「可执行的保守做法」判为劣选,训练出的模型会倾向于只给激进方案;允许并列并要求在理由中说明为何并列,是对这一倾向的约束。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-01-0003-V1.0
A03_subset_purpose: 人类偏好对齐
A08_sample_count: 32000 # 单位:组
B05_topic_distribution: {PSR: 14000, PRP: 9000, PRW: 5000, PRD: 4000}
B07_judge_source_distribution: {投运评价: 0.45, 专家裁定: 0.55} # 测算,随补录进度变化
B08_difficulty_distribution: {L1: 0.30, L2: 0.52, L3: 0.18}
B14_synthetic_ratio: 【待填】 # 上限 0.50,仅用于劣选候选构造
C07_annotation_org: {PSR_PRP: 双人独立裁定+第三人仲裁, PRW_PRD: 单人裁定+20% 复核}
C13_dedup_conclusion_id: 【待填】 # 提问层与候选层分别比对
D03_target_task: 偏好对齐
E01_qc_report_id: GHY26691-QC-01-0003-V1.0
E05_validation_report_id: GHY26691-VR-01-0003-V1.0
G07_package: GHY26691-01-PREF-V1.0.pkg
本卡对应供需计划数据集的基准评测生产任务(b1565、b1566),规模依 b1583r05。基准子集有三条与其余三子集不同的硬约束,卡中以字段形式固化:与训练侧样本按来源与时间双重隔离且不得回填(b1554);不得使用任何形式的合成数据,B14 字段固定为 0(b1513);评测协议随集冻结,含随机种子与指标脚本版本(b1554)。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-01-0004-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 供需计划数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 基准评测 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 01 供需计划 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,首版冻结日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集为冻结的评测样本集合,每一条含唯一正确答案或评分细则,覆盖选型校核、库存决策、合同合规、参数抽取四个能力维度。样本取自未被用于训练的项目集合,且业务发生时间晚于训练样本的截止时间;隔离一旦建立不得回填,否则评测结果会系统性偏高。本子集全部来自真实业务样本并经人工裁定,不含合成样本 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 0.4 万条(b1583r05)。一条=一个带唯一正确答案或评分细则的评测样本 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一条含 item_id、capability、prompt、input、gold、rubric、scoring、source_isolation、biz_key 九个字段;.png(随样本引用的扫描件切片);.json(评测协议冻结记录) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | gold 为唯一正确答案(客观题型),rubric 为评分细则(主观题型),两者至少一项非空且不同时非空;scoring 为判分方式,取值 exact/field_f1/set_overlap/rank_tau/rubric_human。逐字段定义见本卡附表 A10-9 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /01_supply_demand/benchmark/{selection,inventory,contract,extraction}/ 按四个能力维度分目录;根目录放 protocol_frozen.json(评测协议冻结记录) | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | BM-<能力码>-<冻结批次>-<序号>.jsonl,能力码取 CSEL(选型校核)/CINV(库存决策)/CCTR(合同合规)/CEXT(参数抽取) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经数据所有权部门与评测管理岗两级审批;gold 与 rubric 字段默认不随集下发,仅向评测岗开放,理由是答案外泄会使本子集失效。受理时限 3 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-01-0003、《评测协议固化记录》GHY26691-ST-00-0019、判分脚本 score_01.py、隔离核验脚本 verify_isolation_01.py、评分细则册 rubric_01.md(限评测岗) | 1.1.6(b1924/b1925) |
| B01 模态构成 | 文本 0.34 万条(测算 85%)、含图像引用 0.05 万条(测算 12%)、含表格 0.01 万条(测算 3%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(文本、图像、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 12%(0.05 万条);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 按时间隔离取训练样本截止时间之后的样本,业务发生时间逐步接近发布日前 36 个月区间的后段,测算趋向 100%;实测值【待填:平台统计值】。该占比高不构成优势,仅是时间隔离的必然结果(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 选型校核 0.16 万条、库存决策 0.12 万条、合同合规 0.07 万条、参数抽取 0.05 万条(依技术方案 T1C 节第三部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 输入中位数【待填】字;参考答案中位数【待填】字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按隔离后的项目集合统计,逐项目条数见 verify_isolation_01.py 输出;本子集不披露具体项目号,仅披露项目数与每项目条数区间,理由是披露项目号等于披露评测范围 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层,口径同指令微调子集。测算分布 L1 占 30%、L2 占 48%、L3 占 22%;每格样本量不低于 60 条,避免小样本上出现层内空白 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层能力维度(4 类,取值集见 A14);第二层考点标记(如选型校核下设「功率余量判断」「安全系数双口径」「槽宽匹配性」等),取值集见附表 A10-10 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐考点条数见附表 A10-10 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 条,全文见本卡附件四。基准子集的示例只给 2 条且选用考点最基础的样本,理由是示例本身会进入投标文件与随集文档,给出代表性强的样本等于泄露评测重点 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、本子集规模 0.4 万条,分到四个能力维度与三个难度层共十二格后,每格样本量有限;按分层抽样使每格不低于 60 条,但部分考点仍只有数十条,单考点结论的置信区间较宽,评测报告须给出区间而不只给点值。二、gold 字段的唯一正确答案在选型校核类样本上依赖现行校核公式版本,公式换版后相应样本须重新裁定,重新裁定的样本按新版本另立冻结批次、不覆盖旧批次。三、库存决策类样本的正确答案带时点属性(口径统一时点、资金上限、在途批次),时点之外重算会得出不同结论;样本把这些时点条件全部写入 input,使答案在给定输入下唯一。四、隔离核验依赖训练侧样本的项目集合与时间截止点被如实登记,若训练侧出现未登记的回填,隔离即失效;处置办法是每版发布前由平台重跑隔离核验并把结论写入 C13,核验不通过不予发布。以上四项列入《下一版本修订计划》GHY26691-PL-01-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】,均晚于训练侧样本截止时间 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 0%(固定值,b1513)。本子集不使用任何形式的合成数据,该字段由平台在发布前校验,非零则阻断发布 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 隔离后项目集合的选型方案与校核记录、同期需求计划与库存账、同期合同与技术协议、同期矿方工况与地质资料。逐源登记于《数据源登记台账》GHY26691-LG-00-0001,并单列「基准集专用」标记以防被训练侧批次取用 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 同 GHY26691-DC-01-0001 卡 C02;本子集另有一道隔离核验环节:采集后先核验项目集合与时间区间,核验通过方可进入样本构造 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;矿方资料部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 隔离核验 → 采集登记与许可核验 → 文档解析与版面还原 → 样本构造(题干、输入、答案或评分细则)→ 人工裁定答案(双人独立裁定,不一致进仲裁)→ 判分方式与评分细则定稿 → 分层抽样校验(十二格样本量核对)→ 与训练侧去重与相似度比对 → 冻结发布。本子集未经合成与增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 输入长度上限 3072 Token;参数抽取类样本保留原文定位;选型校核类样本的候选配置数与指令微调子集一致(3—5 个),以保证可比 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-01-0004-V1.0 偏好与评测分册(答案裁定部分) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 答案一律双人独立裁定,不一致进第三人仲裁;仲裁不成立的样本不入集(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。基准集的一致性门限高于训练侧子集,低于门限的样本不入集而非退回重标 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 不适用(本子集本身即评测基准,不另设黄金集) | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 不适用(B14=0) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 不适用(无合成样本,不调用教师模型) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 DC-01-0001、DC-01-0002、DC-01-0003 三子集完成去重与相似度比对,命中样本从训练侧移除而非从本子集移除;隔离核验结论编号【待填】。每版发布前重跑核验,不通过不予发布(b1544、b1554) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版冻结,无上游版本。按分期计划,第一期出探路集(约 0.19 万条,20%),第二期达 0.48 万条(50%),第三期完成 0.95 万条首版冻结,第四期出第二版冻结并复测——此为四集合计口径,本子集对应份额见技术方案 T1C 节表 3 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用;gold 与 rubric 字段限评测岗;不得对外再分发;第三方评测机构使用时按评测委托协议另行授权 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | 为 SC-01、SC-03、SC-11、SC-10 四个场景的能力评测供数(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 基准评测 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 按 scoring 字段分别计算:exact 精确匹配率、field_f1 字段级 F1、set_overlap 候选集合重叠度、rank_tau 排序一致度、rubric_human 人工评分均值。总分按四个能力维度等权或按场景权重加权两种口径分别给出,权重取值在评测协议中固化 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019,含评测环境、推理参数、随机种子、指标脚本版本与判分脚本摘要值;协议随本子集一同冻结,协议变更须升主版本号(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 基座模型与经本数据集训练后模型在本子集上的对比结果见《数据集验证报告》GHY26691-VR-01-0004 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 判分脚本 score_01.py、隔离核验脚本 verify_isolation_01.py、评测执行示例 run_bench_01.sh | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 首轮全量评测:按本子集与协议对基线模型与训练后模型各执行一轮,输出逐能力维度得分与置信区间,见 GHY26691-VR-01-0004 第 4 章(b0688) | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不得用于训练、不得用于提示词示例、不得用于合成样本的种子;gold 字段不得进入任何训练侧批次。选型校核类样本绑定现行公式版本,不适合评测新版公式下的能力 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-01-0001、-0002、-0003(三者为隔离对象,非配合使用对象) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-01-0004-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表;本子集的均衡性维度另加一项十二格样本量核对(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-01-0004-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测;本子集为第三方评测的执行依据之一(b0688、b2076、b2077) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 2828.1—2012(分层抽样);GB/T 8170—2008(数值修约与达标判定) | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填:缺陷整改复测的时间、范围与结论编号】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—经营管理类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;gold 字段按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 同 GHY26691-DC-01-0002 卡 F04;另有一项:本子集不披露项目号,仅披露项目数与每项目条数区间 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 评测岗(全字段);营销与生产计划角色(除 gold/rubric 外字段);数据加工岗不得访问 gold 字段 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-01-0004 检索;gold 字段的每一次访问单独留痕 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意;第三方评测机构按委托协议授权 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在冻结时写入】;摘要算法 SM3,签名算法 SM2。本子集冻结后指纹不得变化,变化即视为冻结被破坏 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-01-BM-V1.0.pkg;gold 与 rubric 单独封装为 GHY26691-01-BM-GOLD-V1.0.pkg,加密存储(SM4,GB/T 32907—2016) | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版冻结) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-9 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
item_id | 字符串 | BM01-<能力码>-<冻结批次>-<序号> | 评测样本唯一标识 | 非空、全集唯一;冻结后不得变更 |
capability | 枚举 | CSEL/CINV/CCTR/CEXT | 能力维度码 | 非空、在枚举内 |
prompt | 文本 | 长度 ≤ 256 Token | 题干,与指令微调子集的指令模板同源以保证可比 | 非空;须命中指令模板库某一模板 id |
input | 文本或对象 | 长度 ≤ 3072 Token | 评测输入,须含全部时点条件使答案唯一 | 非空;库存类须含口径统一时点与资金上限字段 |
gold | 文本或对象 | 客观题型非空 | 唯一正确答案 | 与 rubric 二者有且仅有一项非空 |
rubric | 对象 | 主观题型非空,含评分要点与分值 | 评分细则 | 同上;各要点分值之和等于满分 |
scoring | 枚举 | exact/field_f1/set_overlap/rank_tau/rubric_human | 判分方式 | 非空;rubric_human 时 rubric 必填 |
source_isolation | 对象 | {project_set_id, time_cutoff} | 本条所属隔离集合标识与时间切分点 | 非空;time_cutoff 须晚于训练侧截止时间 |
biz_key | 对象 | 同 DC-01-0001 卡口径 | 业务对象主键 | 至少一项非空 |
附表 A10-9 数据来源:字段设置依本卡 A12;隔离字段依招标文件 b1554 对评测协议固化与基准集隔离的要求;判分方式取值集依 D04。
附表 A10-10 本子集能力维度与考点分布
| 能力码 | 能力维度 | 条数(万条) | 考点 | 考点条数(条,测算) | 判分方式 |
|---|---|---|---|---|---|
| CSEL | 选型校核 | 0.16 | 功率余量判断 | 460 | exact |
| CSEL | — | — | 安全系数双口径计算 | 420 | exact |
| CSEL | — | — | 槽宽与工况匹配性 | 320 | set_overlap |
| CSEL | — | — | 候选排序 | 240 | rank_tau |
| CSEL | — | — | 不确定项识别 | 160 | rubric_human |
| CINV | 库存决策 | 0.12 | 四方口径差异识别 | 360 | field_f1 |
| CINV | — | — | 物料分层判定 | 320 | exact |
| CINV | — | — | 双约束满足性核对 | 300 | rubric_human |
| CINV | — | — | 呆滞料套用判断 | 220 | exact |
| CCTR | 合同合规 | 0.07 | 条款定位 | 280 | field_f1 |
| CCTR | — | — | 符合性判断 | 240 | exact |
| CCTR | — | — | 风险提示完备性 | 180 | rubric_human |
| CEXT | 参数抽取 | 0.05 | 字段抽取与原文定位 | 300 | field_f1 |
| CEXT | — | — | 缺失项识别(不推断) | 200 | exact |
| 合计 | — | 0.4 | 14 个考点 | 4000 | — |
附表 A10-10 数据来源:能力维度条数依技术方案 T1C 节第三部分第 3 小节;考点划分与条数为测算值;判分方式依 D04。每个考点与难度层交叉后不低于 60 条的要求见 B08。
附件四 本子集样本示例全文(2 条)
示例 1(能力码 CEXT,考点「缺失项识别(不推断)」,判分方式 exact):
{"item_id":"BM01-CEXT-F1-000117",
"capability":"CEXT",
"prompt":"从给定片段中抽取工况参数,逐项给出原文定位;无法确定的项标注为缺失,不要推断。",
"input":"(报告片段)工作面长度与倾角见附表二;煤层厚度平均值已在第二章给出。",
"gold":{"工作面长度":"缺失(原文指向附表二)","倾角":"缺失(原文指向附表二)","煤层厚度":"缺失(原文指向第二章,本片段未包含)"},
"rubric":null,
"scoring":"exact",
"source_isolation":{"project_set_id":"ISO-01-B","time_cutoff":"【待填:训练侧业务时间截止点】"},
"biz_key":{"project_no":"【不披露,见 B07】"}}
示例 2(能力码 CSEL,考点「功率余量判断」,判分方式 exact):
{"item_id":"BM01-CSEL-F1-000042",
"capability":"CSEL",
"prompt":"根据给定工况与一套候选配置,判断装机功率是否满足整机消耗总功率要求,并给出余量结论。",
"input":{"工作面类型":"常规","工作面长度档位":"【待填】","要求运量档位":"【待填】","候选配置":{"槽宽档位":"A","动力部功率档位":"P2","链环直径档位":"D2"},"公式版本":"【待填:现行校核公式版本号】"},
"gold":{"是否满足":"满足","余量档位":"【待填:按公式复算结果给定的余量档位】","判定依据":"按给定运量与长度档位复算整机消耗总功率后与装机功率比较"},
"rubric":null,
"scoring":"exact",
"source_isolation":{"project_set_id":"ISO-01-A","time_cutoff":"【待填】"},
"biz_key":{"project_no":"【不披露】"}}
两条示例均取判分方式为 exact 的基础考点。基准子集的随集文档只给基础考点示例,rubric_human 类样本的评分细则另册管理并限评测岗访问,这一处置写在 A15 与 F08 两个字段里。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-01-0004-V1.0
A03_subset_purpose: 基准评测
A08_sample_count: 4000
B05_topic_distribution: {CSEL: 1600, CINV: 1200, CCTR: 700, CEXT: 500}
B08_difficulty_distribution: {L1: 0.30, L2: 0.48, L3: 0.22} # 每格 ≥60 条
B14_synthetic_ratio: 0.00 # 固定值,非零阻断发布(b1513)
C06_annotation_spec_id: GHY26691-ST-01-0004-V1.0
C07_annotation_org: {dual_independent: 1.0, arbitration: 不一致样本全量, 仲裁不成立: 不入集}
C13_isolation_conclusion_id: 【待填】 # 每版发布前重跑,不通过阻断发布
D03_target_task: 基准评测
D05_protocol_id: GHY26691-ST-00-0019
D09_prohibited_use: [训练, 提示词示例, 合成种子]
E01_qc_report_id: GHY26691-QC-01-0004-V1.0
E05_validation_report_id: GHY26691-VR-01-0004-V1.0
G07_package: GHY26691-01-BM-V1.0.pkg
G07_gold_package: GHY26691-01-BM-GOLD-V1.0.pkg # SM4 加密,限评测岗
本部分出产品工艺设计数据集(业务域 02)的四张子集卡。四子集规模依招标文件表格 3-2 原值:预训练 70 亿 Token、指令微调 10 万条、强化学习偏好 0.8 万组、基准评测 0.1 万条(b1588r02—r05)。
本数据集的全部样本都绕不开两个对象:图纸与工艺卡。甲方累积历史图纸约 63 万张,每一张历史上都配有一张已审核签发的工艺卡片,成对关系构成天然的监督样本;备料分厂的工序集合固定且封闭,现掌握口径为 28 道。工序字典是本集多张卡的共同取值集,先在此给出结构,四张卡的 B09 字段统一引用,不逐卡重复。
表 A10-4 备料工序字典的结构与取值约束
| 工序大类 | 本类工序道数 | 典型加工对象 | 关联资源字段 | 入集后的校验规则 |
|---|---|---|---|---|
| 划线与标记 | 【待填:按正式工序字典填报】 | 板材外形轮廓、孔位、压弯线 | 样板号 | 工序码须在封闭字典内;本类工序不得出现在切割之后 |
| 切割下料 | 【待填】 | 外形轮廓、方孔、异形开口 | 设备编码(切割设备)、材料牌号与板厚 | 须有前置的划线或样板工序,或标注为免划线直割 |
| 制孔 | 【待填】 | 圆孔、螺纹底孔 | 设备编码(钻床、冲床)、工装压模号 | 孔径与板厚组合须在工艺规程允许范围内 |
| 压弯成形 | 【待填】 | 压弯件 | 设备编码(压力机)、工装压模号、展开长 | 须有展开长计算结果;中性层公式版本号必填 |
| 坡口与倒角 | 【待填】 | 焊接坡口、倒角 | 坡口型式(取值依 GB/T 985.1、GB/T 985.2)、设备编码 | 坡口型式须与后续焊接工艺的接头型式相容 |
| 校平与矫正 | 【待填】 | 切割或压弯后的变形件 | 设备编码 | 本类工序位置不固定,须记录其在序列中的实际位置与原因 |
| 打磨与表面处理 | 【待填】 | 切割面、焊缝预处理面 | 粗糙度要求(取值依 GB/T 131) | 粗糙度要求须来自图纸标注的作用表面范围 |
| 转序与交接 | 【待填】 | 工序间流转 | 工单号、下道车间 | 下道工序须待本车间全部工序报工完成后方可开始 |
| 合计 | 28 | — | — | — |
表 A10-4 数据来源:工序道数合计依甲方现掌握口径 28 道,以工艺部门确认的正式工序字典为准;工序大类划分依备料加工的实际环节顺序;关联资源字段依设备档案与工装台账;坡口与粗糙度取值依附录佐证卷 A2 节第 3.2 小节第五类标准清单。各大类的具体道数与工序全称须由工艺部门提供正式字典后填入,本表以【待填】占位。
本卡的八十四项字段表已在附录佐证卷 A2 节第 4.7 小节「样例一」中逐项列示,为避免重复,本节不重列字段表,只出该处未展开的三样内容:记录级数据字典、来源与主题的取值集与分布、以及样本示例的实际全文。字段取值与 A2 节样例一保持一致;两处如有差异,以 A2 节的字段规范为准、以本节的分布与示例为补充。
字段与说明文档指标的对应关系不随卡变化(八十四个字段的映射对二十张卡一致),本卡沿用第 1.5 小节的对齐规则与第 7.5 小节表 A10-8 的反向矩阵,不另列第三列;按该矩阵,本卡作为预训练子集的 C06—C09 四项按「不适用」判定,其余字段的指标落点与其他预训练子集卡相同。
本卡对应产品工艺设计数据集的预训练生产任务(b1565、b1566),回应 b1585、b1586 所列资源范围与全链路知识要求,规模依 b1588r02。
附表 A10-11 本子集记录级字段定义(数据字典)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
doc_id | 字符串 | PT02-<来源码>-<业务年份>-<批次号>-<序号> | 语料条唯一标识 | 非空、全集唯一;格式正则校验 |
source_type | 枚举 | DRW/CRD/STP/TXB/EQP | 来源码:图纸/工艺卡片/标准工序文件/专业资料/设备工装台账 | 非空、在枚举内 |
biz_time | 日期 | YYYY-MM-DD 或 YYYY-MM | 业务发生时间,图纸取签发日期、卡片取审核签发日期 | 非空;不得晚于发布日 |
text | 文本 | UTF-8,长度 ≤ 4096 Token | 发布态语料正文 | 非空;禁止出现未脱敏的人员姓名 |
layout_ref | 对象 | {file, page, bbox, view?} | 版面定位。view 记录所属视图(主视图、俯视图、剖视图、局部放大) | DRW 与 CRD 类必填;bbox 四值在页面范围内 |
drawing_no | 字符串 | 企业图号规则 | 图号 | DRW/CRD 类必填;须在《对象主键映射表》GHY26691-LG-00-0004 中存在 |
part_no | 字符串 | 企业零件号规则 | 零件号 | DRW/CRD 类必填 |
craft_card_no | 字符串 | 企业工艺卡号规则 | 工艺卡号 | CRD 类必填;与 drawing_no 的配对关系须在配对校验中成立 |
process_codes | 数组 | 元素取 28 道封闭字典 | 本条语料涉及的工序码序列 | CRD/STP 类必填;元素须在字典内;序列须通过前后依赖校核 |
material | 对象 | {grade, thickness_mm},牌号取值依 GB/T 1591、GB/T 699 | 材料牌号与板厚 | DRW/CRD 类必填;牌号须在合法牌号集内 |
term_refs | 数组 | 术语词典条目 id 列表 | 命中的归一术语(机械制图与焊接术语,来源 GB/T 3375、GB/T 324) | 每个 id 须在 term_dict_02.json 中存在 |
quality_flags | 数组 | scan_low_clarity/dim_extract_low_conf/pair_missing/process_dict_unmapped/view_relation_ambiguous | 已知质量标记 | 取值在枚举内;scan_low_clarity 必须同时有 layout_ref |
附表 A10-11 数据来源:字段设置依 A2 节样例一的 A12 字段;来源码依同处 A14;质量标记枚举依同处 B12 所列四项局限性,另增 process_dict_unmapped(工序名称未能映射到 28 道字典)与 view_relation_ambiguous(视图投影关系判定歧义)两项,这两项是图纸解析环节的实际高发情形。
附表 A10-12 本子集来源与主题的 Token 分布(测算)
| 来源码 | 来源类别 | 亿 Token | 占比 | 承载系统或资料 | 加工要点 |
|---|---|---|---|---|---|
| DRW | 图纸解析结构化文本(图元、尺寸、标注、图层、视图投影关系) | 24 | 34.3% | 产品全生命周期管理 | 直接解析原生图纸文件,不依赖截图识别;解析在内网就地进行 |
| CRD | 历史工艺卡片与工序字典 | 18 | 25.7% | 产品全生命周期管理、工艺归档 | 卡片字段标准化;工序名称统一到 28 道封闭字典 |
| TXB | 机械制图与工艺专业知识、标准规范 | 11 | 15.7% | 企业文档、外部标准 | 粗糙度、坡口、倒角、公差等符号表达的加工要求逐项成条 |
| EQP | 设备与工装、样板台账、压弯与排料参数 | 9 | 12.9% | 设备档案、工装台账 | 设备编码、工装压模号、样板号与工序关联 |
| CRD | 工艺变更与审查记录 | 5 | 7.1% | 协同办公、工艺归档 | 每次修改归因后成条,是偏好样本的来源 |
| STP | 排料与定额计算过程记录 | 3 | 4.3% | 工时定额、工艺归档 | 中性层公式与展开长换算过程完整留存,供确定性校验 |
| 合计 | — | 70 | 100% | — | — |
附表 A10-12 数据来源:Token 构成依技术方案 T1C 节表 7;来源码依 A2 节样例一的 A14 字段取值集,其中工艺变更与审查记录并入 CRD 类、排料与定额计算过程记录并入 STP 类。构成比例为测算值。
附件五 本子集样本示例全文(3 条)
示例 1(来源码 CRD,工艺卡片结构还原得到的工序序列文本):
{"doc_id":"PT02-CRD-2019-B113-021744",
"source_type":"CRD",
"biz_time":"2019-06",
"text":"本零件为中部槽底板,材料牌号与板厚见材料字段。工艺路线按备料分厂工序字典排序:先按样板划线,标出外形轮廓、方孔位置与压弯线;随后数控切割下料,切割外形与方孔一次完成;切割后校平,消除切割热变形;再行制孔,孔径与板厚组合在工艺规程允许范围内;压弯工序在制孔之后进行,压弯件展开长按中性层公式换算后取整,压模号见工装字段;压弯后对焊接坡口面开坡口,坡口型式按图纸焊缝符号确定;最后打磨切割面与坡口面至图纸标注的粗糙度要求,转序至结构件组焊车间。全部工序在本车间完成报工后下道工序方可开始。",
"layout_ref":{"file":"CRD-2019-B113-0447.png","page":1,"bbox":[72,180,1180,920]},
"drawing_no":"【待填:图号示例,由设计部门确认可用于示例的编号】",
"part_no":"【待填】",
"craft_card_no":"【待填】",
"process_codes":["【待填:划线工序码】","【待填:切割工序码】","【待填:校平工序码】","【待填:制孔工序码】","【待填:压弯工序码】","【待填:坡口工序码】","【待填:打磨工序码】","【待填:转序工序码】"],
"material":{"grade":"【待填:牌号,取值依 GB/T 1591】","thickness_mm":"【待填】"},
"term_refs":["T-1002-中性层","T-1044-展开长","T-1108-坡口型式","T-1177-粗糙度"],
"quality_flags":[]}
示例 2(来源码 DRW,带版面坐标引用的图纸技术要求文本):
{"doc_id":"PT02-DRW-2016-B077-008921",
"source_type":"DRW",
"biz_time":"2016-11",
"text":"图纸技术要求区文本(版面还原):未注尺寸公差按一般公差处理(依据 GB/T 1804);未注圆角按图纸标注;焊接坡口按焊缝符号标注执行;标注粗糙度的表面为与相邻件配合的接触面,作用范围限于该表面,不含相邻非配合面;压弯线位置以标注尺寸为准,不以图形比例为准。本图共三个视图:主视图给出外形轮廓与孔位,俯视图给出板厚与压弯角度,局部放大视图给出坡口细节。三视图的投影关系经解析确认一致。",
"layout_ref":{"file":"DRW-2016-B077-0219.dwg","page":1,"bbox":[1480,96,2040,520],"view":"技术要求区"},
"drawing_no":"【待填】",
"part_no":"【待填】",
"craft_card_no":null,
"process_codes":[],
"material":{"grade":"【待填】","thickness_mm":"【待填】"},
"term_refs":["T-1055-一般公差","T-1108-坡口型式","T-1177-粗糙度","T-1203-投影关系"],
"quality_flags":[]}
示例 3(来源码 STP,展开长换算过程记录,供确定性校验):
{"doc_id":"PT02-STP-2022-B031-003602",
"source_type":"STP",
"biz_time":"2022-03",
"text":"压弯件展开长换算过程记录:已知板厚、压弯角度、内弯半径与压弯段数;按中性层位置系数取值表确定本板厚档位的系数;分段计算各直边段长度与各弯曲段中性层弧长;弧长按角度与中性层半径计算;展开长为各直边段与各弯曲段之和,按下料精度要求取整。本件展开长计算结果与材料定额一并填入工艺卡的定额字段,并回填工时定额系统。换算所用的中性层位置系数版本号随记录保留,系数换版后旧记录不做追溯重算。说明:下料尺寸写错,钢板割下来就是废料,出错代价不对称,因此本类记录保留完整过程而不只保留结果。",
"layout_ref":null,
"drawing_no":"【待填】",
"part_no":"【待填】",
"craft_card_no":"【待填】",
"process_codes":["【待填:压弯工序码】"],
"material":{"grade":"【待填】","thickness_mm":"【待填】"},
"term_refs":["T-1002-中性层","T-1044-展开长","T-1210-材料定额"],
"quality_flags":[]}
三条示例覆盖本子集三类语料形态:工艺卡结构还原(有版面定位、有完整工序序列)、图纸技术要求(有视图标记、无工艺卡关联)、计算过程记录(无版面定位、过程完整)。示例 3 的语料刻意保留了过程而非只给结果:本子集的展开长类语料若只给结果,模型在后续指令微调阶段学不到参数取值与计算步骤的区分,评测时也无法分辨「结果对但过程错」与「过程对但参数取错」。
本子集机器可读卡片片段(字段取值与 A2 节样例一一致,此处只列与分布、字典相关的键):
dataset_card_id: GHY26691-DC-02-0001-V1.0
A03_subset_purpose: 预训练
A09_token_total_yi: 70.0
B07_source_distribution:
- {code: DRW, token_yi: 24, ratio: 0.343}
- {code: CRD, token_yi: 23, ratio: 0.328} # 含工艺变更与审查记录 5 亿
- {code: TXB, token_yi: 11, ratio: 0.157}
- {code: EQP, token_yi: 9, ratio: 0.129}
- {code: STP, token_yi: 3, ratio: 0.043}
B09_label_system: null # 无标注连续语料,仅来源与主题元数据标记
B09_process_dict_ref: process_dict_28_v1.csv # 28 道封闭字典,见表 A10-4
B12_quality_flags_enum: [scan_low_clarity, dim_extract_low_conf, pair_missing, process_dict_unmapped, view_relation_ambiguous]
C13_dedup_conclusion_id: 【待填】 # 零件集合隔离+业务时间切分
E01_qc_report_id: GHY26691-QC-02-0001-V1.0
E05_validation_report_id: GHY26691-VR-02-0001-V1.0
G07_package: GHY26691-02-PT-V1.0.pkg
本卡对应产品工艺设计数据集的有监督指令微调生产任务(b1565、b1566),规模依 b1588r03。本子集有一条贯穿全卡的设计原则:展开长与材料定额这一类计算,参考输出给的是计算过程与依据参数,而不只是结果数值。这一原则同时决定了评测的判分方式——按中间参数与最终结果分别判分(见 D04)。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-02-0002-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品工艺设计数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 有监督指令微调 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 02 产品工艺设计 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「指令+输入+参考输出」三元组,覆盖图纸特征抽取与识读、工序选择与排序、工艺卡片字段生成、展开长与定额计算、工艺审查与差异比对五类任务。输入多数带图纸解析结果或图纸局部视图,参考输出按任务类型分为结构化抽取结果、工序序列、卡片字段集、计算过程、差异清单五种形态。工艺人员当前的工时大量消耗在录入而非工艺判断上:编制一张图纸的工艺卡需完成数百次点击与录入,一套四百张量级的项目仅工艺编审即需两天以上,而其中七八成图纸本有可借用的既有工艺仍需逐张打开核对。本子集的样本按这一实际工作形态组织,使模型学到的是「把卡片填到可审状态并把推理依据一并交出」,而不是生成一段描述 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 10 万条(b1588r03) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一条含 instruction、input、output、task_type、labels、evidence_ref、difficulty、drawing_no、part_no 九个字段;.png(图纸局部视图切片,与样本按 evidence_ref 对齐);.json(图元与尺寸的矢量解析结果) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 抽取类样本的 output 为结构化对象(要素类别、取值、原文定位三元组列表);工序类样本的 output 为工序码序列加排序理由;卡片生成类样本的 output 为字段集加每字段的依据指向;计算类样本的 output 为五段式过程(#已知参数、#系数取值、#分段计算、#结果、#依据版本);审查类样本的 output 为差异清单加差异等级。逐字段定义见本卡附表 A10-13 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /02_process_design/sft/{extract,sequence,card,calc,review}/ 按五类任务分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | SFT-<任务码>-<批次号>-<序号>.jsonl,任务码取 EXT(图纸特征抽取与识读)/SEQ(工序选择与排序)/CRD(卡片字段生成)/CLC(展开长与定额计算)/RVW(工艺审查与差异比对) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经工艺部门与安全管理岗两级审批;含图纸局部视图的批次另需设计部门加签。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-02-0003、《多模态数据标注规范·产品工艺设计册》GHY26691-ST-02-0004、《备料工序字典》process_dict_28_v1.csv、标签定义表 label_dict_02_sft.csv、样本校验脚本 verify_sft_02.py、展开长确定性复算参考实现 unfold_len_ref.py | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含图纸或图纸局部视图 8.50 万条(测算 85%)、纯文本 1.20 万条(测算 12%)、含表格 0.30 万条(测算 3%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(图像、文本、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 85%(8.50 万条);实测值【待填:平台统计值】。本子集与本集基准评测子集同为 85%,在十六个子集中仅次于制造过程数据集基准评测子集的 90%(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 25%(2.50 万条);实测值【待填】。63 万张历史图纸横跨十余年,近三年新增只占其中一小部分;本子集不为提高时效占比而削减历史样本(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 图纸特征抽取与识读 3.2 万条、工序选择与排序 2.8 万条、工艺卡片字段生成 1.9 万条、展开长与定额计算 1.2 万条、工艺审查与差异比对 0.9 万条。子任务分解见本卡附表 A10-14(依技术方案 T1C 节第四部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 指令中位数【待填】字;输入中位数【待填】字(含图元解析结果的样本显著偏长);输出中位数【待填】字。计算类样本的输出最长,五段式结构所致 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按零件类型统计:板材切割件测算 41%、压弯件 26%、带孔件 21%、带坡口件 12%;实测值【待填】。按板厚档位的分布另见附表 A10-14 脚注 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 单要素抽取与单工序判断、L2 多要素关联与工序序列排定、L3 可借用工艺检索与差异归因。测算分布 L1 占 40%、L2 占 42%、L3 占 18% | 1.2.2(b1929/b1930) |
| B09 标签体系 | 四层,取值集见表 A10-4(工序字典)与本卡附表 A10-14:第一层任务类型(5 类);第二层图纸要素类别(轮廓、圆孔、方孔、坡口、倒角、压弯线、粗糙度符号、公差标注、焊缝符号、材料牌号与板厚共 10 类);第三层工序码(28 道封闭字典);第四层工装与设备资源(设备编码、工装压模号、样板号)。每层给出定义与判定边界,见标注规范 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐要素类别与工序码的条数见附表 A10-14;长尾标签集中在倒角与公差标注两类要素,以及校平矫正类工序(该类工序在序列中位置不固定,样本量偏少) | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 条,全文见本卡附件六 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、2021 年以前归档的焊接类工装图纸存在扫描件清晰度不足的情况,该部分样本的尺寸标注抽取可靠性低于整体水平,在 labels 中标记 scan_low_clarity,评测时按标记分层统计。二、排料与定额类样本集中于常用板厚规格,薄板与超厚板规格覆盖偏少;补充办法是在既有真实案例基础上做受约束的参数组合扩展(合成),合成样本单列标记。三、RVW 类(工艺审查与差异比对)样本依赖工艺变更与审查记录的留痕完整度,归因不明的修改未纳入本版。四、可借用工艺检索类样本(L3 层)的「可比性」判定目前由工艺人员裁定,判据尚未成文;判据成文前该类样本的参考输出均附裁定依据说明,不以结论单列。五、专业资料以中文为主,少量外文设备资料未纳入本版。以上五项列入《下一版本修订计划》GHY26691-PL-02-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 45%(b1512)。合成用途有二:薄板与超厚板规格的参数组合扩展;工序序列的负例构造(违反前后依赖或禁止条件的序列,用于训练模型识别不可行序列)。不合成图纸本身,理由是合成图纸会引入不存在的标注语义 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 产品全生命周期管理系统(零件图纸、物料清单、工艺文件)、工艺归档(历史工艺卡片、标准工序文件、工艺变更与审查记录)、设备档案与工装台账、工时定额系统、企业文档与外部标准。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 同 GHY26691-DC-02-0001 卡 C02;本子集另有样本构造环节:图纸与工艺卡按图号配对后,由工具链从配对结果组装输入与参考输出初稿,再经人工标注与工艺专家裁定定稿。配对不成立的图纸(pair_missing)不进入本子集 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;专业资料部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记与许可核验 → 原生图纸矢量解析与版面还原 → 符号语义解释 → 图纸与工艺卡配对校验 → 工序名称统一到 28 道封闭字典 → 术语归一 → 指令模板设计与评审 → 工具链组装样本初稿 → 规则预标注全覆盖 → 人工复核 → 20% 双人交叉标注 → 专家仲裁 → 一致性校验 → 合成与增强(受 B14 上限约束)→ 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 图纸局部视图切片按标注要素的外接矩形外扩 12% 裁切,保留原图指针;图元解析结果按视图分组输入,单视图图元数上限 2000,超出者按区域分块;工序序列长度上限 16 道(超出者为跨车间路线,不属本子集范围) | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-02-0004-V1.0《多模态数据标注规范·产品工艺设计册》(b1852) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 规则预标注覆盖全部样本;人工复核全部样本;20% 的样本做双人交叉标注,不一致样本进专家仲裁;工序序列类与计算类样本的参考输出一律经工艺专家裁定后方可定稿(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。指标口径:图纸要素层按要素类别分别统计标注员间一致率;工序码层按序列编辑距离统计;计算类样本按中间参数取值一致率统计。低于规范阈值的批次退回重标 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由工艺部门定标,覆盖 28 道工序与四类零件,每格不少于 25 条 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514)。工序序列负例的构造规则清单随集发布 | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515)。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 【待填:增强手段与增强前后分布对比结论编号】(b1528、b1529)。图纸类样本的增强限于版面裁切与局部视图抽取,不做几何变形——几何变形会改变尺寸语义 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-02-0004 基准评测子集完成去重与相似度比对;隔离口径为零件集合隔离+业务发生时间切分,同一零件的图纸与卡片不得分落训练与基准两侧,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;含标题栏信息的版面切片不得脱离平台导出 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-02 板材备料工艺智能设计(主)、SC-08 技术标准智能问答助手(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 指令微调 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 图纸要素抽取字段级准确率与召回率(按 10 类要素分别统计,带原文定位核对);工序序列正确率(按序列编辑距离与前后依赖校核双口径);卡片字段完整率与字段依据可追溯率;展开长计算的中间参数准确率与最终结果准确率分别统计(b1588r03 对应任务的判分方式见本卡 A12);工艺审查差异项召回率与误报率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-02-0002 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 指令微调脚本 sft_02.sh、样本校验脚本 verify_sft_02.py、展开长确定性复算参考实现 unfold_len_ref.py。后者的用途是把确定性计算与参数判断分开:上线后确定性计算交给程序、参数判断交给模型,评测时据此分辨两类错误 | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 板材备料工艺智能设计场景:输入零件图纸解析结果,输出工序序列候选、工装与设备关联、以及卡片可审状态字段集,效果数据见 GHY26691-VR-02-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;工序码取自备料分厂的封闭工序集合,不适合用于其他分厂或其他企业的工序设计能力评测;展开长样本绑定现行中性层位置系数版本,系数换版后旧版样本不适合用于新版评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-02-0001(预训练子集)、GHY26691-DC-02-0003(偏好对齐子集)、GHY26691-DC-02-0004(基准评测子集)、GHY26691-DC-03-0002(制造过程指令微调子集,工序流转记录的互补来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-02-0002-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-02-0002-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 24734—2009;GB/T 14689—2008;GB/T 4457.4—2002;GB/T 4458.4—2003;GB/T 131—2006;GB/T 1800.1—2020;GB/T 1804—2000;GB/T 324—2008;GB/T 985.1—2008;GB/T 985.2—2008;GB/T 1591—2018;GB/T 699—2015 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—研发设计类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;含图纸局部视图的批次按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;图纸标题栏含人员信息 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 标题栏中的设计、校核、审批人员姓名按替换法处理;客户名称按泛化法处理;企业标识与图框版式保留,理由是版式是解析规则的判定依据。依据 GB/T 37964—2019 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 工艺设计业务角色、设计业务角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-02-0002 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意;图纸类样本原则上不对外共享 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3,签名算法 SM2 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-02-SFT-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-13 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
instruction | 文本 | 长度 ≤ 256 Token | 任务指令,取自经评审的指令模板库 | 非空;须命中模板 id |
input | 对象 | 含 drawing_parse?、view_images?、card_fields?、text? | 任务输入。抽取类必含 drawing_parse 或 view_images | 非空;drawing_parse 图元数 ≤ 2000 |
output | 对象或文本 | 按任务类型分五种形态,见 A12 | 参考输出 | 计算类须含五个段标记;工序类序列长度 ≤ 16 |
task_type | 枚举 | EXT/SEQ/CRD/CLC/RVW | 任务码 | 非空、在枚举内 |
labels | 对象 | {element_types[], process_codes[], resource_refs[], coef_ver?, synthetic, seed_id?} | 四层标签与系数版本、合成标记 | process_codes 元素须在 28 道字典内;CLC 类 coef_ver 必填 |
evidence_ref | 数组 | {file, page, bbox, view?} 列表 | 支撑输出的图纸或卡片定位 | EXT/RVW 类必填;bbox 在页面范围内 |
difficulty | 枚举 | L1/L2/L3 | 难度层,口径见 B08 | 非空、在枚举内 |
drawing_no/part_no | 字符串 | 企业编号规则 | 图号与零件号 | 均必填;须在《对象主键映射表》中存在且配对关系成立 |
附表 A10-13 数据来源:字段设置依本卡 A12;标签层级依 B09;工序码取值集依表 A10-4。
附表 A10-14 本子集任务类型与子任务分解(17 项)
| 任务码 | 任务 | 条数(万条) | 子任务 | 子任务条数(万条,测算) |
|---|---|---|---|---|
| EXT | 图纸特征抽取与识读 | 3.2 | 外形轮廓与尺寸抽取 | 0.90 |
| EXT | — | — | 孔与方孔位置及规格抽取 | 0.74 |
| EXT | — | — | 坡口、倒角与焊缝符号识读 | 0.62 |
| EXT | — | — | 粗糙度与公差标注识读及作用表面判定 | 0.58 |
| EXT | — | — | 多视图投影关系判定 | 0.36 |
| SEQ | 工序选择与排序 | 2.8 | 工序选择(在 28 道封闭字典内) | 0.96 |
| SEQ | — | — | 工序排序与前后依赖校核 | 0.88 |
| SEQ | — | — | 禁止条件识别(不可行序列判定) | 0.54 |
| SEQ | — | — | 设备与工装样板关联 | 0.42 |
| CRD | 工艺卡片字段生成 | 1.9 | 卡片基础字段生成 | 0.82 |
| CRD | — | — | 定额与工时字段生成 | 0.56 |
| CRD | — | — | 字段依据指向生成(可审状态) | 0.52 |
| CLC | 展开长与定额计算 | 1.2 | 中性层系数取值与分段计算 | 0.64 |
| CLC | — | — | 材料定额与排料下料尺寸 | 0.56 |
| RVW | 工艺审查与差异比对 | 0.9 | 可借用工艺检索与可比性说明 | 0.38 |
| RVW | — | — | 差异清单生成与差异等级判定 | 0.32 |
| RVW | — | — | 修改归因(变更原因归类) | 0.20 |
| 合计 | — | 10 | — | 10 |
附表 A10-14 数据来源:任务条数依技术方案 T1C 节第四部分第 3 小节;子任务分解与条数为测算值。按板厚档位的分布:常用板厚档位测算占 78%,薄板档位 11%,超厚板档位 11%;薄板与超厚板的覆盖不足见 B12 第二项。
附件六 本子集样本示例全文(3 条)
示例 1(任务码 EXT,难度 L2,多要素关联抽取):
{"instruction":"根据给定的图纸矢量解析结果与局部视图,抽取本零件的加工要素,逐项给出原文定位;判定标注粗糙度的作用表面范围。",
"input":{"drawing_parse":"【图元解析结果摘要:主视图外形轮廓闭合多段线 1 条、圆孔 6 处、方孔 1 处;俯视图压弯线 1 条、压弯角度标注 1 处;局部放大视图坡口标注 1 处、粗糙度符号 2 处】","view_images":["DRW-2016-B077-0219-v1.png","DRW-2016-B077-0219-v3.png"]},
"output":{"elements":[
{"type":"外形轮廓","value":"闭合多段线,尺寸见标注","ref":{"view":"主视图","bbox":[210,180,1460,820]}},
{"type":"圆孔","value":"6 处,孔径与位置见标注","ref":{"view":"主视图","bbox":[380,300,1280,700]}},
{"type":"方孔","value":"1 处,位于轮廓中部","ref":{"view":"主视图","bbox":[690,420,900,560]}},
{"type":"压弯线","value":"1 条,压弯角度见标注","ref":{"view":"俯视图","bbox":[240,960,1430,1040]}},
{"type":"坡口","value":"坡口型式按焊缝符号标注,取值依 GB/T 985.1","ref":{"view":"局部放大","bbox":[1520,320,1880,520]}},
{"type":"粗糙度","value":"2 处,作用表面为与相邻件配合的接触面","ref":{"view":"局部放大","bbox":[1560,540,1860,640]}}],
"surface_scope":"粗糙度标注的作用范围限于局部放大视图所指的两个配合接触面,不含相邻非配合面;判定依据为图纸技术要求区的明确说明。",
"uncertain":[]},
"task_type":"EXT",
"labels":{"element_types":["外形轮廓","圆孔","方孔","压弯线","坡口","粗糙度"],"process_codes":[],"resource_refs":[],"synthetic":false},
"evidence_ref":[{"file":"DRW-2016-B077-0219.dwg","page":1,"bbox":[1480,96,2040,520],"view":"技术要求区"}],
"difficulty":"L2",
"drawing_no":"【待填】","part_no":"【待填】"}
示例 2(任务码 SEQ,难度 L2,含禁止条件识别):
{"instruction":"根据给定的加工要素清单与材料信息,在备料分厂工序字典内选择工序并排序;指出不可行的排序方案及其违反的依据。",
"input":{"elements":["外形轮廓","圆孔","方孔","压弯线","坡口","粗糙度"],"material":{"grade":"【待填】","thickness_mm":"【待填】"},"card_fields":null},
"output":{"sequence":["【划线工序码】","【切割工序码】","【校平工序码】","【制孔工序码】","【压弯工序码】","【坡口工序码】","【打磨工序码】","【转序工序码】"],
"rationale":"划线在切割之前,外形轮廓、方孔位置与压弯线一次标出;切割后插校平,消除切割热变形,否则后续制孔的孔位精度受变形影响;制孔在压弯之前,理由是压弯后工件不再平整、钻床定位困难;坡口在压弯之后开,避免压弯使已开坡口变形;打磨放在最后,同时处理切割面与坡口面至图纸粗糙度要求。",
"infeasible":[{"seq":"压弯在制孔之前","violates":"工艺规程中的禁止条件:压弯件在压弯后不得再行平面制孔"},{"seq":"划线在切割之后","violates":"工序前后依赖:划线为切割提供轮廓依据"}],
"resource_refs":[{"process":"【压弯工序码】","die_no":"【待填:工装压模号】"},{"process":"【切割工序码】","device_code":"【待填:设备编码】"},{"process":"【划线工序码】","template_no":"【待填:样板号】"}]},
"task_type":"SEQ",
"labels":{"element_types":["压弯线","坡口"],"process_codes":["【划线】","【切割】","【校平】","【制孔】","【压弯】","【坡口】","【打磨】","【转序】"],"resource_refs":["die_no","device_code","template_no"],"synthetic":false},
"evidence_ref":[{"file":"CRD-2019-B113-0447.png","page":1,"bbox":[72,180,1180,920]}],
"difficulty":"L2",
"drawing_no":"【待填】","part_no":"【待填】"}
示例 3(任务码 CLC,难度 L2,五段式计算过程):
{"instruction":"计算本压弯件的展开长与材料定额,给出完整计算过程与所用系数版本。",
"input":{"text":"板厚、压弯角度、内弯半径、压弯段数与各直边段长度见下表;下料精度要求见工艺规程。","card_fields":{"板厚":"【待填】","压弯角度":"【待填】","内弯半径":"【待填】","压弯段数":"【待填】","直边段长度":"【待填】"}},
"output":"#已知参数\n板厚、压弯角度、内弯半径、压弯段数与各直边段长度按输入给定;下料精度要求按工艺规程取整档位。\n#系数取值\n按本板厚档位在中性层位置系数取值表中查得系数,系数版本号随本条记录保留。\n#分段计算\n第一步,按系数与板厚确定中性层半径;第二步,按压弯角度与中性层半径计算各弯曲段中性层弧长;第三步,累加各直边段长度;第四步,直边段与弯曲段求和得展开长理论值。\n#结果\n展开长按下料精度要求取整后填入卡片定额字段;材料定额按展开长与板宽及排料方案计算,排料方案取同批次套料结果。\n#依据版本\n中性层位置系数版本号【待填】;下料精度要求依工艺规程版本号【待填】。系数或规程换版后,本条记录不做追溯重算,新版另立样本。",
"task_type":"CLC",
"labels":{"element_types":["压弯线"],"process_codes":["【压弯工序码】"],"resource_refs":["die_no"],"coef_ver":"【待填】","synthetic":false},
"evidence_ref":[{"file":"STP-2022-B031-0118.png","page":2,"bbox":[96,240,1320,980]}],
"difficulty":"L2",
"drawing_no":"【待填】","part_no":"【待填】"}
示例 2 的 infeasible 字段是本子集一处刻意的设计。工序排序类样本若只给可行序列,模型学到的是模仿而不是校核;给出不可行序列及其违反的依据,模型才能在排序时执行前后依赖与禁止条件的检查。这类负例的构造规则随集发布(见 C10)。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-02-0002-V1.0
A03_subset_purpose: 有监督指令微调
A08_sample_count: 100000
B03_multimodal_ratio: 0.85 # 测算,十六个子集中第二高(最高为 DC-03-0004 的 0.90)
B04_recent3y_ratio: 0.25 # 测算,十六个子集中最低;不以削减历史样本提高
B05_topic_distribution: {EXT: 32000, SEQ: 28000, CRD: 19000, CLC: 12000, RVW: 9000}
B07_part_type_distribution: {板材切割件: 0.41, 压弯件: 0.26, 带孔件: 0.21, 带坡口件: 0.12}
B08_difficulty_distribution: {L1: 0.40, L2: 0.42, L3: 0.18}
B09_process_dict_ref: process_dict_28_v1.csv
B14_synthetic_ratio: 【待填】 # 上限 0.45;用于薄板超厚板扩展与工序序列负例
C06_annotation_spec_id: GHY26691-ST-02-0004-V1.0
C08_inter_annotator_agreement: 【待填:要素层按类别、工序层按序列编辑距离】
C12_augment_policy: {版面裁切: 允许, 局部视图抽取: 允许, 几何变形: 禁止}
D04_scoring_note: 展开长类按中间参数与最终结果分别判分
E01_qc_report_id: GHY26691-QC-02-0002-V1.0
E05_validation_report_id: GHY26691-VR-02-0002-V1.0
G07_package: GHY26691-02-SFT-V1.0.pkg
本卡对应产品工艺设计数据集的人类偏好对齐生产任务(b1565、b1566),规模依 b1588r04。本子集的偏好判据来源与其他三集不同:主要来自工艺变更与审查记录。一张卡片从初稿到签发之间的修改痕迹,本身就是一组偏好对——改之前是劣选,改之后是优选,修改理由就是偏好理由。这类样本的采集成本低于专门组织的人工偏好标注,我方优先使用。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-02-0003-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品工艺设计数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 人类偏好对齐 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 02 产品工艺设计 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「提问+候选回答对+偏好序+偏好理由」,覆盖工序排序方案优劣、卡片填写规范性、可借用工艺推荐三类偏好对象。判据来源以工艺变更与审查记录的修改痕迹为主、工艺专家裁定为辅。修改痕迹类样本的优势是判据来自真实签发流程而非事后评价,局限是修改理由的留痕详略不一,详略情况在样本的证据字段中标明 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 0.8 万组(b1588r04)。有效组判定:含偏好理由方计为有效组(计量规则见技术方案 T1C 节表 2) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按组计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一组含 prompt、responses、preference、rationale、pref_object、judge_source、revision_ref、drawing_no 八个字段;.png(随组引用的图纸或卡片局部切片) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 字段结构同 GHY26691-DC-01-0003 卡,另增 revision_ref 字段:修改痕迹类样本在此记录工艺变更记录的编号与版本比对区间,使偏好序可回溯到真实签发流程。逐字段定义见本卡附表 A10-15 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /02_process_design/preference/{seq_quality,card_norm,reuse_rec}/ 按三类偏好对象分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PREF-<偏好对象码>-<批次号>-<序号>.jsonl,偏好对象码取 PSQ(工序排序方案优劣)/PCN(卡片填写规范性)/PRR(可借用工艺推荐) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经工艺部门与安全管理岗两级审批。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-02-0003、《多模态数据标注规范·产品工艺设计册》偏好分册、偏好裁决规则 pref_rule_02.md、样本校验脚本 verify_pref_02.py | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含图纸或卡片切片 0.56 万组(测算 70%)、纯文本 0.24 万组(测算 30%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 2(图像、文本)。本子集不含表格与时序模态,卡中如实填报而不凑数 | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 70%(0.56 万组);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 32%(0.26 万组);实测值【待填】。高于本集其他子集的 25%,原因是工艺变更与审查记录的电子留痕近年才趋于完整(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 工序排序方案优劣 0.35 万组、卡片填写规范性 0.25 万组、可借用工艺推荐 0.2 万组(依技术方案 T1C 节第四部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 提问中位数【待填】字;单个候选回答中位数【待填】字;偏好理由中位数【待填】字,下限 40 字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 判据来源为修改痕迹的组测算 68%,为专家裁定的组测算 32%;实测值【待填】 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 候选违反明确的前后依赖或禁止条件、L2 候选均可行而优劣取决于工时与工装占用、L3 候选优劣取决于可借用性与后续工序配合。测算分布 L1 占 34%、L2 占 48%、L3 占 18% | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层偏好对象(3 类,取值集见 A14);第二层偏好维度标记,取值集为 前后依赖正确性/禁止条件满足/工时与工装占用/后续工序配合/卡片字段完整性/依据可追溯性六值,可多选 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐维度命中组数见附表 A10-16 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 组,全文见本卡附件七 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、修改痕迹类样本的修改理由留痕详略不一:部分变更记录只记「按审核意见修改」而未记具体原因,这类修改无法构成有效偏好理由,不入集;入集的组在 revision_ref 中记录留痕详略档位,评测时按档位分层。二、PRR 类(可借用工艺推荐)的「可比性」判定尚无成文判据,与指令微调子集同一局限;该类组的偏好理由均附裁定依据说明。三、本子集规模 0.8 万组,是四集偏好子集中最小的一个,分到三类偏好对象与三个难度层共九格后每格样本量有限,单格结论的置信区间较宽。四、卡片填写规范性类(PCN)的偏好与业务结果关联较弱,评测时单列、不与前两类合并计算胜率。以上四项列入《下一版本修订计划》GHY26691-PL-02-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 50%(b1512)。合成用途限于劣选候选的构造:按规则生成违反前后依赖或禁止条件的工序序列、缺字段的卡片填写。构造规则清单随集发布,便于第三方判断劣选是否构造得过于明显 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 工艺变更与审查记录(协同办公系统、工艺归档)、历史工艺卡片的版本比对结果、工艺专家裁定记录(本项目期内组织)、可借用工艺检索的历史裁定记录。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 修改痕迹类按文档版本比对自动提取候选对,再由工艺人员确认修改理由并补足偏好理由三要素;专家裁定类按《偏好裁定作业指引》组织,记录裁定人角色而不记录姓名 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 变更记录采集与版本比对 → 候选对自动提取 → 留痕详略分档 → 偏好理由补足与要素校验 → 专家裁定补充(修改痕迹不足的提问)→ 不一致组仲裁 → 有效组判定 → 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 候选回答数固定 2—3 个;同一提问下的候选长度差异控制在 1.5 倍以内;候选顺序在发布态中随机打乱并记录打乱种子 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-02-0004-V1.0 偏好分册 | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 修改痕迹类:自动提取加工艺人员单人确认,抽检 20% 复核;专家裁定类:双人独立裁定,不一致进第三人仲裁,仲裁不成立的组不入集(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。偏好序一致度按成对比较的一致比例统计;偏好维度标记按标签集合重叠度统计 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由工艺部门定标,覆盖三类偏好对象与三个难度层 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-02-0004 基准评测子集完成去重与相似度比对;提问层与候选层分别比对,任一层命中即从本子集移除;零件集合隔离,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-02 板材备料工艺智能设计(主)(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 偏好对齐 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 偏好对齐胜率(按偏好对象与判据来源分层);前后依赖与禁止条件违反率(对齐后模型给出违规序列的比例,越低越好);理由一致性(模型理由与参考理由在判据维度上的重叠度) | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-02-0003 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 偏好对齐脚本 align_02.sh、偏好序校验脚本 verify_pref_02.py | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 板材备料工艺智能设计场景的工序排序子任务:对齐前后模型给出的序列与工艺人员签发序列的一致度对比,效果数据见 GHY26691-VR-02-0003 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;PCN 类与业务结果关联较弱,不适合用于工艺判断能力的对齐评测;修改痕迹类样本带甲方既有审核习惯,迁移到其他企业的审核口径时需重新校准 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-02-0002(指令微调子集,提问来源)、GHY26691-DC-02-0004(基准评测子集) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-02-0003-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-02-0003-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 985.1—2008;GB/T 131—2006 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—研发设计类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密;变更记录与裁定记录含人员信息 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 审核人、修改人与裁定人仅记录角色不记录姓名;图纸切片的标题栏人员姓名按替换法处理。依据 GB/T 37964—2019 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 工艺设计业务角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-02-0003 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3,签名算法 SM2 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-02-PREF-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-15 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
prompt | 文本 | 长度 ≤ 2048 Token | 提问,取自指令微调子集的真实提问或变更记录所对应的工艺编制情形 | 非空 |
responses | 数组 | 长度 2—3,元素含 text、origin、synthetic | 候选回答。origin 取值 修改前/修改后/模型生成/规则构造 | 长度在 2—3 内;候选间长度差异 ≤ 1.5 倍 |
preference | 数组 | 元素为下标,允许并列 | 偏好序 | 长度等于 responses 长度;修改痕迹类样本中 修改后 不得劣于 修改前 |
rationale | 文本 | 长度 ≥ 40 字 | 偏好理由,须含差异所在、判据、不确定项三要素 | 非空;三要素缺一退回重标 |
pref_object | 枚举 | PSQ/PCN/PRR | 偏好对象码 | 非空、在枚举内 |
judge_source | 枚举 | 修改痕迹/专家裁定 | 判据来源,用于评测分层 | 非空、在枚举内 |
revision_ref | 对象 | {change_record_no, version_from, version_to, trace_detail_level} | 变更记录编号、版本比对区间与留痕详略档位(取值 详/略/仅意见) | judge_source=修改痕迹 时必填;trace_detail_level=仅意见 的组不入集 |
drawing_no | 字符串 | 企业图号规则 | 图号 | 非空;须在《对象主键映射表》中存在 |
附表 A10-15 数据来源:字段设置依本卡 A12;revision_ref 字段的设置依 B12 第一项所述留痕详略问题;有效组判定依技术方案 T1C 节表 2。
附表 A10-16 本子集偏好对象与偏好维度交叉分布(测算,单位万组)
| 偏好对象 | 组数 | 前后依赖正确性 | 禁止条件满足 | 工时与工装占用 | 后续工序配合 | 卡片字段完整性 | 依据可追溯性 |
|---|---|---|---|---|---|---|---|
| PSQ 工序排序方案优劣 | 0.35 | 0.21 | 0.17 | 0.14 | 0.12 | 0.02 | 0.06 |
| PCN 卡片填写规范性 | 0.25 | 0.03 | 0.02 | 0.04 | 0.03 | 0.19 | 0.14 |
| PRR 可借用工艺推荐 | 0.20 | 0.07 | 0.05 | 0.09 | 0.11 | 0.03 | 0.10 |
| 合计 | 0.80 | 0.31 | 0.24 | 0.27 | 0.26 | 0.24 | 0.30 |
附表 A10-16 数据来源:组数依技术方案 T1C 节第四部分第 3 小节;维度命中数为测算值,维度可多选故各行之和大于该行组数。
附件七 本子集样本示例全文(2 组)
示例 1(偏好对象 PSQ,判据来源「修改痕迹」,难度 L1):
{"prompt":"本压弯件的备料工序如何排序?",
"responses":[
{"text":"划线、切割、压弯、制孔、坡口、打磨、转序。","origin":"修改前","synthetic":false},
{"text":"划线、切割、校平、制孔、压弯、坡口、打磨、转序。","origin":"修改后","synthetic":false}],
"preference":[2,1],
"rationale":"差异所在:修改后在切割之后插入校平工序,并把制孔移到压弯之前。判据:工艺规程的禁止条件规定压弯件在压弯后不得再行平面制孔,修改前的序列违反该条;切割后不校平会把热变形带入制孔工序,影响孔位精度。不确定项:校平工序在序列中的位置不固定,本件因切割面较长而变形风险高,故置于切割之后;板幅较小的同类件可省去该工序,具体以工艺人员判断为准。",
"pref_object":"PSQ",
"judge_source":"修改痕迹",
"revision_ref":{"change_record_no":"【待填:变更记录编号】","version_from":"V1","version_to":"V2","trace_detail_level":"详"},
"drawing_no":"【待填】"}
示例 2(偏好对象 PRR,判据来源「专家裁定」,难度 L3):
{"prompt":"本零件是否有可借用的既有工艺?若有,给出推荐并说明可比性。",
"responses":[
{"text":"有。零件 A 的工艺可借用,两者外形轮廓相近。","origin":"模型生成","synthetic":false},
{"text":"有。零件 B 的工艺可借用。可比性说明:两者板厚档位相同、压弯角度相同、孔系布置不同但孔径档位一致;差异在于本件多一处方孔,需在切割工序增加方孔切割,其余工序与工装可直接沿用。不可比之处:零件 B 的坡口型式与本件不同,坡口工序的参数须按本件焊缝符号重取。","origin":"历史方案","synthetic":false}],
"preference":[2,1],
"rationale":"差异所在:两候选都给出了可借用对象,区别在于是否说清可比性的具体维度与不可比之处。判据:可借用工艺的价值在于减少逐张核对的工时,而工艺人员真正需要的是「哪些能直接沿用、哪些必须重取」;候选一只说外形轮廓相近,工艺人员仍要自行逐项核对,未减少工作量。候选二逐维度给出可比性并指出坡口须重取,可直接据此修改。不确定项:可比性的判定维度目前由工艺人员裁定、尚无成文判据,本组的判定依据为板厚、压弯角度、孔径档位、坡口型式四项,判据成文后须复核本组结论。",
"pref_object":"PRR",
"judge_source":"专家裁定",
"revision_ref":null,
"drawing_no":"【待填】"}
示例 1 取自真实修改痕迹,候选对就是卡片的 V1 与 V2 两版。这类样本的构造成本几乎只有版本比对与理由补足两步,是本子集样本量的主要来源。示例 2 为专家裁定类,其不确定项字段明确写出判据尚未成文——偏好样本的理由字段若隐去这一前提,后续判据成文时无法判断哪些组需要复核。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-02-0003-V1.0
A03_subset_purpose: 人类偏好对齐
A08_sample_count: 8000 # 单位:组
B02_modality_kinds: 2 # 本子集仅图像与文本,如实填报
B05_topic_distribution: {PSQ: 3500, PCN: 2500, PRR: 2000}
B07_judge_source_distribution: {修改痕迹: 0.68, 专家裁定: 0.32}
B08_difficulty_distribution: {L1: 0.34, L2: 0.48, L3: 0.18}
B14_synthetic_ratio: 【待填】 # 上限 0.50,仅用于劣选候选构造
C07_annotation_org: {修改痕迹类: 单人确认+20% 复核, 专家裁定类: 双人独立+仲裁}
C13_dedup_conclusion_id: 【待填】
D03_target_task: 偏好对齐
E01_qc_report_id: GHY26691-QC-02-0003-V1.0
E05_validation_report_id: GHY26691-VR-02-0003-V1.0
G07_package: GHY26691-02-PREF-V1.0.pkg
本卡对应产品工艺设计数据集的基准评测生产任务(b1565、b1566),规模依 b1588r05。本子集规模 0.1 万条,是十六个子集中最小的一个,但对评测的敏感度最高。规模小而敏感度高这一组合决定了本子集的抽样设计必须比其他基准子集更严:按零件类型(板材切割件、压弯件、带孔件、带坡口件)与板厚档位分层抽样,每一层样本量不低于 50 条,避免小样本上出现层内空白。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-02-0004-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品工艺设计数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 基准评测 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 02 产品工艺设计 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,首版冻结日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集为冻结的评测样本集合,覆盖图纸识读、工序设计、定额计算、工艺审查四个能力维度。样本取自未被用于训练的零件集合,且业务发生时间晚于训练样本截止时间。定额计算类样本的判分方式与其他基准子集不同:按中间参数与最终结果分别判分,理由是材料定额中的下料尺寸写错、钢板割下来就是废料,出错代价不对称,评测必须能分辨「结果对但过程错」与「过程对但参数取错」两类错误 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 0.1 万条(b1588r05) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),字段结构同 GHY26691-DC-01-0004 卡,另增 part_type 与 thickness_band 两个分层字段;.png(图纸局部视图切片);.json(评测协议冻结记录与分层抽样核验结果) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | gold 为唯一正确答案(图纸识读、工序设计、定额计算三类);rubric 为评分细则(工艺审查类);定额计算类样本的 gold 为对象,含 intermediate(中间参数)与 final(最终结果)两个子字段,分别判分。逐字段定义见本卡附表 A10-17 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /02_process_design/benchmark/{read,sequence,calc,review}/;根目录放 protocol_frozen.json 与 stratify_check.json(分层抽样核验结果) | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | BM-<能力码>-<冻结批次>-<序号>.jsonl,能力码取 CRD(图纸识读)/CSQ(工序设计)/CCL(定额计算)/CRV(工艺审查) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经工艺部门与评测管理岗两级审批;gold 与 rubric 字段仅向评测岗开放。受理时限 3 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-02-0003、《评测协议固化记录》GHY26691-ST-00-0019、判分脚本 score_02.py、隔离核验脚本 verify_isolation_02.py、分层抽样核验脚本 verify_stratify_02.py、展开长确定性复算参考实现 unfold_len_ref.py、评分细则册 rubric_02.md(限评测岗) | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含图纸或图纸局部视图 0.085 万条(测算 85%)、纯文本 0.012 万条(测算 12%)、含表格 0.003 万条(测算 3%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(图像、文本、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 85%(0.085 万条);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 按时间隔离取训练样本截止时间之后的样本,测算趋向 100%;实测值【待填:平台统计值】。该占比高仅是时间隔离的必然结果,不构成优势(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 图纸识读 0.04 万条、工序设计 0.03 万条、定额计算 0.02 万条、工艺审查 0.01 万条(依技术方案 T1C 节第四部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 输入中位数【待填】字;参考答案中位数【待填】字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按零件类型与板厚档位两维分层统计,逐层条数见附表 A10-18;本子集不披露具体零件号,仅披露分层结构与每层条数 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层,口径同指令微调子集。测算分布 L1 占 36%、L2 占 44%、L3 占 20%;分层抽样以零件类型与板厚档位为主维度,难度层为次维度 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层能力维度(4 类,取值集见 A14);第二层考点标记,取值集见附表 A10-18 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐考点条数见附表 A10-18 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 条,全文见本卡附件八。基准子集只给基础考点示例,理由同 GHY26691-DC-01-0004 卡 B11 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、本子集规模 0.1 万条,按零件类型四类与板厚档位三档交叉共十二层,每层不低于 50 条已接近规模上限,难度层只能作为次维度统计,难度层内的分层结论置信区间宽,评测报告须给出区间。二、定额计算类样本的 gold.intermediate 字段绑定现行中性层位置系数版本,系数换版后相应样本须重新裁定,新版另立冻结批次、不覆盖旧批次。三、工艺审查类样本采用 rubric_human 判分,人工评分存在评分者差异;处置办法是同一条样本由两名评分者独立评分,差异超过一个分档的进第三人评分,三次评分取中位数。四、隔离核验依赖训练侧零件集合与时间截止点被如实登记;每版发布前由平台重跑核验,不通过不予发布。以上四项列入《下一版本修订计划》GHY26691-PL-02-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】,均晚于训练侧样本截止时间 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 0%(固定值,b1513)。本子集不使用任何形式的合成数据,该字段由平台在发布前校验,非零则阻断发布 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 隔离后零件集合的图纸与工艺卡片、同期工艺变更与审查记录、同期排料与定额计算记录。逐源登记于《数据源登记台账》GHY26691-LG-00-0001,并单列「基准集专用」标记 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 同 GHY26691-DC-02-0001 卡 C02;本子集另有隔离核验与分层抽样核验两道环节,均在样本构造之前执行 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 隔离核验 → 分层抽样设计与核验 → 采集登记 → 图纸解析与版面还原 → 样本构造 → 人工裁定答案(双人独立,不一致进仲裁,仲裁不成立不入集)→ 判分方式与评分细则定稿 → 与训练侧去重与相似度比对 → 冻结发布。本子集未经合成与增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 输入长度上限 3072 Token;图纸局部视图切片口径与指令微调子集一致(外接矩形外扩 12%),以保证可比;定额计算类样本的输入须含全部已知参数,使答案在给定输入下唯一 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-02-0004-V1.0 评测分册(答案裁定部分) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 答案一律双人独立裁定,不一致进第三人仲裁;仲裁不成立的样本不入集。工艺审查类的评分细则由工艺部门评审确认(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。基准集的一致性门限高于训练侧子集,低于门限的样本不入集 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 不适用(本子集本身即评测基准) | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 不适用(B14=0) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 不适用 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 DC-02-0001、-0002、-0003 三子集完成去重与相似度比对,命中样本从训练侧移除;零件集合隔离核验结论编号【待填】。每版发布前重跑核验(b1544、b1554) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版冻结,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用;gold 与 rubric 限评测岗;第三方评测机构按委托协议授权 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | 为 SC-02、SC-08 两个场景的能力评测供数(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 基准评测 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 图纸识读按字段级 F1(按 10 类要素分别统计);工序设计按序列编辑距离与前后依赖校核双口径;定额计算按中间参数准确率与最终结果准确率分别统计;工艺审查按 rubric_human 人工评分均值。总分按四个能力维度等权或按场景权重加权两种口径分别给出 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019;协议随本子集一同冻结,协议变更须升主版本号(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-02-0004 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 判分脚本 score_02.py、隔离核验脚本、分层抽样核验脚本、展开长确定性复算参考实现、评测执行示例 run_bench_02.sh | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 首轮全量评测:按本子集与协议对基线模型与训练后模型各执行一轮,输出逐能力维度得分、分层得分与置信区间,见 GHY26691-VR-02-0004 第 4 章(b0688) | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 不得用于训练、不得用于提示词示例、不得用于合成样本的种子;gold 不得进入任何训练侧批次。工序码绑定备料分厂封闭字典,定额样本绑定现行系数版本,两者换版后不适合用于新版评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-02-0001、-0002、-0003(三者为隔离对象) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-02-0004-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表;本子集的均衡性维度另加十二层样本量核对(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-02-0004-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测;本子集为第三方评测的执行依据之一(b0688、b2076、b2077) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 2828.1—2012;GB/T 8170—2008;GB/T 24734—2009;GB/T 131—2006;GB/T 1800.1—2020;GB/T 985.1—2008 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—研发设计类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;gold 按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 同 GHY26691-DC-02-0002 卡 F04;另有一项:本子集不披露零件号,仅披露分层结构与每层条数 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 评测岗(全字段);工艺设计业务角色(除 gold/rubric 外字段);数据加工岗不得访问 gold 字段 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-02-0004 检索;gold 字段的每一次访问单独留痕 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在冻结时写入】;摘要算法 SM3,签名算法 SM2。冻结后指纹不得变化 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-02-BM-V1.0.pkg;gold 与 rubric 单独封装为 GHY26691-02-BM-GOLD-V1.0.pkg,SM4 加密 | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版冻结) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-17 本子集记录级字段定义(数据字典节选,仅列与 DC-01-0004 卡不同的字段)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
part_type | 枚举 | 板材切割件/压弯件/带孔件/带坡口件 | 零件类型,分层抽样主维度之一 | 非空、在枚举内 |
thickness_band | 枚举 | 薄板档/常用档/超厚档 | 板厚档位,分层抽样主维度之一 | 非空、在枚举内 |
gold(定额计算类) | 对象 | {intermediate:{...}, final:{...}} | 中间参数与最终结果分列,分别判分 | 定额类必为对象形态;两子字段均非空 |
scoring | 枚举 | field_f1/edit_distance/dependency_check/exact/rubric_human | 判分方式,较 DC-01-0004 卡增两项 | 非空;rubric_human 时 rubric 必填 |
附表 A10-17 数据来源:分层字段依 B08 与附表 A10-18 的抽样设计;gold 分列依 A07 所述判分方式;其余字段同 GHY26691-DC-01-0004 卡附表 A10-9。
附表 A10-18 本子集分层抽样结构与考点分布
| 能力码 | 能力维度 | 条数 | 考点 | 考点条数(测算) | 判分方式 |
|---|---|---|---|---|---|
| CRD | 图纸识读 | 400 | 外形轮廓与尺寸抽取 | 110 | field_f1 |
| CRD | — | — | 孔与方孔规格抽取 | 90 | field_f1 |
| CRD | — | — | 坡口与焊缝符号识读 | 80 | field_f1 |
| CRD | — | — | 粗糙度作用表面判定 | 70 | exact |
| CRD | — | — | 多视图投影关系判定 | 50 | exact |
| CSQ | 工序设计 | 300 | 工序选择 | 90 | edit_distance |
| CSQ | — | — | 工序排序 | 90 | edit_distance |
| CSQ | — | — | 前后依赖与禁止条件校核 | 70 | dependency_check |
| CSQ | — | — | 设备与工装关联 | 50 | field_f1 |
| CCL | 定额计算 | 200 | 中性层系数取值 | 60 | exact |
| CCL | — | — | 分段计算与展开长 | 80 | exact(中间与结果分列) |
| CCL | — | — | 材料定额与下料尺寸 | 60 | exact(中间与结果分列) |
| CRV | 工艺审查 | 100 | 差异清单完备性 | 50 | rubric_human |
| CRV | — | — | 可比性说明充分性 | 50 | rubric_human |
| 合计 | — | 1000 | 14 个考点 | 1000 | — |
分层抽样结构(零件类型 × 板厚档位,每层条数):板材切割件分别为薄板档 50、常用档 120、超厚档 50;压弯件 50/100/50;带孔件 50/90/50;带坡口件 50/90/50。十二层合计 1000 条,每层不低于 50 条。
附表 A10-18 数据来源:能力维度条数依技术方案 T1C 节第四部分第 3 小节;分层维度与每层下限依同节关于按零件类型与板厚档位分层、每层不低于 50 条的要求;考点划分与条数为测算值。
附件八 本子集样本示例全文(2 条)
示例 1(能力码 CRD,考点「粗糙度作用表面判定」,判分方式 exact):
{"item_id":"BM02-CRD-F1-000208",
"capability":"CRD",
"part_type":"带坡口件",
"thickness_band":"常用档",
"prompt":"给定图纸局部视图与技术要求区文本,判定标注粗糙度的作用表面范围。",
"input":{"view_images":["BM02-0208-v3.png"],"text":"技术要求区:标注粗糙度的表面为与相邻件配合的接触面,作用范围限于该表面,不含相邻非配合面。"},
"gold":{"作用表面":"局部放大视图所指的两个配合接触面","是否含相邻非配合面":"不含","判定依据":"技术要求区的明确说明"},
"rubric":null,
"scoring":"exact",
"source_isolation":{"part_set_id":"ISO-02-C","time_cutoff":"【待填:训练侧业务时间截止点】"},
"biz_key":{"part_no":"【不披露,见 B07】"}}
示例 2(能力码 CCL,考点「分段计算与展开长」,判分方式 exact,中间与结果分列):
{"item_id":"BM02-CCL-F1-000061",
"capability":"CCL",
"part_type":"压弯件",
"thickness_band":"常用档",
"prompt":"计算本压弯件的展开长,给出中性层系数取值、各段计算结果与最终展开长。",
"input":{"card_fields":{"板厚":"【待填】","压弯角度":"【待填】","内弯半径":"【待填】","压弯段数":"【待填】","直边段长度":"【待填】","下料精度档位":"【待填】"},"coef_ver":"【待填:现行中性层位置系数版本号】"},
"gold":{"intermediate":{"中性层位置系数":"【待填:按系数表查得值】","中性层半径":"【待填】","各弯曲段弧长":"【待填】","各直边段长度合计":"【待填】"},
"final":{"展开长理论值":"【待填】","按精度档位取整后展开长":"【待填】"}},
"rubric":null,
"scoring":"exact",
"source_isolation":{"part_set_id":"ISO-02-A","time_cutoff":"【待填】"},
"biz_key":{"part_no":"【不披露】"}}
示例 2 的 gold 字段分为 intermediate 与 final 两段,这是本子集与其他三个基准子集在结构上的唯一差别。判分时两段分别计分并分别报告:中间参数全对而最终结果错,指向取整或求和环节;中间参数错而最终结果偶然对,不计为正确。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-02-0004-V1.0
A03_subset_purpose: 基准评测
A08_sample_count: 1000
B05_topic_distribution: {CRD: 400, CSQ: 300, CCL: 200, CRV: 100}
B07_stratify:
板材切割件: {薄板档: 50, 常用档: 120, 超厚档: 50}
压弯件: {薄板档: 50, 常用档: 100, 超厚档: 50}
带孔件: {薄板档: 50, 常用档: 90, 超厚档: 50}
带坡口件: {薄板档: 50, 常用档: 90, 超厚档: 50}
B08_difficulty_distribution: {L1: 0.36, L2: 0.44, L3: 0.20} # 次维度
B14_synthetic_ratio: 0.00 # 固定值,非零阻断发布(b1513)
C13_isolation_conclusion_id: 【待填】 # 零件集合隔离,每版重跑
D04_scoring_note: 定额类 gold 分 intermediate 与 final 两段分别判分
D09_prohibited_use: [训练, 提示词示例, 合成种子]
E01_qc_report_id: GHY26691-QC-02-0004-V1.0
E05_validation_report_id: GHY26691-VR-02-0004-V1.0
G07_package: GHY26691-02-BM-V1.0.pkg
G07_gold_package: GHY26691-02-BM-GOLD-V1.0.pkg # SM4 加密,限评测岗
本部分出制造过程数据集(业务域 03)的四张子集卡。四子集规模依招标文件表格 3-3 原值:预训练 105 亿 Token、指令微调 15 万条、强化学习偏好 1 万组、基准评测 0.2 万条(b1593r02—r05)。
本数据集的全部时序类样本共用一套三段式结构与一套工况分段规则,先在此给出,四张卡的 A12 与 C05 字段统一引用,不逐卡重复。
图 A10-2 时序样本的三段式结构与原始波形的回溯路径。数据来源:三段式结构与降采样口径依技术方案 T1C 节第五部分第 3 小节;测点采样周期依甲方物联网与设备数据平台现状;跨集引用与计量边界依本附录第 1.4 小节。
本卡对应制造过程数据集的预训练生产任务(b1565、b1566),回应 b1590、b1591 所列过程数据与运维知识范围,规模依 b1593r02。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-03-0001-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 制造过程数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 预训练 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 03 制造过程 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集向通用大模型注入制造过程侧的领域知识,语料来自热处理炉次过程时序、焊接设备与机器人参数时序、在役装备运行时序与报警日志、工单与工序流转记录、运维与检修知识及故障名录、装载码装与计量校验记录六类来源。时序类语料按图 A10-2 的三段式结构编码后进入语料,原始波形以指针保留在源系统。热处理的工艺参数本身没有自由度——淬火与回火温度、保温时间、淬火次数与冷却时间均按作业指导书设定为固定程序;因此本子集的热处理语料重点不在参数取值,而在执行条件:装炉量与码装方式、材料批次与来源厂家的成分波动、设备老化、温控参数未调好导致的曲线超限。焊接侧的语料重点是参数流与工件焊道的对齐:一件大型单部件焊缝可达数百条,一条焊缝多层多道可焊四道,对齐之后才谈得上横向比对 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 【待填:平台统计值,篇章级样本条数】。按平均 3,000 Token 一条测算约 350 万条,仅用于说明切分粒度,不计入占比指标分母 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 105.0 亿 Token(b1593r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8)、.parquet、.csv(降采样后的时序段,一段一文件,首行为测点与量纲)、.json(段落元数据与统计描述)、.png(装炉码装图像、设备图像、曲线渲染图)、.mp4(焊接产线与装配现场的工序记录视频,规模最小,见 B01) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 时序类语料按三段式结构编码(见图 A10-2);文本类语料含 doc_id、source_type、biz_time、text、seg_ref?、device_code?、term_refs、quality_flags 八个字段。逐字段定义见本卡附表 A10-19 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /03_manufacturing/pretrain/{heat_treat,welding,equipment,workorder,maintenance,metering}/{year}/ 六类来源各一目录,目录内按业务年份与设备编码分层 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PT-<来源码>-<设备编码>-<业务年月>-<段序号>.jsonl,来源码取 HT/WD/EQ/WO/MT/MS(含义见 DC-03-0000 卡 A14) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经生产管理部门与安全管理岗两级审批;EQ 类批次另需远程运维平台管理方加签。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-03-0003、《测点与量纲对照表》tag_dict_v1.csv、《工况分段规则》seg_rule_v1.json、语料读取脚本 read_pretrain_03.py、段落回溯脚本 seg_trace.py、术语词典 term_dict_03.json | 1.1.6(b1924/b1925) |
| B01 模态构成 | 时序【待填】条(测算占比 58%)、文本【待填】条(测算 22%)、图像【待填】条(测算 14%)、表格【待填】条(测算 5%)、视频【待填】条(测算 1%)。视频语料为焊接产线与装配现场的工序记录,按场景多样性语料定位建设,规模最小,不追求条数占比 | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 5(时序、文本、图像、表格、视频)。本子集与产品质量数据集预训练子集(DC-04-0001)并列为十六个子集中模态种类最多,均为 5 种;四种项目要求模态(时序、图像、文本、视频)在本子集内齐备(b1601r02、b0683) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 【待填:平台统计值】。本子集按 Token 计量,占比指标在以条计量的三子集与四集汇总层面核算(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 【待填:平台统计值】。按业务发生时间判定;本集采集覆盖近年才扩展,早期过程数据在测点覆盖与采样粒度上多数不满足入集条件(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 六主题:热处理炉次过程、焊接参数过程、在役装备运行、工单与工序流转、运维与检修知识、装载与计量。逐主题 Token 量见本卡附表 A10-20 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 中位数【待填】Token,90 分位【待填】Token。时序类语料的长度由段落时长与统计描述字数共同决定,分布按来源码分别统计 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 热处理炉次过程时序 31 亿 Token(29.5%)、焊接设备与机器人参数时序 27 亿(25.7%)、在役装备运行时序与报警日志 21 亿(20.0%)、工单工序流转与报工记录 13 亿(12.4%)、运维与检修知识及故障名录与机理 9 亿(8.6%)、装载码装与计量校验记录 4 亿(3.8%)。合计 105 亿 Token(依技术方案 T1C 节表 9) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 不适用(预训练语料不设难度分层) | 1.2.2(b1929/b1930) |
| B09 标签体系 | 不适用(无标注连续语料)。保留来源码、主题码、设备编码、工况段码四类元数据标记,取值集见附表 A10-20 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 不适用 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 条,全文见本卡附件九 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、部分设备仅有分钟级均值,粒度不足以支持细粒度偏离描述;语料在 seg_ref.granularity 中标注粒度档位,quality_flags 中标记 granularity_coarse。二、焊接侧的预热温度与层间温度目前只能人工抽检、纸质记录,这两项恰是最影响气孔与裂纹的参数;新增感知设备到位之前,相关语料按人工记录补录,可信度在证据等级字段中标明。三、三机联动使在役装备振动信号含有来自其他设备的耦合干扰,耦合干扰段单独标记 coupling_interference;矿方传感器损坏后往往不予补装,测点连续性缺口以缺失标记显式保留、不做插补。四、制造执行系统的报工时点相对实际作业有滞后,语料以实际作业时间区间表示而不按报工时点对齐;这一处置使语料与时序段可对齐,但报工时点本身不可作为时间基准使用。五、装载与码装、计量校验当前无结构化记录,按增设填报入口方式补录,首版覆盖度低于其他来源,MS 类实际 Token 量可能低于测算值 4 亿,缺口由 HT 与 WD 两类补足。六、产线已有摄像头是出于安全考虑的宏观场景监控,角度与清晰度达不到观察焊接部位的要求;视频语料取自为工艺过程另行布点的采集,布点进度决定该类语料的实际规模。以上六项列入《下一版本修订计划》GHY26691-PL-03-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 30%(b1512)。合成用途限于两处:时序段统计描述的自然语言转述(属格式转换);稀少异常工况的描述性语料补充,种子取自真实异常段。不合成时序数值本身,理由是合成数值会使后续的偏离判定失去物理依据 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 见 GHY26691-DC-03-0000 卡 C01 所列九类来源。逐源的采集时间范围与所属单位登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 见 GHY26691-DC-03-0000 卡 C02;本子集的语料化另有一道编码环节:时序段按《工况分段规则》切段后生成统计描述,描述文本与段落指针一并入集 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;在役装备数据涉及矿方设备运行情况的部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记 → 时间基准统一与时钟校正 → 对象主键贯通(炉次、焊缝与焊道、工单、设备编码)→ 工况分段与降采样编码 → 段落统计描述生成 → 术语归一 → 语义切分与滑窗拼接 → 去重 → 质检门控 → 定版。本子集未经标注与增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 降采样:升温段 10 秒一点、保温段 30 秒一点、冷却段 10 秒一点;焊接按焊道切段,段内保留全部采样点的统计量与偏离描述;文本切分目标长度 512 Token,滑窗重叠 64 Token;去重按段落级最小哈希相似度阈值 0.85;视频按工序节点切片,单片时长上限 120 秒 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | 不适用(无标注) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 不适用 | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 不适用 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 不适用 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-03-0004 基准评测子集完成去重与相似度比对;隔离口径为炉次集合与部件集合隔离+业务发生时间切分,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发;在役装备数据中涉及矿方生产情况的部分对外共享须另经矿方同意 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-04 热处理过程控制智能化、SC-05 焊接过程控制智能化、SC-06 刮板输送装备健康诊断智能化(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 制造过程领域知识探针准确率(探针覆盖六个业务主题,按采样粒度档位分层)、保留语料困惑度变化率、术语一致性命中率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-03-0001 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 继续预训练脚本 cpt_03.sh、段落回溯脚本 seg_trace.py、统计描述复算脚本 seg_stats_ref.py(供第三方在脱离平台的环境中复算 seg_stats) | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 热处理过程控制场景的曲线描述子任务:输入某炉次的实际曲线段,输出该段的结构化统计描述,效果数据见 GHY26691-VR-03-0001 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集为无标注连续语料,不适合直接用于有监督指令微调或作为评测集使用;热处理语料的参数取值来自固定程序,不适合用于参数正算能力的知识探针 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-03-0002、-0003、-0004;GHY26691-DC-04-0001(产品质量预训练子集,质量结论的互补来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-03-0001-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-03-0001-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 231.1—2018;GB/T 3375—1994;GB/T 35295—2017 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—生产制造类、生产经营数据—设备运维类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值;在役装备涉及矿方生产情况的数据按较高一级处理】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密、重要行业数据;部分记录含经手人信息 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 操作工、检修人员与经手人姓名按替换法处理;矿方名称与井下工作面位置按泛化法处理到矿区层级;设备编码保留,理由是设备编码是对象主键、泛化后语料无法与时序段对齐。依据 GB/T 37964—2019 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 工艺业务角色、生产管理角色、设备与检修角色、售后服务角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-03-0001 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意,涉及矿方生产情况的部分另经矿方同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3,签名算法 SM2 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-03-PT-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-19 本子集记录级字段定义(数据字典)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
doc_id | 字符串 | PT03-<来源码>-<设备编码>-<业务年月>-<段序号> | 语料条唯一标识 | 非空、全集唯一 |
source_type | 枚举 | HT/WD/EQ/WO/MT/MS | 来源码 | 非空、在枚举内 |
biz_time | 日期或区间 | YYYY-MM-DD 或 [起,止] | 业务发生时间;工单类填实际作业时间区间而非报工时点 | 非空;WO 类必为区间 |
text | 文本 | UTF-8,长度 ≤ 4096 Token | 发布态语料正文(含时序段的统计描述) | 非空;禁止出现未脱敏的人员姓名 |
seg_ref | 对象 | {device_code, tag_ids[], window, phase, granularity, heat_no?, weld_seam_id?, weld_pass_id?} | 时序段指针与元数据 | HT/WD/EQ 类必填;granularity 取值 秒级/分钟级;phase 须在《工况分段规则》定义的工况段内 |
seg_stats | 对象 | {setpoint, actual, deviation, direction, duration, trend} | 段落结构化统计描述 | 与 seg_ref 同时必填;deviation 须可由原始段落复算 |
device_code | 字符串 | 设备档案编码规则 | 设备编码 | HT/WD/EQ/MS 类必填;须在《对象主键映射表》中存在 |
term_refs | 数组 | 术语词典条目 id 列表 | 命中的归一术语(焊接术语来源 GB/T 3375) | 每个 id 须在 term_dict_03.json 中存在 |
quality_flags | 数组 | granularity_coarse/coupling_interference/sensor_gap/manual_record/report_time_lag/no_structured_record | 已知质量标记 | 取值在枚举内;sensor_gap 区间须在 seg_ref.window 内给出 |
附表 A10-19 数据来源:字段设置依本卡 A12 与图 A10-2;质量标记枚举依 B12 所列六项局限性;phase 取值集依《工况分段规则》。
附表 A10-20 本子集来源、主题与工况段取值集及 Token 分布(测算)
| 来源码 | 主题 | 亿 Token | 占比 | 工况段取值集(phase) | 对象主键 |
|---|---|---|---|---|---|
| HT | 热处理炉次过程 | 31 | 29.5% | 装炉/升温/保温/淬火冷却/回火升温/回火保温/出炉 | heat_no + device_code |
| WD | 焊接参数过程 | 27 | 25.7% | 引弧/打底道/填充道/盖面道/收弧/道间停歇 | weld_seam_id + weld_pass_id |
| EQ | 在役装备运行 | 21 | 20.0% | 空载/正常运行/重载/启停过渡/耦合干扰段 | device_code + 测点标识 |
| WO | 工单与工序流转 | 13 | 12.4% | 不适用(非时序) | work_order_no |
| MT | 运维与检修知识 | 9 | 8.6% | 不适用(非时序) | 故障名录条目 id |
| MS | 装载与计量 | 4 | 3.8% | 装炉(与 HT 共用) | heat_no /计量器具编号 |
| 合计 | — | 105 | 100% | — | — |
附表 A10-20 数据来源:Token 构成依技术方案 T1C 节表 9;工况段取值集依《工况分段规则》与热处理作业指导书的固定程序段划分、焊接多层多道的道次划分;构成比例为测算值。
附件九 本子集样本示例全文(3 条)
示例 1(来源码 HT,热处理保温段的三段式语料):
{"doc_id":"PT03-HT-【待填:炉台设备编码】-202408-001947",
"source_type":"HT",
"biz_time":"2024-08-13",
"text":"本炉次为调质处理,装炉工件为中部槽槽帮类零件,装炉量与码装方式见装炉记录。保温段的设定温度按作业指导书固定程序给定,保温时长同样固定。实际曲线在保温段前段出现一次低于设定值的偏离,偏离幅度与持续时长见统计描述;偏离发生在装炉侧测点而非炉膛中部测点,结合本炉次装炉量偏大、工件间隙偏窄的记录,判断偏离来自装炉条件而非温控参数。该炉次出炉后硬度检测结果见质量侧记录(以编号引用,不在本语料中复制)。参数取值本身无自由度,可调量限于装炉量与码装间隙。",
"seg_ref":{"device_code":"【待填】","tag_ids":["【待填:实际温度测点】","【待填:设定温度测点】"],"window":["2024-08-13T04:12:00","2024-08-13T06:48:00"],"phase":"保温","granularity":"秒级","heat_no":"【待填:炉次号】"},
"seg_stats":{"setpoint":"【待填:设定温度】","actual":"【待填:实际均值】","deviation":"【待填:偏离幅度】","direction":"偏低","duration":"【待填:持续时长】","trend":"前段偏低后回升至设定值并稳定"},
"device_code":"【待填】",
"term_refs":["T-2011-调质","T-2044-装炉量","T-2077-码装方式","T-2103-保温段"],
"quality_flags":[]}
示例 2(来源码 WD,焊接填充道的三段式语料,含人工记录标记):
{"doc_id":"PT03-WD-【待填:机器人设备编码】-202503-012208",
"source_type":"WD",
"biz_time":"2025-03-06",
"text":"本焊道为某大型单部件的一条多层多道焊缝的第二填充道。机器人记录了电流、电压、送丝速度、焊接速度、摆幅与左右停留时间六项参数,本道各项均在工艺窗口内,摆幅略偏下限。层间温度由人工抽检并纸质记录,本道记录值见统计描述的人工记录项;该项目前无自动采集手段,是最影响气孔与裂纹的两项参数之一。本焊缝共四道,道间停歇时长见各道段落。本道完成后未发现外观异常,交检结论见质量侧记录(以编号引用)。",
"seg_ref":{"device_code":"【待填】","tag_ids":["电流","电压","送丝速度","焊接速度","摆幅","左停留","右停留"],"window":["2025-03-06T09:21:14","2025-03-06T09:33:02"],"phase":"填充道","granularity":"秒级","weld_seam_id":"【待填:焊缝标识】","weld_pass_id":"【待填:焊道标识,本缝第 2 道】"},
"seg_stats":{"setpoint":"【待填:各参数工艺窗口】","actual":"【待填:各参数段内均值与极值】","deviation":"摆幅接近下限","direction":"偏低","duration":"全道","trend":"各参数段内平稳","manual_record":{"层间温度":"【待填:人工抽检值】","记录方式":"纸质"}},
"device_code":"【待填】",
"term_refs":["T-2201-多层多道","T-2233-层间温度","T-2255-工艺窗口","T-2288-摆幅"],
"quality_flags":["manual_record"]}
示例 3(来源码 MT,运维知识语料,含四档证据分级口径):
{"doc_id":"PT03-MT-NA-202501-004471",
"source_type":"MT",
"biz_time":"2025-01",
"text":"关于减速器类故障的证据分级口径:本项目对故障记录按证据强度分四档。第一档为有检修实物证据且有对应时段数据的记录,可直接作为标签样本;第二档为有检修记录但对应时段数据缺失或测点损坏的记录,仅可作为知识语料不可作为标签;第三档为仅有报警记录而无检修确认的记录,按疑似处理并单独标记;第四档为运行人员口述而无任何书面记录的情形,不入集。分档的必要性在于:远程运维平台已采集旋转类三大件的振动加速度、温度、压力与冷却水流量,报警不少,但「发生了什么故障、那段时间的数据是什么样」这一配对关系目前是空的;不分档会把疑似当成事实,训练出的模型会把报警当故障。",
"seg_ref":null,
"seg_stats":null,
"device_code":null,
"term_refs":["T-2301-证据分级","T-2333-振动加速度","T-2355-三大件"],
"quality_flags":[]}
三条示例覆盖本子集三类语料形态:有完整时序段与统计描述的(示例 1)、时序段齐备但关键参数仍为人工纸质记录的(示例 2)、无时序段的纯知识语料(示例 3)。示例 3 的内容是本集的一条基础口径——四档证据分级,它决定了哪些记录可以成为标签、哪些只能作为知识,这一分档在后续三个子集的卡中反复引用。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-03-0001-V1.0
A03_subset_purpose: 预训练
A09_token_total_yi: 105.0
B01_modality:
- {type: 时序, count: 【待填】, ratio: 0.58}
- {type: 文本, count: 【待填】, ratio: 0.22}
- {type: 图像, count: 【待填】, ratio: 0.14}
- {type: 表格, count: 【待填】, ratio: 0.05}
- {type: 视频, count: 【待填】, ratio: 0.01}
B02_modality_kinds: 5 # 与 DC-04-0001 并列最多
B07_source_distribution:
- {code: HT, token_yi: 31}
- {code: WD, token_yi: 27}
- {code: EQ, token_yi: 21}
- {code: WO, token_yi: 13}
- {code: MT, token_yi: 9}
- {code: MS, token_yi: 4}
B09_label_system: null # 无标注;保留来源、主题、设备、工况段四类元数据标记
B12_quality_flags_enum: [granularity_coarse, coupling_interference, sensor_gap, manual_record, report_time_lag, no_structured_record]
B14_synthetic_ratio: 【待填】 # 上限 0.30;不合成时序数值
C05_downsample: {升温: 10s, 保温: 30s, 冷却: 10s, 焊接: 按焊道切段}
C13_dedup_conclusion_id: 【待填】 # 炉次与部件集合隔离
E01_qc_report_id: GHY26691-QC-03-0001-V1.0
E05_validation_report_id: GHY26691-VR-03-0001-V1.0
G07_package: GHY26691-03-PT-V1.0.pkg
本卡对应制造过程数据集的有监督指令微调生产任务(b1565、b1566),规模依 b1593r03。本子集的全部时序类样本沿用图 A10-2 的三段式结构,参考输出落在第三段 task_output。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-03-0002-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 制造过程数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 有监督指令微调 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 03 制造过程 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「指令+输入+参考输出」三元组,覆盖热处理曲线偏离识别与处置建议、焊接参数窗口与偏差归因、设备健康异常判断与检查顺序、工单与工序流转问答、计量与装载登记规范问答五类任务。输入为时序段的指针与统计描述(不含原始波形),参考输出为偏离判定、可调量建议、归因结论或检查顺序。本子集的设计以一条业务事实为前提:热处理工艺参数无自由度,可调量限于装炉量与码装间隙一类执行条件;焊接参数调整由工艺人员判断与操作,系统做的是分析比对。因此参考输出一律给「判定+依据+可调量范围」,不给「把参数改成某值」这样的指令式结论 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 15 万条(b1593r03) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一条含 instruction、input、output、task_type、labels、evidence_ref、difficulty、seg_ref 八个字段;.csv(随样本引用的时序段);.png(装炉码装与设备图像) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | input 含 seg_ref 与 seg_stats 两段(见图 A10-2),不含原始波形;output 为结构化文本,段标记为 #判定、#依据、#可调量、#检查顺序、#不确定项,按任务类型取用其中若干段。逐字段定义见本卡附表 A10-21 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /03_manufacturing/sft/{heat_dev,weld_attr,health,workorder,metering}/ 按五类任务分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | SFT-<任务码>-<批次号>-<序号>.jsonl,任务码取 HTD(热处理曲线偏离识别与处置)/WDA(焊接参数窗口与偏差归因)/EQH(设备健康异常判断与检查顺序)/WOQ(工单与工序流转问答)/MSQ(计量与装载登记规范问答) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经生产管理部门与安全管理岗两级审批;EQH 类批次另需远程运维平台管理方加签。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-03-0003、《多模态数据标注规范·制造过程册》GHY26691-ST-03-0004、《工况分段规则》seg_rule_v1.json、《测点与量纲对照表》tag_dict_v1.csv、标签定义表 label_dict_03_sft.csv、样本校验脚本 verify_sft_03.py、统计描述复算脚本 seg_stats_ref.py | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含时序段引用 10.95 万条(测算 73%)、纯文本 3.00 万条(测算 20%)、含图像 0.90 万条(测算 6%)、含表格 0.15 万条(测算 1%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 4(时序、文本、图像、表格) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 79%(11.85 万条);实测值【待填:平台统计值】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 85%(12.75 万条);实测值【待填】。采集覆盖近年才扩展,早期数据多不满足入集条件(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 热处理曲线偏离识别与处置建议 4.3 万条、焊接参数窗口与偏差归因 4.1 万条、设备健康异常判断与检查顺序 3.6 万条、工单与工序流转问答 1.8 万条、计量与装载登记规范问答 1.2 万条。子任务分解见本卡附表 A10-22 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 指令中位数【待填】字;输入中位数【待填】字(统计描述的字数主导);输出中位数【待填】字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按设备类别统计:热处理炉台测算 29%、焊接机器人与产线 27%、在役装备测点 24%、非设备类(工单与计量)20%;实测值【待填】。另按采样粒度档位统计:秒级样本测算 81%、分钟级 19%,评测按此分层 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 单段判别(给一段曲线判是否偏离)、L2 同批次横向比对(同材料批次、同装炉方式或同型部件内比对)、L3 跨批次归因(跨批次定位成因)。测算分布 L1 占 42%、L2 占 38%、L3 占 20% | 1.2.2(b1929/b1930) |
| B09 标签体系 | 三层,取值集见附表 A10-22:第一层任务类型(5 类);第二层异常或偏离类别(热处理按升温段偏离、保温段超限、冷却速率异常、装炉条件异常四类;焊接按电流电压偏离、送丝速度偏离、焊接速度偏离、摆幅与停留时间偏离、预热与层间温度不足五类;设备健康按振动特征异常、温度异常、压力异常、冷却水流量异常、耦合干扰段五类);第三层处置动作与证据等级(证据四档,口径见 DC-03-0001 卡附件九示例 3) | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐类别条数见附表 A10-22;长尾标签集中在冷却速率异常与压力异常两类,样本量受真实发生频次限制 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 条,全文见本卡附件十 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、分钟级均值设备的样本占测算 19%,这部分样本不支持细粒度偏离判定;样本在 seg_ref.granularity 中标注档位,评测按档位分层统计,避免把粒度不足造成的误差记到模型能力上。二、预热温度与层间温度为人工抽检纸质记录,相关样本的证据等级低于自动采集项;新增感知设备到位后,这部分样本须重做并另立批次,旧批次保留但在卡中标注其证据等级。三、EQH 类样本的标签依赖故障与数据段的配对,而该配对关系当前为空,须按四档证据分级逐条建立;第一档(有检修实物证据且有对应时段数据)样本量是本类任务的真实上限,若第一档不足,本类样本量按实际达成填报并在验证报告中单列成因,不以第三档疑似样本填平数量。四、WOQ 类样本的时间基准为实际作业时间区间而非报工时点,使用报工时点作为输入的问法不在本子集覆盖范围内。五、MSQ 类(计量与装载登记)当前无结构化记录,样本依赖增设填报入口后的补录,首版样本量可能低于 1.2 万条的测算值,缺口由 HTD 类补足。以上五项列入《下一版本修订计划》GHY26691-PL-03-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 45%(b1512)。合成用途限于两处:稀少异常类别的样本补充(种子取自真实异常段的统计描述,按规则生成相邻参数组合,不生成时序数值);指令措辞的同义扩展。合成样本在 labels 中标记 synthetic:true 并记录种子 id | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 见 GHY26691-DC-03-0000 卡 C01。另有工艺人员与检修人员的处置记录(本项目期内按增设填报入口采集),作为 task_output 中可调量建议与检查顺序的来源 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 同 GHY26691-DC-03-0001 卡 C02;本子集另有样本构造环节:时序段按《工况分段规则》切段并生成统计描述后,由工具链组装指令与参考输出初稿,再经工艺或检修人员复核与专家裁定定稿 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;在役装备涉及矿方设备运行情况的部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记 → 时间基准统一 → 对象主键贯通 → 工况分段与降采样 → 段落统计描述生成 → 与质量结论配对(配对不成立的段落转入 L1 单段判别类)→ 指令模板设计与评审 → 工具链组装初稿 → 规则预标注 → 工艺或检修人员复核 → 异常段双人交叉标注 → 专家仲裁 → 一致性校验 → 合成与增强(受 B14 上限约束)→ 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 降采样与切段口径同 DC-03-0001 卡 C05;输入中的统计描述字段固定六项(设定值、实际值、偏离幅度、方向、持续时长、分段趋势),缺项样本不予定稿;横向比对类样本(L2)的对照段数固定 3—5 段 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-03-0004-V1.0《多模态数据标注规范·制造过程册》(b1852) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 规则预标注覆盖全部样本;工艺或检修人员复核全部样本;异常段样本做双人交叉标注,不一致进专家仲裁;处置建议与检查顺序一律经专家裁定后定稿(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。指标口径:偏离类别层按标签一致率统计;处置动作层按动作集合重叠度统计;检查顺序按序关系一致度统计。低于规范阈值的批次退回重标 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由工艺与检修部门共同定标,覆盖五类任务、十四类异常类别与三个难度层 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515)。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 【待填:增强手段与增强前后分布对比结论编号】(b1528、b1529)。时序类样本的增强限于时间窗平移与同工况段重组,不做幅值缩放——幅值缩放会改变偏离判定的物理含义 | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-03-0004 基准评测子集完成去重与相似度比对;炉次集合与部件集合隔离+业务发生时间切分,同一炉次或同一部件的段落不得分落训练与基准两侧,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-04 热处理过程控制智能化(主)、SC-05 焊接过程控制智能化(主)、SC-06 刮板输送装备健康诊断智能化(主)(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 指令微调 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 曲线偏离识别准确率与误报率(按采样粒度档位与异常类别双重分层);偏差归因结论与专家结论一致率;可调量建议的范围覆盖率(建议范围是否包含专家给出的范围);检查顺序合理性人工评分;横向比对任务的对照段选取正确率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-03-0002 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 指令微调脚本 sft_03.sh、样本校验脚本 verify_sft_03.py、统计描述复算脚本 seg_stats_ref.py、段落回溯脚本 seg_trace.py | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 热处理过程控制场景:输入某炉次保温段的指针与统计描述,输出偏离判定、依据、可调量范围,并给出同材料批次同装炉方式的历史炉次横向比对结论,效果数据见 GHY26691-VR-03-0002 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;参考输出不含「把参数改成某值」这类指令式结论,不适合用于参数自动寻优能力的评测——参数调整由工艺人员判断与操作,这是甲方明确的业务口径;分钟级粒度样本不适合用于细粒度偏离能力的评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-03-0001、-0003、-0004;GHY26691-DC-04-0002(产品质量指令微调子集,质量结论的配对来源) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01 质检报告编号 | GHY26691-QC-03-0002-V1.0 | 1.3.3(b1942/b1943);主依据 b1568 |
| E02 六维度质检结果 | 见质检报告摘要表(b1542、b1543) | 1.3.3(b1942/b1943);主依据 b1542、b1543 |
| E03 质检结论 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E04 未关闭缺陷 | 【待填】 | 1.3.3(b1942/b1943);主依据 b1568 |
| E05 验证报告编号 | GHY26691-VR-03-0002-V1.0(b1561) | 1.4.4(b1955/b1956);主依据 b1561 |
| E06 能力增量结论 | 见验证报告第 3 章(b1555、b1556) | 1.4.4(b1955/b1956) |
| E07 场景可用性结论 | 见验证报告第 4 章(b1557、b1558) | 1.4.4(b1955/b1956);1.4.2(b1951/b1952) |
| E08 第三方评测状态 | 待评测(b0688) | 1.4.4(b1955/b1956);主依据 b0688 |
| E09 依据标准版本 | TC609-5-2025-04;GB/T 36344—2018;GB/T 231.1—2018;GB/T 228.1—2021;GB/T 3375—1994;GB/T 324—2008 | 1.4.3(b1953/b1954) |
| E10 复测记录 | 【待填】 | 1.3.5(b1946/b1947);主依据 b0688 |
| F01 数据分类 | 生产经营数据—生产制造类、生产经营数据—设备运维类 | 1.4.1(b1949/b1950);主依据 b1396 |
| F02 数据分级 | 【待填:按甲方分级标准取值】 | 1.4.1(b1949/b1950);主依据 b1396 |
| F03 涉及敏感信息类型 | 商业秘密、重要行业数据;处置记录含经手人信息 | 1.2.5(b1935/b1936);1.4.1(b1949/b1950) |
| F04 去标识化方法 | 同 GHY26691-DC-03-0001 卡 F04;另有一项:处置记录中的经手人仅记录角色(如「热处理工艺员」「检修班组」)不记录姓名 | 1.3.3(b1942/b1943);主依据 b1534 |
| F05 去标识化效果评估 | 按 GB/T 42460—2023 评估,结论编号【待填】 | 1.3.3(b1942/b1943);主依据 b1396 |
| F06 商用可用性核查 | 已核查,核查记录编号【待填】 | 1.4.1(b1949/b1950);主依据 b0804r06 |
| F07 来源合法性承诺 | GHY26691-ST-00-0007 审查记录编号【待填】 | 1.3.1(b1938/b1939) |
| F08 访问权限范围 | 工艺业务角色、生产管理角色、设备与检修角色、售后服务角色、数据加工岗、评测岗 | 1.1.4(b1920/b1921) |
| F09 审计记录位置 | 平台审计日志按 GHY26691-DC-03-0002 检索 | 1.1.5(b1922/b1923);主依据 b1396 |
| F10 出境与共享限制 | 不得跨境传输;对外共享须经甲方书面同意,涉及矿方生产情况的部分另经矿方同意 | 1.4.1(b1949/b1950) |
| G01—G06 指纹字段 | 【待填:由平台在定版时写入】;摘要算法 SM3,签名算法 SM2 | 1.3.5(b1946/b1947);主依据 b1567、b1568 |
| G07 自描述封装文件 | GHY26691-03-SFT-V1.0.pkg | 1.1.6(b1924/b1925);1.1.2(b1916/b1917);主依据 b1569、b1570 |
| G08 上游版本 | 无(首版) | 1.3.5(b1946/b1947) |
| G09 血缘标识 | 【待填】 | 1.3.3(b1942/b1943);1.3.5(b1946/b1947) |
附表 A10-21 本子集记录级字段定义(数据字典节选)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
instruction | 文本 | 长度 ≤ 256 Token | 任务指令,取自经评审的指令模板库 | 非空;须命中模板 id |
input | 对象 | 含 seg_ref、seg_stats,横向比对类另含 compare_segs[] | 任务输入,不含原始波形 | HTD/WDA/EQH 类必含 seg_ref;L2 类 compare_segs 长度 3—5 |
output | 文本 | 含 #判定/#依据/#可调量/#检查顺序/#不确定项 若干段 | 参考输出 | HTD/WDA 类须含 #判定、#依据、#可调量 三段;EQH 类须含 #检查顺序 |
task_type | 枚举 | HTD/WDA/EQH/WOQ/MSQ | 任务码 | 非空、在枚举内 |
labels | 对象 | {anomaly_class, action, evidence_level, synthetic, seed_id?} | 三层标签与合成标记;evidence_level 取 1—4 档 | anomaly_class 须在十四类清单内;evidence_level=4 的样本不入集 |
evidence_ref | 数组 | {record_no} 或 {file, page} 列表 | 支撑参考输出的检修记录、质量结论编号或纸质记录定位 | EQH 类必填;evidence_level≤2 的样本必填 |
difficulty | 枚举 | L1/L2/L3 | 难度层,口径见 B08 | 非空;L2/L3 须有 compare_segs 或跨批次引用 |
seg_ref | 对象 | 同 DC-03-0001 卡附表 A10-19 | 时序段指针与元数据 | 时序类必填;granularity 非空 |
附表 A10-21 数据来源:字段设置依本卡 A12 与图 A10-2;证据分级依 DC-03-0001 卡附件九示例 3 所述四档口径;异常类别清单依 B09。
附表 A10-22 本子集任务类型与子任务分解(16 项)
| 任务码 | 任务 | 条数(万条) | 子任务 | 子任务条数(万条,测算) | 主要异常类别 |
|---|---|---|---|---|---|
| HTD | 热处理曲线偏离识别与处置建议 | 4.3 | 升温段偏离识别 | 1.10 | 升温段偏离 |
| HTD | — | — | 保温段超限识别 | 1.24 | 保温段超限 |
| HTD | — | — | 冷却速率异常识别 | 0.68 | 冷却速率异常 |
| HTD | — | — | 装炉条件归因(装炉量与码装间隙) | 0.82 | 装炉条件异常 |
| HTD | — | — | 同批次横向比对 | 0.46 | 跨类别 |
| WDA | 焊接参数窗口与偏差归因 | 4.1 | 电流电压偏离识别 | 1.02 | 电流电压偏离 |
| WDA | — | — | 送丝与焊接速度偏离识别 | 0.88 | 送丝速度偏离/焊接速度偏离 |
| WDA | — | — | 摆幅与停留时间偏离识别 | 0.74 | 摆幅与停留时间偏离 |
| WDA | — | — | 预热与层间温度不足判断 | 0.62 | 预热与层间温度不足 |
| WDA | — | — | 同型部件参数横向比对与差异清单 | 0.84 | 跨类别 |
| EQH | 设备健康异常判断与检查顺序 | 3.6 | 振动特征异常判断 | 1.14 | 振动特征异常 |
| EQH | — | — | 温度与压力异常判断 | 0.86 | 温度异常/压力异常 |
| EQH | — | — | 冷却水流量异常判断 | 0.52 | 冷却水流量异常 |
| EQH | — | — | 耦合干扰段识别与剔除 | 0.58 | 耦合干扰段 |
| EQH | — | — | 检查顺序生成 | 0.50 | 跨类别 |
| WOQ | 工单与工序流转问答 | 1.8 | 工单状态与流转问答、报工时点与实际作业区间辨析 | 1.80 | 不适用 |
| MSQ | 计量与装载登记规范问答 | 1.2 | 装炉量与码装方式登记规范、计量器具校验规范问答 | 1.20 | 不适用 |
| 合计 | — | 15 | — | 15 | — |
附表 A10-22 数据来源:任务条数依技术方案 T1C 节第五部分第 3 小节;子任务分解与条数为测算值;异常类别取值集依 B09 第二层标签。
附件十 本子集样本示例全文(3 条)
示例 1(任务码 HTD,难度 L2,同批次横向比对):
{"instruction":"给定本炉次保温段的统计描述与三段同材料批次、同装炉方式的历史对照段,判断本炉次是否存在偏离,给出依据与可调量范围。",
"input":{"seg_ref":{"device_code":"【待填】","tag_ids":["实际温度","设定温度"],"window":["2024-08-13T04:12:00","2024-08-13T06:48:00"],"phase":"保温","granularity":"秒级","heat_no":"【待填】"},
"seg_stats":{"setpoint":"【待填】","actual":"【待填】","deviation":"【待填】","direction":"偏低","duration":"【待填】","trend":"前段偏低后回升"},
"compare_segs":[{"heat_no":"【待填:对照炉次一】","deviation":"无","装炉量":"常规"},{"heat_no":"【待填:对照炉次二】","deviation":"无","装炉量":"常规"},{"heat_no":"【待填:对照炉次三】","deviation":"偏低,幅度相近","装炉量":"偏大"}]},
"output":"#判定\n本炉次保温段前段存在低于设定值的偏离,偏离发生在装炉侧测点,炉膛中部测点未见同幅度偏离。\n#依据\n三段对照中,两段装炉量常规的炉次无偏离,一段装炉量偏大的炉次出现幅度相近的偏离;本炉次装炉记录为装炉量偏大、工件间隙偏窄。设定程序为作业指导书固定,参数取值本身无自由度,故偏离不指向温控参数设置。\n#可调量\n可调量限于装炉量与码装间隙两项:按对照炉次一与炉次二的装炉量档位执行,或在保持装炉量的前提下拉开工件间隙。两项的具体取值范围按装炉作业规范,不在本样本中给出数值结论。\n#不确定项\n材料批次与来源厂家的成分波动未排除。本炉次与三段对照的材料批次相同,故本样本未将成分波动列为主因;若对照范围扩至不同批次,须重新判断。",
"task_type":"HTD",
"labels":{"anomaly_class":"装炉条件异常","action":"调整装炉量或码装间隙","evidence_level":1,"synthetic":false},
"evidence_ref":[{"record_no":"【待填:装炉记录编号】"},{"record_no":"【待填:出炉硬度检测记录编号】"}],
"difficulty":"L2",
"seg_ref":{"heat_no":"【待填】"}}
示例 2(任务码 WDA,难度 L3,跨批次归因与差异清单):
{"instruction":"某同型部件在交检中发现气孔,给出本批次与其他批次的焊接参数差异清单,指出偏离的维度、方向与幅度,并给出归因结论。",
"input":{"seg_ref":{"device_code":"【待填】","tag_ids":["电流","电压","送丝速度","焊接速度","摆幅","左停留","右停留"],"window":["2025-03-06T09:21:14","2025-03-06T09:33:02"],"phase":"填充道","granularity":"秒级","weld_seam_id":"【待填】","weld_pass_id":"【待填】"},
"seg_stats":{"setpoint":"【待填:工艺窗口】","actual":"【待填】","deviation":"摆幅接近下限","direction":"偏低","duration":"全道","trend":"平稳","manual_record":{"层间温度":"【待填】","记录方式":"纸质"}},
"compare_segs":[{"batch":"【待填:批次二】","摆幅":"中位","层间温度":"达标"},{"batch":"【待填:批次三】","摆幅":"中位","层间温度":"达标"},{"batch":"【待填:批次四】","摆幅":"接近下限","层间温度":"低于下限"}]},
"output":"#判定\n本批次该焊道存在两处与其他批次的差异:摆幅接近工艺窗口下限;层间温度低于规范下限。气孔与这两项中的层间温度关联更直接。\n#依据\n差异清单:摆幅——本批次接近下限,批次二与批次三为中位,批次四同为接近下限;层间温度——本批次低于下限,批次二与批次三达标,批次四低于下限。四个批次中,两个层间温度不达标的批次均出现气孔,两个达标的批次未出现。层间温度与预热温度是最影响气孔与裂纹的两项参数。\n#可调量\n层间温度的控制属作业执行环节,可调量为道间停歇时长与预热措施;摆幅的调整须由工艺人员判断,本结论不给出具体数值。\n#检查顺序\n先核对层间温度的实际记录与规范下限,再核对道间停歇时长,最后核对摆幅与焊接速度的组合。\n#不确定项\n层间温度为人工抽检纸质记录,抽检频次低于自动采集,记录值可能未覆盖本道的实际最低值;本结论的证据等级按人工记录档处理。自动采集手段到位后本样本须重做。",
"task_type":"WDA",
"labels":{"anomaly_class":"预热与层间温度不足","action":"核对层间温度与道间停歇","evidence_level":2,"synthetic":false},
"evidence_ref":[{"record_no":"【待填:交检记录编号】"},{"file":"【待填:层间温度纸质记录扫描件】","page":1}],
"difficulty":"L3",
"seg_ref":{"weld_seam_id":"【待填】"}}
示例 3(任务码 EQH,难度 L2,耦合干扰段识别与检查顺序):
{"instruction":"给定某在役刮板输送机减速器测点的振动段落与同时段相邻设备的运行状态,判断该段是否为耦合干扰,并给出检查顺序。",
"input":{"seg_ref":{"device_code":"【待填:减速器测点所属设备编码】","tag_ids":["振动加速度","温度","冷却水流量"],"window":["2025-05-18T13:40:00","2025-05-18T13:52:00"],"phase":"重载","granularity":"秒级"},
"seg_stats":{"setpoint":"【待填:报警阈值】","actual":"【待填:段内峰值与均值】","deviation":"振动峰值超阈值","direction":"偏高","duration":"【待填】","trend":"间歇性峰值,与相邻设备动作同步"},
"compare_segs":[{"相邻设备":"采煤机","状态":"同时段在机身上行走"},{"相邻设备":"液压支架","状态":"同时段推移动作"},{"自身":"温度与冷却水流量","状态":"均在正常范围"}]},
"output":"#判定\n该段振动超阈值判定为耦合干扰段,不判定为减速器自身异常。\n#依据\n振动峰值呈间歇性且与采煤机行走、液压支架推移动作在时间上同步;同时段减速器温度与冷却水流量均在正常范围,若为自身异常,温度通常同步上行。刮板输送机被液压支架推移、被采煤机在机身上行走,三类设备运动相互耦合,在役监测信号含有大量来自其他设备的耦合干扰,这是本类判定的业务前提。\n#检查顺序\n第一步核对同时段相邻设备动作记录,确认耦合来源;第二步核对自身温度与冷却水流量是否同步异常;第三步若前两步均支持耦合判定,将该段标记为耦合干扰并从异常统计中剔除,不派检修工单;第四步若温度或流量同步异常,则转为自身异常流程,按振动特征异常的检查顺序执行。\n#不确定项\n矿方传感器损坏后往往不予补装,若相邻设备的动作记录测点缺失,第一步无法完成,该段按疑似处理并标记为第三档证据,不作为标签样本。",
"task_type":"EQH",
"labels":{"anomaly_class":"耦合干扰段","action":"标记并从异常统计中剔除","evidence_level":1,"synthetic":false},
"evidence_ref":[{"record_no":"【待填:报警记录编号】"},{"record_no":"【待填:相邻设备动作记录编号】"}],
"difficulty":"L2",
"seg_ref":{"device_code":"【待填】"}}
三条示例都把「不确定项」写成了样本的固定一段。制造过程类样本若只给判定与依据,模型学到的是在证据不足时也给确定结论;本子集要求参考输出必须交代未排除的因素与证据等级,目的是让模型在证据不足时给出降级结论而不是硬下判断。这一要求写入标注规范,缺 #不确定项 段的样本不予定稿。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-03-0002-V1.0
A03_subset_purpose: 有监督指令微调
A08_sample_count: 150000
B05_topic_distribution: {HTD: 43000, WDA: 41000, EQH: 36000, WOQ: 18000, MSQ: 12000}
B07_granularity_distribution: {秒级: 0.81, 分钟级: 0.19} # 评测按此分层
B08_difficulty_distribution: {L1: 0.42, L2: 0.38, L3: 0.20}
B09_anomaly_classes: 14
B14_synthetic_ratio: 【待填】 # 上限 0.45;不生成时序数值
C05_stats_fields: [setpoint, actual, deviation, direction, duration, trend] # 缺项不予定稿
C12_augment_policy: {时间窗平移: 允许, 同工况段重组: 允许, 幅值缩放: 禁止}
D04_scoring_note: 偏离识别按粒度档位与异常类别双重分层
D09_prohibited_use: [参数自动寻优能力评测]
E01_qc_report_id: GHY26691-QC-03-0002-V1.0
E05_validation_report_id: GHY26691-VR-03-0002-V1.0
G07_package: GHY26691-03-SFT-V1.0.pkg
本卡对应制造过程数据集的人类偏好对齐生产任务(b1565、b1566),规模依 b1593r04。本子集的偏好判据取自工艺人员与检修人员的实际选择:同一异常下实际采取的措施与未采取的候选措施构成一组偏好对。这类样本须在既有流程中增设处置记录的填报入口,由系统预填、经手人确认,属本集需从零补录的部分,补录进度直接决定本子集的样本来源构成。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-03-0003-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 制造过程数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 人类偏好对齐 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 03 制造过程 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「提问+候选回答对+偏好序+偏好理由」,覆盖处置建议优劣、归因结论可信度、检查顺序合理性三类偏好对象。判据来源有二:实际处置记录(实际采取的措施为优选,未采取的候选为劣选)与专家裁定。本子集有一条特有的偏好维度——证据等级匹配:在证据不足时给出确定结论的回答判为劣选,给出降级结论并交代未排除因素的判为优选。这一维度的设置理由是本集的业务前提,报警不少而故障标签很少,报警与真实故障之间缺少可核对的证据 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 1 万组(b1593r04)。含偏好理由方计为有效组 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按组计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一组含 prompt、responses、preference、rationale、pref_object、judge_source、seg_ref、evidence_level 八个字段;.csv(随组引用的时序段) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 字段结构同 GHY26691-DC-01-0003 卡,另增 seg_ref(提问所依据的时序段指针)与 evidence_level(本组的证据档位,1—3 档;第 4 档不入集)两字段。逐字段定义见本卡附表 A10-23 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /03_manufacturing/preference/{action,attribution,check_order}/ 按三类偏好对象分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PREF-<偏好对象码>-<批次号>-<序号>.jsonl,偏好对象码取 PAC(处置建议优劣)/PAT(归因结论可信度)/PCO(检查顺序合理性) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经生产管理部门与安全管理岗两级审批。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-03-0003、《多模态数据标注规范·制造过程册》偏好分册、偏好裁决规则 pref_rule_03.md、样本校验脚本 verify_pref_03.py、段落回溯脚本 seg_trace.py | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含时序段引用 0.78 万组(测算 78%)、纯文本 0.22 万组(测算 22%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 2(时序、文本)。本子集不含图像与视频模态,卡中如实填报 | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 78%(0.78 万组);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 92%(0.92 万组);实测值【待填】。处置记录填报入口为本项目期内增设,样本几乎全部落在近三年(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 处置建议优劣 0.45 万组、归因结论可信度 0.35 万组、检查顺序合理性 0.2 万组(依技术方案 T1C 节第五部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 提问中位数【待填】字;单个候选回答中位数【待填】字;偏好理由中位数【待填】字,下限 40 字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 判据来源为实际处置记录的组测算 62%,为专家裁定的组测算 38%;实测值【待填】。该比例随填报入口的推行进度变化,变化情况逐版本记入 C14。按证据档位:第一档测算 48%、第二档 37%、第三档 15% | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 候选中有一个明显违反作业规范或安全要求、L2 候选均可行而优劣取决于证据充分性与处置成本、L3 候选优劣取决于后续结果(返修率、复发情况)。测算分布 L1 占 28%、L2 占 54%、L3 占 18% | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层偏好对象(3 类);第二层偏好维度标记,取值集为 规范与安全符合性/证据等级匹配/处置成本/可执行性/归因可追溯性/检查顺序效率六值,可多选 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐维度命中组数见附表 A10-24;证据等级匹配 维度在 PAT 类中命中率最高 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 组,全文见本卡附件十一 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、处置记录须从零补录,补录进度取决于填报入口的流程改造推进;若至第三期末覆盖度仍低于测算值,PAC 与 PCO 两类样本的判据来源由实际处置记录为主调整为专家裁定为主,样本量不变,并在 B07 与 C14 中标注来源构成的变化。二、「实际采取的措施」不等于「最优措施」:实际处置可能受当时的停机窗口、备件到位情况约束。处置办法是在偏好理由中记录当时的约束条件,并在 labels 中标记 constrained_choice;标记为约束选择的组在评测中单列、不计入无约束条件下的胜率。三、第三档证据(仅有报警记录而无检修确认)的组测算占 15%,这些组的偏好序可信度低于前两档,评测时按档位分层。四、L3 层样本依赖后续结果的回流(返修率、复发情况),回流周期长,首版样本量偏少。以上四项列入《下一版本修订计划》GHY26691-PL-03-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 50%(b1512)。合成用途限于劣选候选的构造:按规则生成违反作业规范的处置、在证据不足时给确定结论的归因、顺序颠倒的检查步骤。构造规则清单随集发布 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 处置记录(本项目期内增设填报入口采集)、检修记录与派工记录(售后服务与备件管理系统)、报警记录(物联网与设备数据平台、装备远程运维平台)、工艺与检修专家裁定记录。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 处置记录按系统预填、经手人确认后采集,预填内容取自同类异常的历史处置;检修与报警记录按只读接口抽取;专家裁定按《偏好裁定作业指引》组织,记录裁定人角色而不记录姓名 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;在役装备相关组涉及矿方设备运行情况的部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 提问构造(取自指令微调子集的真实异常段)→ 候选收集(实际处置为优选、未采取候选与规则构造劣选)→ 证据档位判定 → 约束条件记录 → 偏好裁定 → 不一致组仲裁 → 偏好理由撰写与要素校验 → 有效组判定 → 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 候选回答数固定 2—3 个;候选长度差异控制在 1.5 倍以内;候选顺序在发布态中随机打乱并记录打乱种子;提问所引用的时序段统计描述字段固定六项,缺项不予定稿 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-03-0004-V1.0 偏好分册 | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 实际处置记录类:自动提取加经手人确认,抽检 20% 由专家复核;专家裁定类:双人独立裁定,不一致进第三人仲裁,仲裁不成立的组不入集(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。偏好序一致度按成对比较的一致比例统计;偏好维度标记按标签集合重叠度统计 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由工艺与检修部门共同定标,覆盖三类偏好对象、三个难度层与三个证据档位 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-03-0004 基准评测子集完成去重与相似度比对;提问层与候选层分别比对;炉次集合与部件集合隔离,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本。后续版本须在本字段记录判据来源构成与证据档位分布的变化 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-04 热处理过程控制智能化(主)、SC-05 焊接过程控制智能化(主)、SC-06 刮板输送装备健康诊断智能化(主)(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 偏好对齐 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 偏好对齐胜率(按偏好对象、判据来源与证据档位三重分层);过度确定率(对齐后模型在证据不足时仍给确定结论的比例,越低越好);规范违反率;检查顺序效率(达到同一结论所需步骤数) | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-03-0003 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 偏好对齐脚本 align_03.sh、偏好序校验脚本 verify_pref_03.py | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 刮板输送装备健康诊断场景:对齐前后模型在证据不足情形下给出降级结论的比例对比,效果数据见 GHY26691-VR-03-0003 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;标记为 constrained_choice 的组不适合用于无约束条件下的最优处置能力评测;第三档证据的组不适合单独用于论证归因可信度的提升 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-03-0002(指令微调子集,提问来源)、GHY26691-DC-03-0004(基准评测子集) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01—E10 质量与评测 | 质检报告 GHY26691-QC-03-0003-V1.0;验证报告 GHY26691-VR-03-0003-V1.0(b1561);六维度质检结果见质检报告摘要表(b1542、b1543);质检结论与未关闭缺陷【待填】;能力增量与场景可用性结论见验证报告第 3、4 章(b1555—b1558);第三方评测状态待评测(b0688);依据标准版本 TC609-5-2025-04、GB/T 36344—2018、GB/T 3375—1994;复测记录【待填】 | 1.3.3(b1942/b1943)· 1.4.3(b1953/b1954)· 1.4.4(b1955/b1956)· 1.3.5(b1946/b1947);主依据 b1568、b1561、b0688 |
| F01—F10 安全与合规 | 数据分类:生产经营数据—生产制造类、设备运维类;分级【待填:按甲方分级标准取值】;涉及商业秘密与重要行业数据,处置与裁定记录含人员信息;去标识化方法同 GHY26691-DC-03-0001 卡 F04,另:经手人与裁定人仅记录角色不记录姓名;去标识化效果按 GB/T 42460—2023 评估,结论编号【待填】;商用可用性已核查,记录编号【待填】;来源合法性见 GHY26691-ST-00-0007 审查记录编号【待填】;访问权限范围同 DC-03-0002 卡 F08;审计记录按 GHY26691-DC-03-0003 检索;不得跨境传输,对外共享须经甲方书面同意、涉矿方部分另经矿方同意 | 1.4.1(b1949/b1950)· 1.3.3(b1942/b1943)· 1.3.1(b1938/b1939)· 1.1.4(b1920/b1921)· 1.1.5(b1922/b1923)· 1.2.5(b1935/b1936);主依据 b1396、b1534 |
| G01—G09 版本与指纹 | 【待填:清单摘要、内容根摘要与签名值由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016);签名算法 SM2(GB/T 32918.1—2016);自描述封装文件 GHY26691-03-PREF-V1.0.pkg;上游版本无(首版);血缘标识【待填】 | 1.3.5(b1946/b1947)· 1.1.6(b1924/b1925)· 1.1.2(b1916/b1917);主依据 b1567、b1568、b1569、b1570 |
附表 A10-23 本子集记录级字段定义(数据字典节选,仅列与 DC-01-0003 卡不同的字段)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
seg_ref | 对象 | 同 DC-03-0001 卡附表 A10-19 | 提问所依据的时序段指针与元数据 | PAC/PAT 类必填;granularity 非空 |
evidence_level | 整数 | 1/2/3 | 本组的证据档位;第 4 档(仅口述无书面记录)不入集 | 非空;取值在 1—3 内 |
labels | 对象 | {pref_dimensions[], constrained_choice, constraint_note?} | 偏好维度与约束选择标记 | constrained_choice=true 时 constraint_note 必填 |
judge_source | 枚举 | 实际处置/专家裁定 | 判据来源,用于评测分层 | 非空、在枚举内 |
附表 A10-23 数据来源:字段设置依本卡 A12;证据档位依 DC-03-0001 卡附件九示例 3 所述四档口径;约束选择标记依 B12 第二项。
附表 A10-24 本子集偏好对象与偏好维度交叉分布(测算,单位万组)
| 偏好对象 | 组数 | 规范与安全符合性 | 证据等级匹配 | 处置成本 | 可执行性 | 归因可追溯性 | 检查顺序效率 |
|---|---|---|---|---|---|---|---|
| PAC 处置建议优劣 | 0.45 | 0.26 | 0.14 | 0.22 | 0.24 | 0.08 | 0.03 |
| PAT 归因结论可信度 | 0.35 | 0.05 | 0.29 | 0.03 | 0.06 | 0.27 | 0.02 |
| PCO 检查顺序合理性 | 0.20 | 0.09 | 0.07 | 0.08 | 0.12 | 0.05 | 0.18 |
| 合计 | 1.00 | 0.40 | 0.50 | 0.33 | 0.42 | 0.40 | 0.23 |
附表 A10-24 数据来源:组数依技术方案 T1C 节第五部分第 3 小节;维度命中数为测算值,维度可多选故各行之和大于该行组数。
附件十一 本子集样本示例全文(2 组)
示例 1(偏好对象 PAT,判据来源「专家裁定」,难度 L2,证据等级匹配维度):
{"prompt":"某减速器测点振动峰值超阈值,同时段温度与冷却水流量正常,相邻设备动作记录测点缺失。请给出归因结论。",
"responses":[
{"text":"判定为减速器轴承早期故障,建议安排停机检修更换轴承。","origin":"规则构造","synthetic":true},
{"text":"证据不足,不下确定结论。本段振动峰值呈间歇性,具备耦合干扰的特征,但相邻设备动作记录测点缺失,无法完成耦合来源的核对;同时段温度与冷却水流量正常,不支持轴承类故障的典型特征。本段按疑似处理、标记为第三档证据,建议补装相邻设备动作记录测点后复判;在补装之前,按加密巡检而非停机检修处置。","origin":"实际处置","synthetic":false}],
"preference":[2,1],
"rationale":"差异所在:候选一在证据不足时给出确定的故障结论并建议停机检修,候选二给出降级结论与补证据的路径。判据:本项目的证据分档口径规定,仅有报警记录而无检修确认的情形按疑似处理;温度与流量正常这一事实不支持轴承类故障的典型特征,确定结论缺少依据。停机检修的代价远高于加密巡检,在证据不足时给出高代价处置是不合适的。不确定项:若后续补装测点后核对出耦合来源,本组的判定仍成立;若核对出自身异常,候选一的方向正确但当时的证据仍不足以支持,偏好序不因事后结果改变。",
"pref_object":"PAT",
"judge_source":"专家裁定",
"seg_ref":{"device_code":"【待填】","tag_ids":["振动加速度","温度","冷却水流量"],"window":["2025-05-18T13:40:00","2025-05-18T13:52:00"],"phase":"重载","granularity":"秒级"},
"evidence_level":3,
"labels":{"pref_dimensions":["证据等级匹配","归因可追溯性","处置成本"],"constrained_choice":false}}
示例 2(偏好对象 PAC,判据来源「实际处置」,难度 L2,含约束选择标记):
{"prompt":"某炉次保温段出现低于设定值的偏离,归因指向装炉量偏大与工件间隙偏窄。本炉次已出炉,后续同类炉次应如何处置?",
"responses":[
{"text":"下一炉次按对照炉次的装炉量档位执行,减少装炉量。","origin":"实际处置","synthetic":false},
{"text":"下一炉次保持装炉量不变,拉开工件间隙至规范上限。","origin":"未采取候选","synthetic":false}],
"preference":[1,2],
"rationale":"差异所在:两候选都落在允许的可调量范围内(装炉量与码装间隙两项),区别在于调哪一项。判据:实际处置选择了减少装炉量。选择原因记录为当时的生产节拍不允许延长单炉装炉作业时间,而拉开间隙需要重新码装、作业时间更长;减少装炉量可在既有码装方式下直接执行。不确定项:从热处理效果本身看,两项调整均有效,甲方此前通过规范装炉量与拉开间隙两项措施都取得过明显改善;本组的偏好来自当时的生产约束而非效果差异。",
"pref_object":"PAC",
"judge_source":"实际处置",
"seg_ref":{"device_code":"【待填】","tag_ids":["实际温度","设定温度"],"window":["2024-08-13T04:12:00","2024-08-13T06:48:00"],"phase":"保温","granularity":"秒级","heat_no":"【待填】"},
"evidence_level":1,
"labels":{"pref_dimensions":["可执行性","处置成本"],"constrained_choice":true,"constraint_note":"当时生产节拍不允许延长单炉装炉作业时间,重新码装的作业时间更长"}}
示例 2 标记了 constrained_choice。偏好样本若把受当时条件约束的选择当成普遍最优,对齐后的模型会在没有约束的情形下也给出同一选择。标记并单列统计是对这一偏差的处置办法,口径写在 B12 第二项。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-03-0003-V1.0
A03_subset_purpose: 人类偏好对齐
A08_sample_count: 10000 # 单位:组
B02_modality_kinds: 2 # 时序与文本,如实填报
B05_topic_distribution: {PAC: 4500, PAT: 3500, PCO: 2000}
B07_judge_source_distribution: {实际处置: 0.62, 专家裁定: 0.38}
B07_evidence_level_distribution: {1: 0.48, 2: 0.37, 3: 0.15}
B08_difficulty_distribution: {L1: 0.28, L2: 0.54, L3: 0.18}
B14_synthetic_ratio: 【待填】 # 上限 0.50,仅用于劣选候选构造
C13_dedup_conclusion_id: 【待填】
D04_scoring_note: 胜率按偏好对象、判据来源与证据档位三重分层;另报过度确定率
E01_qc_report_id: GHY26691-QC-03-0003-V1.0
E05_validation_report_id: GHY26691-VR-03-0003-V1.0
G07_package: GHY26691-03-PREF-V1.0.pkg
本卡对应制造过程数据集的基准评测生产任务(b1565、b1566),规模依 b1593r05。本子集的抽样设计有一条与其他基准子集不同的要求:三类样本一律按「同材料批次、同装炉方式」或「同型部件、同工况段」分组抽样,使评测能够反映横向比对能力而不只是单段判别能力。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-03-0004-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 制造过程数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 基准评测 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 03 制造过程 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,首版冻结日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集为冻结的评测样本集合,按业务场景均分为热处理、焊接、健康诊断三类。样本取自未被用于训练的炉次集合与部件集合,且业务发生时间晚于训练样本截止时间。本子集按组抽样而非按条抽样:一组含一个待判段落与 3—5 个同材料批次同装炉方式(热处理)或同型部件同工况段(焊接、健康诊断)的对照段,判分同时考察待判结论与对照段的选取是否恰当 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 0.2 万条(b1593r05)。一条=一个带唯一正确答案或评分细则的评测样本;按组抽样时,一组计为一条,组内对照段不单独计数 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),字段结构同 GHY26691-DC-01-0004 卡,另增 seg_ref、compare_segs、group_key、granularity 四个字段;.csv(时序段);.json(评测协议冻结记录与分组抽样核验结果) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | group_key 记录分组依据(热处理为材料批次+装炉方式,焊接与健康诊断为部件型号+工况段);gold 为唯一正确答案(偏离识别、耦合干扰判定类)或对象形态(归因类,含 cause 与 evidence_chain 两子字段分别判分);rubric 为评分细则(检查顺序类)。逐字段定义见本卡附表 A10-25 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /03_manufacturing/benchmark/{heat,weld,health}/;根目录放 protocol_frozen.json 与 group_check.json(分组抽样核验结果) | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | BM-<能力码>-<冻结批次>-<序号>.jsonl,能力码取 CHT(热处理)/CWD(焊接)/CEH(健康诊断) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经生产管理部门与评测管理岗两级审批;gold 与 rubric 仅向评测岗开放。受理时限 3 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-03-0003、《评测协议固化记录》GHY26691-ST-00-0019、判分脚本 score_03.py、隔离核验脚本 verify_isolation_03.py、分组抽样核验脚本 verify_group_03.py、统计描述复算脚本 seg_stats_ref.py、评分细则册 rubric_03.md(限评测岗) | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含时序段引用 0.17 万条(测算 85%)、纯文本 0.02 万条(测算 10%)、含图像 0.01 万条(测算 5%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(时序、文本、图像) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 90%(0.18 万条);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 按时间隔离取训练样本截止时间之后的样本,测算趋向 100%;实测值【待填】(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 热处理 0.07 万条、焊接 0.07 万条、健康诊断 0.06 万条(依技术方案 T1C 节第五部分第 3 小节,按业务场景均分) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 输入中位数【待填】字(含对照段统计描述,显著长于其他基准子集);参考答案中位数【待填】字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按采样粒度档位统计:秒级样本测算 88%、分钟级 12%;评测按此分层。按分组统计:热处理分 【待填:材料批次与装炉方式组合数】 组、焊接分【待填:部件型号与工况段组合数】组、健康诊断分【待填】组,每组条数见 group_check.json | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层,口径同指令微调子集。测算分布 L1 占 34%、L2 占 42%、L3 占 24%;分组为主维度,难度层为次维度 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层能力维度(3 类);第二层考点标记,取值集见附表 A10-26 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐考点条数见附表 A10-26 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 条,全文见本卡附件十二。只给基础考点示例,理由同 GHY26691-DC-01-0004 卡 B11 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、本子集规模 0.2 万条,按三类场景与分组交叉后,部分分组的条数较少,单组结论置信区间宽,评测报告须给出区间。二、分钟级粒度样本占测算 12%,这部分样本不支持细粒度偏离判定类考点;处置办法是把细粒度考点限定在秒级样本内,分钟级样本只用于粗粒度判定与横向比对考点,限定关系写入评测协议。三、健康诊断类样本的 gold 依赖故障与数据段的配对,只有第一档证据(有检修实物证据且有对应时段数据)的记录可作为 gold;第一档记录的数量是本类样本量的真实上限,若不足 0.06 万条,本类按实际达成填报并在验证报告中单列成因,不以疑似记录填平数量。四、预热与层间温度相关考点依赖人工纸质记录,这部分 gold 的证据强度低于自动采集项,在样本中标注并在评测报告中单列。五、隔离核验依赖训练侧炉次与部件集合及时间截止点被如实登记;每版发布前重跑核验,不通过不予发布。以上五项列入《下一版本修订计划》GHY26691-PL-03-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】,均晚于训练侧样本截止时间 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 0%(固定值,b1513)。由平台在发布前校验,非零则阻断发布 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 隔离后炉次集合与部件集合的过程时序、同期检修记录与报警记录、同期质量结论(以编号引用)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001,并单列「基准集专用」标记 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 同 GHY26691-DC-03-0001 卡 C02;本子集另有隔离核验与分组抽样核验两道环节,均在样本构造之前执行 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有;在役装备涉及矿方设备运行情况的部分为授权使用,许可凭证编号【待填】 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 隔离核验 → 分组抽样设计与核验 → 采集登记 → 时间基准统一 → 工况分段与降采样 → 段落统计描述生成 → 对照段选取 → 样本构造 → 人工裁定答案(双人独立,不一致进仲裁,仲裁不成立不入集)→ 判分方式与评分细则定稿 → 与训练侧去重与相似度比对 → 冻结发布。本子集未经合成与增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 降采样与切段口径同 DC-03-0001 卡 C05,与指令微调子集一致以保证可比;对照段数固定 3—5 段;统计描述字段固定六项 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-03-0004-V1.0 评测分册(答案裁定部分) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 答案一律双人独立裁定,不一致进第三人仲裁;仲裁不成立的样本不入集;检查顺序类的评分细则由工艺与检修部门共同评审确认(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。基准集一致性门限高于训练侧子集,低于门限的样本不入集 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 不适用(本子集本身即评测基准) | 1.3.4(b1944/b1945) |
| C10—C12 合成、教师模型与增强 | 均不适用(B14=0,无合成与增强,不调用教师模型) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C13 去重与相似度比对结论 | 已与 DC-03-0001、-0002、-0003 三子集完成去重与相似度比对,命中样本从训练侧移除;炉次与部件集合隔离核验结论编号【待填】。每版发布前重跑核验(b1544、b1554) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版冻结,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用;gold 与 rubric 限评测岗;第三方评测机构按委托协议授权 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | 为 SC-04、SC-05、SC-06 三个场景的能力评测供数(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 基准评测 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 偏离识别准确率与误报率(按粒度档位与异常类别分层);耦合干扰判定准确率;归因类按 cause(根因结论)与 evidence_chain(证据链完整性)分别判分;检查顺序类按 rubric_human 人工评分;对照段选取正确率(横向比对能力的直接度量)。总分按三个能力维度等权或按场景权重加权两种口径分别给出 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019;协议随本子集一同冻结;细粒度考点与粒度档位的限定关系写入协议(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-03-0004 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 判分脚本 score_03.py、隔离核验脚本、分组抽样核验脚本、统计描述复算脚本、评测执行示例 run_bench_03.sh | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 首轮全量评测:按本子集与协议对基线模型与训练后模型各执行一轮,输出逐能力维度得分、分组得分与置信区间,见 GHY26691-VR-03-0004 第 4 章(b0688) | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 不得用于训练、不得用于提示词示例、不得用于合成样本的种子;gold 不得进入任何训练侧批次。分钟级粒度样本不适合用于细粒度偏离考点;本子集不评测参数自动寻优能力,理由同 DC-03-0002 卡 D09 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-03-0001、-0002、-0003(三者为隔离对象) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01—E10 质量与评测 | 质检报告 GHY26691-QC-03-0004-V1.0;验证报告 GHY26691-VR-03-0004-V1.0(b1561);六维度质检结果见质检报告摘要表,均衡性维度另加分组样本量核对(b1542、b1543);质检结论与未关闭缺陷【待填】;能力增量与场景可用性结论见验证报告第 3、4 章(b1555—b1558);第三方评测状态待评测,本子集为第三方评测的执行依据之一(b0688、b2076、b2077);依据标准版本 TC609-5-2025-04、GB/T 36344—2018、GB/T 2828.1—2012、GB/T 8170—2008、GB/T 231.1—2018、GB/T 324—2008;复测记录【待填】 | 1.3.3(b1942/b1943)· 1.4.3(b1953/b1954)· 1.4.4(b1955/b1956)· 1.3.5(b1946/b1947);主依据 b1568、b1561、b0688 |
| F01—F10 安全与合规 | 数据分类:生产经营数据—生产制造类、设备运维类;分级【待填,gold 按较高一级处理】;涉及商业秘密与重要行业数据;去标识化方法同 GHY26691-DC-03-0001 卡 F04,另:本子集不披露炉次号与部件号,仅披露分组结构与每组条数;去标识化效果按 GB/T 42460—2023 评估,结论编号【待填】;商用可用性已核查,记录编号【待填】;来源合法性见 GHY26691-ST-00-0007 审查记录编号【待填】;访问权限:评测岗全字段,生产管理与设备检修角色除 gold/rubric 外字段,数据加工岗不得访问 gold;审计记录按 GHY26691-DC-03-0004 检索,gold 字段每次访问单独留痕;不得跨境传输,对外共享须经甲方书面同意、涉矿方部分另经矿方同意 | 1.4.1(b1949/b1950)· 1.3.3(b1942/b1943)· 1.3.1(b1938/b1939)· 1.1.4(b1920/b1921)· 1.1.5(b1922/b1923)· 1.2.5(b1935/b1936);主依据 b1396、b1534 |
| G01—G09 版本与指纹 | 【待填:由平台在冻结时写入】;摘要算法 SM3,签名算法 SM2;冻结后指纹不得变化,变化即视为冻结被破坏;自描述封装文件 GHY26691-03-BM-V1.0.pkg,gold 与 rubric 单独封装为 GHY26691-03-BM-GOLD-V1.0.pkg(SM4 加密);上游版本无(首版冻结);血缘标识【待填】 | 1.3.5(b1946/b1947)· 1.1.6(b1924/b1925)· 1.1.2(b1916/b1917);主依据 b1567、b1568、b1569、b1570 |
附表 A10-25 本子集记录级字段定义(数据字典节选,仅列与 DC-01-0004 卡不同的字段)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
seg_ref | 对象 | 同 DC-03-0001 卡附表 A10-19 | 待判段落的指针与元数据 | CHT/CWD/CEH 类必填 |
compare_segs | 数组 | 长度 3—5,元素为对照段的指针与统计描述 | 同组对照段 | 横向比对类考点必填;元素的 group_key 须与本条一致 |
group_key | 对象 | 热处理 {material_batch, charging_mode};焊接与健康诊断 {part_model, phase} | 分组依据 | 非空;同组样本的 group_key 必须一致 |
granularity | 枚举 | 秒级/分钟级 | 采样粒度档位 | 非空;细粒度考点仅允许秒级 |
gold(归因类) | 对象 | {cause, evidence_chain} | 根因结论与证据链分列,分别判分 | 归因类必为对象形态;两子字段均非空 |
附表 A10-25 数据来源:分组字段依 A07 所述按组抽样要求;粒度限定依 B12 第二项;gold 分列依 D04。
附表 A10-26 本子集能力维度与考点分布
| 能力码 | 能力维度 | 条数 | 考点 | 考点条数(测算) | 判分方式 | 粒度限定 |
|---|---|---|---|---|---|---|
| CHT | 热处理 | 700 | 升温段偏离识别 | 160 | exact | 秒级 |
| CHT | — | — | 保温段超限识别 | 180 | exact | 秒级 |
| CHT | — | — | 冷却速率异常识别 | 100 | exact | 秒级 |
| CHT | — | — | 装炉条件归因(含证据链) | 160 | 对象分列 | 不限 |
| CHT | — | — | 同批次横向比对与对照段选取 | 100 | set_overlap | 不限 |
| CWD | 焊接 | 700 | 电流电压与速度偏离识别 | 180 | exact | 秒级 |
| CWD | — | — | 摆幅与停留时间偏离识别 | 140 | exact | 秒级 |
| CWD | — | — | 预热与层间温度不足判断 | 120 | exact | 不限(人工记录档) |
| CWD | — | — | 偏差归因与参数差异清单(含证据链) | 160 | 对象分列 | 不限 |
| CWD | — | — | 同型部件横向比对与对照段选取 | 100 | set_overlap | 不限 |
| CEH | 健康诊断 | 600 | 振动特征异常判断 | 160 | exact | 秒级 |
| CEH | — | — | 温度、压力与冷却水流量异常判断 | 140 | exact | 不限 |
| CEH | — | — | 耦合干扰段判定 | 140 | exact | 秒级 |
| CEH | — | — | 检查顺序生成 | 100 | rubric_human | 不限 |
| CEH | — | — | 证据不足时的降级结论 | 60 | rubric_human | 不限 |
| 合计 | — | 2000 | 15 个考点 | 2000 | — | — |
附表 A10-26 数据来源:能力维度条数依技术方案 T1C 节第五部分第 3 小节按业务场景均分的口径;考点划分与条数为测算值;粒度限定依 B12 第二项。
附件十二 本子集样本示例全文(2 条)
示例 1(能力码 CHT,考点「保温段超限识别」,判分方式 exact,秒级):
{"item_id":"BM03-CHT-F1-000183",
"capability":"CHT",
"prompt":"给定本炉次保温段的统计描述,判断是否存在超出设定程序的偏离,给出偏离方向与所在工况段。",
"input":{"seg_ref":{"device_code":"【待填】","tag_ids":["实际温度","设定温度"],"window":["【待填】","【待填】"],"phase":"保温","granularity":"秒级","heat_no":"【不披露】"},
"seg_stats":{"setpoint":"【待填】","actual":"【待填】","deviation":"【待填】","direction":"【待填】","duration":"【待填】","trend":"【待填】"}},
"gold":{"是否偏离":"是","偏离方向":"偏低","所在工况段":"保温段前段","是否指向温控参数":"否(设定程序固定,参数取值无自由度)"},
"rubric":null,
"scoring":"exact",
"group_key":{"material_batch":"【不披露】","charging_mode":"常规"},
"granularity":"秒级",
"source_isolation":{"heat_set_id":"ISO-03-A","time_cutoff":"【待填】"},
"biz_key":{"heat_no":"【不披露,见 B07】"}}
示例 2(能力码 CEH,考点「耦合干扰段判定」,判分方式 exact,秒级):
{"item_id":"BM03-CEH-F1-000247",
"capability":"CEH",
"prompt":"给定某测点的振动段落、同时段自身温度与冷却水流量、以及相邻设备动作记录,判断该段是否为耦合干扰段。",
"input":{"seg_ref":{"device_code":"【待填】","tag_ids":["振动加速度","温度","冷却水流量"],"window":["【待填】","【待填】"],"phase":"重载","granularity":"秒级"},
"seg_stats":{"setpoint":"【待填:报警阈值】","actual":"【待填】","deviation":"振动峰值超阈值","direction":"偏高","duration":"【待填】","trend":"间歇性峰值,与相邻设备动作同步"},
"compare_segs":[{"相邻设备":"采煤机","状态":"同时段在机身上行走"},{"相邻设备":"液压支架","状态":"同时段推移动作"},{"自身":"温度与冷却水流量","状态":"正常范围"}]},
"gold":{"是否耦合干扰":"是","判定依据":"峰值间歇且与相邻设备动作同步,自身温度与流量无同步异常","处置":"标记并从异常统计中剔除,不派检修工单"},
"rubric":null,
"scoring":"exact",
"group_key":{"part_model":"【不披露】","phase":"重载"},
"granularity":"秒级",
"source_isolation":{"part_set_id":"ISO-03-C","time_cutoff":"【待填】"},
"biz_key":{"device_code":"【不披露】"}}
两条示例的 input 都保留了对照信息,这是本子集与其他基准子集在结构上的差别。单段判别类考点可以不给对照段,但横向比对类考点必须给——评测的目的之一是看模型能否在同组内选对对照段,若输入中不含候选对照段,这一能力无法度量。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-03-0004-V1.0
A03_subset_purpose: 基准评测
A08_sample_count: 2000
B05_topic_distribution: {CHT: 700, CWD: 700, CEH: 600}
B07_granularity_distribution: {秒级: 0.88, 分钟级: 0.12}
B08_difficulty_distribution: {L1: 0.34, L2: 0.42, L3: 0.24} # 次维度,分组为主维度
B14_synthetic_ratio: 0.00 # 固定值,非零阻断发布(b1513)
C13_isolation_conclusion_id: 【待填】 # 炉次与部件集合隔离,每版重跑
D04_scoring_note: 归因类 gold 分 cause 与 evidence_chain 分别判分;另报对照段选取正确率
D05_protocol_note: 细粒度考点限秒级样本,限定关系写入协议
D09_prohibited_use: [训练, 提示词示例, 合成种子, 参数自动寻优能力评测]
E01_qc_report_id: GHY26691-QC-03-0004-V1.0
E05_validation_report_id: GHY26691-VR-03-0004-V1.0
G07_package: GHY26691-03-BM-V1.0.pkg
G07_gold_package: GHY26691-03-BM-GOLD-V1.0.pkg # SM4 加密,限评测岗
本部分出产品质量数据集(业务域 04)的四张子集卡。四子集规模依招标文件表格 3-4 原值:预训练 164 亿 Token、指令微调 24 万条、强化学习偏好 1.6 万组、基准评测 0.25 万条(b1598r02—r05)。
本数据集的全部标注类样本共用一套缺陷标签体系,其取值集的来源与升版规则先在此给出,四张卡的 B09 字段统一引用。标签体系的第二层直接引用甲方现行判据——十一类缺陷与其检出手段的对应关系,不另立一套。判据换版时标注规范随之升版,旧版样本保留其当时所依据的判据版本号,不做追溯重标。这样处理的代价是同一缺陷在不同版本样本中可能有不同标签,收益是每条样本的标签都能对应到一份当时有效的判据,评测时可按判据版本分层。两者相比,可追溯比表面一致更重要。
表 A10-5 缺陷标签体系的层级、取值来源与升版规则
| 层级 | 内容 | 取值来源 | 取值集规模 | 升版规则 |
|---|---|---|---|---|
| 第一层 | 任务类型 | 本集五类任务 | 5 | 任务类型增减时升主版本号 |
| 第二层 | 缺陷或问题大类 | 焊接缺陷按甲方现行判据的十一类缺陷与检出手段对应关系;外观缺陷按企业外观缺陷目录;材料问题按化验项 | 焊接 11 类+外观【待填:按企业目录填报】类+材料【待填】类 | 判据换版即随之升版;旧版样本保留原判据版本号 |
| 第三层 | 具体缺陷项与严重度等级 | 焊接缺陷严重度按 GB/T 19418—2003 的分级指南与企业判据对照;超声检测等级按 GB/T 11345—2023 | 【待填:逐大类的缺陷项数与等级档数】 | 同第二层 |
| 第四层(仅位置类) | 缺陷位置口径 | 统一到焊缝与焊道坐标(weld_seam_id + weld_pass_id + 沿缝位置);外观缺陷统一到零件坐标系 | 不适用(连续取值) | 坐标口径变更时升主版本号 |
表 A10-5 数据来源:第二层取值来源依甲方现行缺陷判据与招标文件对缺陷自动分类与根因追溯的要求(b1596);分级与检测等级依附录佐证卷 A2 节第 3.2 小节第五类标准清单;升版规则依技术方案 T1C 节第六部分第 3 小节关于判据版本绑定的论述。缺陷名录、缺陷分级判据与三类检测的位置口径对照表须由质量管理部门提供,本表以【待填】占位。
本卡对应产品质量数据集的预训练生产任务(b1565、b1566),回应 b1595、b1596 所列全流程质量数据范围与映射关系要求,规模依 b1598r02。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-04-0001-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品质量数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 预训练 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 04 产品质量 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集向通用大模型注入质量判定与追溯侧的领域知识,语料来自检验项目与检验记录(含交检拍照)、焊接缺陷图像的结构化描述与标注文本、无损检测报告、原材料化验与来料批次记录、不合格品票与返修处置记录、质量追溯链与质量报告六类来源。本子集有一处特有的加工要点:工艺编制时标注的关键工序与重要尺寸会推送到质量管理系统形成检查项,这一对应关系随样本保留,使语料中「为什么检这一项」有据可查。纸质检测报告数量可观但尚未数字化,这部分是无损检测结论的主要载体,版面还原后字段抽取结果须能回原文定位 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 【待填:平台统计值,篇章级样本条数】。按平均 3,000 Token 一条测算约 547 万条,仅用于说明切分粒度,不计入占比指标分母 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 164.0 亿 Token(b1598r02) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB。缺陷图像与纸质报告扫描件占存储主体,与 Token 量不成比例,说明同 DC-02-0000 卡末段 | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8)、.parquet、.md(版面还原后的报告文本)、.png/.jpg(缺陷图像、交检拍照、纸质报告扫描件)、.json(缺陷位置坐标与标注多边形)、.csv(检验项目清单与缺陷名录附表)、.mp4(装配与交检现场的工序记录视频,规模最小) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 每条记录含 doc_id、source_type、biz_time、text、layout_ref、biz_key、defect_ref?、evidence_ref、term_refs、quality_flags 共 10 个字段。biz_key 为对象,含施工号、产品号、零件号、焊缝与焊道标识、炉次号、材料批次号、检验记录号七项中的若干项。逐字段定义见本卡附表 A10-27 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /04_quality/pretrain/{inspect,weld_defect,ndt,material,nonconform,traceability}/{year}/ 六类来源各一目录,目录内按业务年份分层 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PT-<来源码>-<业务年月>-<批次号>-<序号>.jsonl,来源码取 IN(检验记录)/WDF(焊接缺陷)/NDT(无损检测)/MTL(原材料化验)/NCR(不合格品处置)/TRC(追溯链) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经质量管理部门与安全管理岗两级审批。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-04-0003、《缺陷名录与分级判据对照表》defect_dict_v1.csv、《检验项目清单》inspect_items_v1.csv、语料读取脚本 read_pretrain_04.py、标注多边形校验脚本 verify_polygon.py、术语词典 term_dict_04.json | 1.1.6(b1924/b1925) |
| B01 模态构成 | 文本【待填】条(测算占比 46%)、图像【待填】条(测算 38%)、表格【待填】条(测算 12%)、时序【待填】条(测算 3%,检测设备输出曲线)、视频【待填】条(测算 1%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 5(文本、图像、表格、时序、视频) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 【待填:平台统计值】。本子集按 Token 计量,占比指标在以条计量的三子集与四集汇总层面核算(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 【待填:平台统计值】。质量管理系统新上线,结构化检验记录主要产生于近期;更早期间以纸质报告为主,数字化批次按项目重要性分批推进(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 六主题:检验项目与记录、焊接缺陷描述与标注、无损检测结论、原材料化验与批次、不合格品处置、质量追溯链。逐主题 Token 量见本卡附表 A10-28 | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 中位数【待填】Token,90 分位【待填】Token。纸质报告版面还原后的文本长度分布与结构化检验记录差异较大,按来源码分别统计 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 检验项目与检验记录(含交检拍照)46 亿 Token(28.0%)、焊接缺陷图像的结构化描述与标注文本 38 亿(23.2%)、无损检测报告(超声、磁粉)29 亿(17.7%)、原材料化验与来料批次记录 21 亿(12.8%)、不合格品票与返修处置流程记录 18 亿(11.0%)、质量追溯链与质量报告 12 亿(7.3%)。合计 164 亿 Token(依技术方案 T1C 节表 11) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 不适用(预训练语料不设难度分层) | 1.2.2(b1929/b1930) |
| B09 标签体系 | 不适用(无标注连续语料)。保留来源码、主题码、缺陷码引用、判据版本号四类元数据标记;缺陷码取值集见表 A10-5 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 不适用 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 3 条,全文见本卡附件十三 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、纸质检测报告的实际存量尚待盘点,数字化工作量与三档交付顺序以盘点结果为准;首版 NDT 类语料以已数字化批次为主,实际 Token 量可能低于测算值 29 亿,缺口由 IN 与 WDF 两类补足。二、缺陷描述在源系统中为文字、未与工艺参数关联;本子集的处置办法是在语料中保留缺陷与被判定对象(工件、焊缝与焊道、炉次、材料批次)的绑定,并以 evidence_ref 指向制造过程数据集的参数段,但绑定的完整度取决于源记录的填写质量,断链处显式标注 trace_broken 而不做补全。三、质量追溯链按施工号与产品号组织,上游工序记录缺失的链条在语料中保留断链标注;断链比例【待填:现场盘点后填报】。四、判据版本绑定:语料中的缺陷描述对应其当时有效的判据版本,判据换版后旧语料不做追溯重标,quality_flags 中标记 criteria_ver_legacy。五、视频语料取自为工艺过程另行布点的采集,产线已有摄像头是安防用途、角度与清晰度达不到观察焊接部位的要求,布点进度决定该类语料的实际规模。以上五项列入《下一版本修订计划》GHY26691-PL-04-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 30%(b1512)。合成用途限于两处:结构化检验记录转为自然语言陈述句式(格式转换);低频缺陷类型的描述性语料补充,种子取自专家定标样本。不合成缺陷图像,理由是合成图像会引入不存在的形貌特征 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 质量管理系统(检验项目与记录、交检拍照、质量报告、不合格品与返修票据)、产线图像采集(焊接缺陷图像)、纸质归档(超声与磁粉检测报告、化验报告)、企业资源计划系统(来料批次与材料主数据)、协同办公系统(不合格品票与改造方案流转)、检测设备数据接口(自动硬度计、无损检测设备输出)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 质量管理系统按只读增量接口按日抽取;纸质检测与化验报告扫描后经多模态文档解析导入,抽取结果须回原文定位;缺陷图像按产线采集点取图并与焊缝焊道标识关联;检测时序由检测设备数据接口采集;工艺编制时标注的关键工序与重要尺寸随检验记录一并入集并保留与工艺卡的对应关系 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有(全部来源) | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 采集登记 → 纸质件版面还原与字段抽取(抽取结果回原文定位)→ 对象主键贯通(施工号、产品号、焊缝焊道、炉次、材料批次)→ 缺陷名录与分级判据统一、位置口径统一到焊缝与焊道坐标 → 与过程参数段配对(以指针引用)→ 术语归一 → 语义切分与滑窗拼接 → 去重 → 质检门控 → 定版。本子集未经标注与增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 纸质件解析:版面分区后按表格、正文、签章三类分别抽取;缺陷图像按标注多边形裁切局部视图,保留原图指针;文本切分目标长度 512 Token,滑窗重叠 64 Token;去重按段落级最小哈希相似度阈值 0.85 | 1.3.3(b1942/b1943) |
| C06—C09 标注类字段 | 均不适用(无标注连续语料)。卡中如实填「不适用」而非留空 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515)。采用当期能力评测领先的通用大模型,经统一网关接入,可替换、可评测、可随代升级 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-04-0004 基准评测子集完成去重与相似度比对;部件集合与检验记录集合隔离+业务发生时间切分,同一工件的缺陷图像不得分落训练与基准两侧,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-05 焊接过程控制智能化、SC-04 热处理过程控制智能化、SC-06 刮板输送装备健康诊断智能化(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 继续预训练 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 质量领域知识探针准确率(探针覆盖六个业务主题与缺陷大类,按判据版本分层)、保留语料困惑度变化率、术语一致性命中率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-04-0001 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 继续预训练脚本 cpt_04.sh、标注多边形校验脚本 verify_polygon.py、缺陷码映射工具 defect_map.py | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 焊接过程控制场景的检测结论解读子任务:输入超声检测报告的版面还原文本,输出结构化结论字段,效果数据见 GHY26691-VR-04-0001 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集为无标注连续语料,不适合直接用于有监督指令微调或作为评测集使用;缺陷描述绑定其当时有效的判据版本,不适合用于跨判据版本的一致性评测 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-04-0002、-0003、-0004;GHY26691-DC-03-0001(制造过程预训练子集,参数段的引用对象) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01—E10 质量与评测 | 质检报告 GHY26691-QC-04-0001-V1.0;验证报告 GHY26691-VR-04-0001-V1.0(b1561);六维度质检结果见质检报告摘要表(b1542、b1543);质检结论与未关闭缺陷【待填】;能力增量与场景可用性结论见验证报告第 3、4 章(b1555—b1558);第三方评测状态待评测(b0688);依据标准版本 TC609-5-2025-04、GB/T 36344—2018、GB/T 19418—2003、GB/T 11345—2023、GB/T 3323.1—2019、GB/T 231.1—2018、GB/T 228.1—2021、GB/T 324—2008;复测记录【待填】 | 1.3.3(b1942/b1943)· 1.4.3(b1953/b1954)· 1.4.4(b1955/b1956)· 1.3.5(b1946/b1947);主依据 b1568、b1561、b0688 |
| F01—F10 安全与合规 | 数据分类:生产经营数据—质量管理类;分级【待填:按甲方分级标准取值,不合格品与失效分析类按较高一级处理】;涉及商业秘密,检验记录与报告含人员信息;去标识化方法:检验人员、复核人与签章人姓名按替换法处理,签章图像按遮蔽法处理但保留签章位置框(位置框是版面解析的判定依据),客户名称按泛化法处理,依据 GB/T 37964—2019;去标识化效果按 GB/T 42460—2023 评估,结论编号【待填】;商用可用性已核查,记录编号【待填】;来源合法性见 GHY26691-ST-00-0007 审查记录编号【待填】;访问权限范围:质量管理角色、工艺业务角色、检验岗、数据加工岗、评测岗;审计记录按 GHY26691-DC-04-0001 检索;不得跨境传输,对外共享须经甲方书面同意 | 1.4.1(b1949/b1950)· 1.3.3(b1942/b1943)· 1.3.1(b1938/b1939)· 1.1.4(b1920/b1921)· 1.1.5(b1922/b1923)· 1.2.5(b1935/b1936);主依据 b1396、b1534 |
| G01—G09 版本与指纹 | 【待填:清单摘要、内容根摘要与签名值由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016);签名算法 SM2(GB/T 32918.1—2016);自描述封装文件 GHY26691-04-PT-V1.0.pkg;上游版本无(首版);血缘标识【待填】 | 1.3.5(b1946/b1947)· 1.1.6(b1924/b1925)· 1.1.2(b1916/b1917);主依据 b1567、b1568、b1569、b1570 |
附表 A10-27 本子集记录级字段定义(数据字典)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
doc_id | 字符串 | PT04-<来源码>-<业务年月>-<批次号>-<序号> | 语料条唯一标识 | 非空、全集唯一 |
source_type | 枚举 | IN/WDF/NDT/MTL/NCR/TRC | 来源码 | 非空、在枚举内 |
biz_time | 日期 | YYYY-MM-DD 或 YYYY-MM | 业务发生时间,取检验或检测实施日期而非记录录入日期 | 非空;不得晚于发布日 |
text | 文本 | UTF-8,长度 ≤ 4096 Token | 发布态语料正文 | 非空;禁止出现未脱敏的人员姓名 |
layout_ref | 对象 | {file, page, bbox, region} | 版面定位;region 取值 表格/正文/签章 | NDT/MTL 类扫描件必填;bbox 在页面范围内 |
biz_key | 对象 | {construct_no?, product_no?, part_no?, weld_seam_id?, weld_pass_id?, heat_no?, material_batch_no?, inspect_record_no?} 至少一项非空 | 本条语料所述质量事实绑定的业务对象主键 | 至少一项非空;主键须在《对象主键映射表》GHY26691-LG-00-0004 中存在 |
defect_ref | 对象 | {defect_code, severity, criteria_ver, position} | 缺陷码、严重度、判据版本号与位置口径 | WDF/NDT/NCR 类必填;defect_code 须在《缺陷名录与分级判据对照表》中存在;criteria_ver 非空 |
evidence_ref | 数组 | {doc_id}/{seg_ref}/{record_no} 列表 | 证据指针,可指向本集原文定位或制造过程数据集的参数段 | TRC 类必填;指向制造过程集的 seg_ref 须在该集中存在 |
term_refs | 数组 | 术语词典条目 id 列表 | 命中的归一术语(焊接术语来源 GB/T 3375、焊缝符号来源 GB/T 324) | 每个 id 须在 term_dict_04.json 中存在 |
quality_flags | 数组 | trace_broken/criteria_ver_legacy/paper_scan/ocr_low_conf/position_coarse/param_seg_absent | 已知质量标记 | 取值在枚举内;ocr_low_conf 必须同时有 layout_ref |
附表 A10-27 数据来源:字段设置依本卡 A12;缺陷码与判据版本依表 A10-5;evidence_ref 的跨集指向依本附录第 1.4 小节关于引用不重复计量的口径;质量标记枚举依 B12 所列五项局限性。
附表 A10-28 本子集来源与主题的 Token 分布(测算)
| 来源码 | 主题 | 亿 Token | 占比 | 承载系统或资料 | 加工要点 |
|---|---|---|---|---|---|
| IN | 检验项目与记录(含交检拍照) | 46 | 28.0% | 质量管理 | 检验项与工艺编制时标注的关键工序、重要尺寸对应关系随样本保留 |
| WDF | 焊接缺陷描述与标注 | 38 | 23.2% | 质量管理、产线图像采集 | 缺陷名录与分级统一后标注;位置口径统一到焊缝与焊道坐标 |
| NDT | 无损检测结论(超声、磁粉) | 29 | 17.7% | 质量管理、纸质归档 | 纸质报告版面还原后字段抽取;抽取结果须回原文定位 |
| MTL | 原材料化验与来料批次 | 21 | 12.8% | 质量管理、企业资源计划 | 材料批次与炉次、工件的关联以引用方式保留 |
| NCR | 不合格品处置与返修 | 18 | 11.0% | 协同办公、质量管理 | 处置结论与返修后复检结果成对 |
| TRC | 质量追溯链与质量报告 | 12 | 7.3% | 质量管理 | 按施工号、产品号组织追溯链,断链处显式标注 |
| 合计 | — | 164 | 100% | — | — |
附表 A10-28 数据来源:Token 构成依技术方案 T1C 节表 11;构成比例为测算值。
附件十三 本子集样本示例全文(3 条)
示例 1(来源码 IN,检验记录与关键工序对应关系):
{"doc_id":"PT04-IN-202504-B029-013880",
"source_type":"IN",
"biz_time":"2025-04-21",
"text":"本工件为中部槽槽帮类零件,交检项目共若干项,其中标注为关键工序与重要尺寸的检验项来自工艺编制环节的推送:工艺人员在编制工艺卡时标注关键工序与重要尺寸,这些标注推送到质量管理系统形成检查项。本次交检的尺寸类检验项全部合格;外观类检验项中一项记录为「焊缝局部咬边,长度与深度见记录」,该项按不合格品流程转处置。交检拍照附件两张,分别为整体与咬边局部。该工件所经焊接工序的参数段以指针引用制造过程数据集的对应段落,不在本语料中复制参数数值。",
"layout_ref":null,
"biz_key":{"construct_no":"【待填】","product_no":"【待填】","part_no":"【待填】","weld_seam_id":"【待填】","inspect_record_no":"【待填】"},
"defect_ref":{"defect_code":"【待填:咬边缺陷码】","severity":"【待填:按判据分级】","criteria_ver":"【待填:现行判据版本号】","position":{"weld_seam_id":"【待填】","weld_pass_id":"【待填】","along_seam_mm":"【待填】"}},
"evidence_ref":[{"seg_ref":{"weld_seam_id":"【待填】","weld_pass_id":"【待填】","window":["【待填】","【待填】"]}},{"record_no":"【待填:不合格品票编号】"}],
"term_refs":["T-3011-咬边","T-3044-关键工序","T-3077-重要尺寸","T-3102-交检"],
"quality_flags":[]}
示例 2(来源码 NDT,纸质超声检测报告版面还原,含低置信标记):
{"doc_id":"PT04-NDT-201908-B004-006217",
"source_type":"NDT",
"biz_time":"2019-08",
"text":"超声检测报告(纸质扫描件版面还原):检测对象为某部件的对接焊缝,检测方法为手工接触法脉冲反射,检测比例与检测等级按报告表头所列,验收标准依 GB/T 11345 的相应等级。检测结论:发现若干处反射信号,按标准评定为相应等级的缺陷,位置以沿缝距离与深度表示。报告表头的检测人员与审核人员姓名已按替换法处理,签章位置框保留。表格区的三处数值字段因扫描件清晰度不足,抽取置信度低,已标记并保留原文定位供人工复核。",
"layout_ref":{"file":"NDT-201908-B004-0033.png","page":1,"bbox":[64,120,1600,1020],"region":"表格"},
"biz_key":{"construct_no":"【待填】","product_no":"【待填】","weld_seam_id":"【待填】","inspect_record_no":"【待填】"},
"defect_ref":{"defect_code":"【待填:按超声检测结论对应的缺陷码】","severity":"【待填:按 GB/T 11345 等级】","criteria_ver":"【待填】","position":{"weld_seam_id":"【待填】","along_seam_mm":"【待填】","depth_mm":"【待填】"}},
"evidence_ref":[{"doc_id":"PT04-NDT-201908-B004-006217"}],
"term_refs":["T-3201-超声检测","T-3233-脉冲反射","T-3255-检测等级"],
"quality_flags":["paper_scan","ocr_low_conf"]}
示例 3(来源码 TRC,质量追溯链语料,含断链标注):
{"doc_id":"PT04-TRC-202502-B011-002094",
"source_type":"TRC",
"biz_time":"2025-02",
"text":"本追溯链按施工号与产品号组织,链条为:施工号 → 产品号 → 零件号 → 所经工序(备料、组焊、热处理、机加工)→ 各工序的过程记录 → 检验记录 → 质量结论。本链条中,备料与组焊两个工序的过程记录齐备,热处理工序的炉次号可定位且曲线段可引用,机加工工序的过程记录在源系统中缺失,链条在该处断开,已显式标注断链位置而不做补全。断链的影响是:若质量结论指向机加工环节,本链条无法提供过程证据,相应的根因追溯样本不纳入指令微调子集。材料批次与炉次的关联以引用方式保留,不在本语料中复制化验数值。",
"layout_ref":null,
"biz_key":{"construct_no":"【待填】","product_no":"【待填】","part_no":"【待填】","heat_no":"【待填】","material_batch_no":"【待填】"},
"defect_ref":null,
"evidence_ref":[{"seg_ref":{"heat_no":"【待填】","phase":"保温","window":["【待填】","【待填】"]}},{"record_no":"【待填:化验记录编号】"}],
"term_refs":["T-3301-追溯链","T-3333-炉次","T-3355-材料批次"],
"quality_flags":["trace_broken","param_seg_absent"]}
三条示例覆盖本子集三类语料形态:结构化检验记录(有缺陷码与跨集参数段引用)、纸质扫描件版面还原(有版面定位与低置信标记)、追溯链(有断链标注)。示例 3 把断链显式写进语料正文,是本集的一条处置原则:追溯链的价值在于能被核对,补全的链条看起来完整但无法核对,反而会让下游把不存在的证据当成存在。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-04-0001-V1.0
A03_subset_purpose: 预训练
A09_token_total_yi: 164.0
B01_modality:
- {type: 文本, count: 【待填】, ratio: 0.46}
- {type: 图像, count: 【待填】, ratio: 0.38}
- {type: 表格, count: 【待填】, ratio: 0.12}
- {type: 时序, count: 【待填】, ratio: 0.03}
- {type: 视频, count: 【待填】, ratio: 0.01}
B02_modality_kinds: 5
B07_source_distribution:
- {code: IN, token_yi: 46}
- {code: WDF, token_yi: 38}
- {code: NDT, token_yi: 29}
- {code: MTL, token_yi: 21}
- {code: NCR, token_yi: 18}
- {code: TRC, token_yi: 12}
B09_label_system: null # 无标注;保留来源、主题、缺陷码引用、判据版本四类元数据标记
B09_defect_dict_ref: defect_dict_v1.csv # 缺陷名录与分级判据,见表 A10-5
B12_quality_flags_enum: [trace_broken, criteria_ver_legacy, paper_scan, ocr_low_conf, position_coarse, param_seg_absent]
B14_synthetic_ratio: 【待填】 # 上限 0.30;不合成缺陷图像
C13_dedup_conclusion_id: 【待填】 # 部件与检验记录集合隔离
E01_qc_report_id: GHY26691-QC-04-0001-V1.0
E05_validation_report_id: GHY26691-VR-04-0001-V1.0
G07_package: GHY26691-04-PT-V1.0.pkg
本卡的八十四项字段表已在附录佐证卷 A2 节第 4.7 小节「样例二」中列示,为避免重复,本节不重列字段表,只出该处未展开的三样内容:记录级数据字典、任务与标签分布全表、以及样本示例的实际全文。字段取值与 A2 节样例二保持一致;两处如有差异,以 A2 节的字段规范为准、以本节的分布与示例为补充。字段与说明文档指标的对应关系同上,沿用第 1.5 小节的对齐规则与第 7.5 小节表 A10-8 的反向矩阵;本卡为标注类子集,C06—C09 四项按 1.3.4(b1944/b1945)必填判定,缺项阻断发布。
本卡对应产品质量数据集的有监督指令微调生产任务(b1565、b1566),回应 b1596 对缺陷自动分类与根因追溯的支撑要求,规模依 b1598r03。A2 节样例二按五类任务组织(外观缺陷判别、焊缝检测结果解读、热处理质量分析、质量问题归因与整改建议);技术方案 T1C 节第六部分第 3 小节给出的五类任务为焊接缺陷分类与定级、检验项目与判定规则问答、质量根因追溯链推理、无损检测报告生成与复核、不合格品处置与返修决策。两处为同一组样本的两种归类视角,本节按技术方案的任务码组织分布表,并在附表 A10-29 中给出两种归类的对照,便于与 A2 节样例二逐项对齐。
附表 A10-29 本子集任务码与 A2 节样例二任务归类的对照
| 本节任务码 | 任务(技术方案口径) | 条数(万条) | A2 节样例二对应任务 | 目录码 |
|---|---|---|---|---|
| WDC | 焊接缺陷分类与定级 | 7.5 | 外观缺陷判别、焊缝检测结果解读(缺陷判级部分) | weld |
| INR | 检验项目与判定规则问答 | 5.6 | 外观缺陷判别(判定规则部分) | appearance |
| TRC | 质量根因追溯链推理 | 4.8 | 质量问题归因 | attribution |
| NDR | 无损检测报告生成与复核 | 3.4 | 焊缝检测结果解读(报告部分) | weld |
| NCD | 不合格品处置与返修决策 | 2.7 | 整改建议 | improve |
| — | (热处理质量分析) | 见 TRC 与 INR 内 | 热处理质量分析 | heat_treat |
| 合计 | — | 24 | — | — |
附表 A10-29 数据来源:任务条数依技术方案 T1C 节第六部分第 3 小节;A2 节任务归类依该节第 4.7 小节样例二的 A07 与 A13 字段;热处理质量分析类样本按判定规则与根因两类分别归入 INR 与 TRC,不单列任务码。
附表 A10-30 本子集记录级字段定义(数据字典)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
instruction | 文本 | 长度 ≤ 256 Token | 任务指令,取自经评审的指令模板库 | 非空;须命中模板 id |
input | 对象 | 含 text?、defect_image?、ndt_result?、trace_chain?、param_seg_ref? | 任务输入 | 非空;WDC 类必含 defect_image 或 ndt_result;TRC 类必含 trace_chain |
output | 文本 | 长度 ≤ 4096 Token | 参考输出。TRC 类须含 #追溯链、#根因、#依据、#不确定项 四段 | 非空;按任务类型校验段标记完整性 |
task_type | 枚举 | WDC/INR/TRC/NDR/NCD | 任务码 | 非空、在枚举内 |
labels | 对象 | {defect_code?, severity?, criteria_ver?, difficulty_layer, synthetic, seed_id?} | 缺陷码、严重度、判据版本与难度层 | WDC/NDR 类 defect_code 与 criteria_ver 必填;synthetic:true 时 seed_id 必填 |
evidence_ref | 数组 | {record_no}/{file, page, bbox}/{seg_ref} 列表 | 支撑该回答的原始检测记录、报告定位或制造过程集的参数段 | 全部任务类型必填;TRC 类须至少含一个 seg_ref |
difficulty | 枚举 | L1 单因素判别/L2 多因素归因/L3 跨工序追溯 | 难度层 | 非空、在枚举内 |
biz_key | 对象 | 同 DC-04-0001 卡附表 A10-27 | 业务对象主键 | 至少一项非空 |
附表 A10-30 数据来源:字段设置依 A2 节样例二的 A11、A12 字段(instruction/input/output/task_type/labels/evidence_ref 六字段)与本节增补的 difficulty、biz_key 两字段;难度分层依同处 B08;缺陷码与判据版本依表 A10-5。
附表 A10-31 本子集子任务分解与难度分布(测算)
| 任务码 | 子任务 | 条数(万条) | L1 单因素判别 | L2 多因素归因 | L3 跨工序追溯 |
|---|---|---|---|---|---|
| WDC | 外观缺陷分类 | 2.6 | 1.95 | 0.52 | 0.13 |
| WDC | 焊缝缺陷分类(按检出手段分组) | 2.4 | 1.68 | 0.60 | 0.12 |
| WDC | 严重度定级与判据引用 | 2.5 | 1.50 | 0.85 | 0.15 |
| INR | 检验项目适用性问答 | 2.2 | 1.76 | 0.40 | 0.04 |
| INR | 判定规则与关键工序对应关系问答 | 1.9 | 1.33 | 0.51 | 0.06 |
| INR | 热处理硬度判定规则问答 | 1.5 | 1.05 | 0.40 | 0.05 |
| TRC | 追溯链构建与断链识别 | 1.8 | 0.18 | 0.72 | 0.90 |
| TRC | 根因判断与证据链组织 | 1.9 | 0.19 | 0.76 | 0.95 |
| TRC | 热处理质量偏差归因 | 1.1 | 0.11 | 0.55 | 0.44 |
| NDR | 检测报告字段生成 | 1.9 | 1.33 | 0.49 | 0.08 |
| NDR | 报告复核与差异指出 | 1.5 | 0.90 | 0.50 | 0.10 |
| NCD | 处置方案选择 | 1.5 | 0.60 | 0.75 | 0.15 |
| NCD | 返修后复检要求生成 | 1.2 | 0.60 | 0.48 | 0.12 |
| 合计 | — | 24 | 13.18 | 7.53 | 3.29 |
附表 A10-31 数据来源:任务条数依附表 A10-29;子任务分解、条数与难度分布为测算值。难度分布合计占比:L1 约 55%、L2 约 31%、L3 约 14%,与 A2 节样例二 B08 字段的三层分级口径一致。
附件十四 本子集样本示例全文(3 条)
示例 1(任务码 WDC,难度 L1,缺陷分类与定级,对应 A2 节样例二示例 1):
{"instruction":"给定焊缝超声检测结果,判别缺陷等级并给出判据依据。",
"input":{"ndt_result":{"检测方法":"手工接触法脉冲反射","检测等级":"【待填:按报告表头】","反射信号":"【待填:位置与当量】","验收标准":"GB/T 11345 相应等级"}},
"output":"缺陷判别:按反射信号的位置、当量与延伸长度,判定为相应类型的焊缝内部缺陷。\n等级判定:按 GB/T 11345 的评定规则与甲方现行判据的对照表,本缺陷定为【待填:等级】。\n判据依据:评定依据为检测等级与验收标准的组合;甲方判据中该缺陷类型的检出手段为超声检测,与本次检测方法一致,判定成立。\n处置指向:按等级对应的处置要求转不合格品流程或接受。\n判据版本:本判定依据的判据版本号随样本记录;判据换版后本样本不做追溯重标。",
"task_type":"WDC",
"labels":{"defect_code":"【待填】","severity":"【待填】","criteria_ver":"【待填:现行判据版本号】","difficulty_layer":"L1","synthetic":false},
"evidence_ref":[{"file":"NDT-201908-B004-0033.png","page":1,"bbox":[64,120,1600,1020]}],
"difficulty":"L1",
"biz_key":{"weld_seam_id":"【待填】","inspect_record_no":"【待填】"}}
示例 2(任务码 TRC,难度 L3,根因追溯链推理,含断链处置):
{"instruction":"给定本工件的质量结论与追溯链,组织证据链并给出根因判断;链条断开处如实说明。",
"input":{"text":"质量结论:热处理后硬度检测低于工艺要求下限。","trace_chain":{"construct_no":"【待填】","product_no":"【待填】","part_no":"【待填】","工序":["备料","组焊","热处理","机加工"],"热处理":{"heat_no":"【待填】","曲线段可引用":true},"机加工":{"过程记录":"缺失"},"material_batch_no":"【待填】"},"param_seg_ref":{"heat_no":"【待填】","phase":"保温","window":["【待填】","【待填】"]}},
"output":"#追溯链\n施工号 → 产品号 → 零件号 → 备料(记录齐备)→ 组焊(记录齐备)→ 热处理(炉次号可定位,保温段曲线可引用)→ 机加工(过程记录缺失,链条在此断开)→ 硬度检测记录 → 质量结论。\n#根因\n硬度不足的成因指向热处理执行条件,而非工艺参数选择:设定程序为作业指导书固定,参数取值无自由度。引用的保温段曲线显示装炉侧测点在保温段前段低于设定值;本炉次装炉记录为装炉量偏大、工件间隙偏窄。同材料批次、同装炉方式的对照炉次中,装炉量常规者硬度合格。据此判断根因为装炉条件(装炉量与码装间隙),材料批次成分波动在本链条内未见异常化验结论、暂不列为主因。\n#依据\n证据链为:硬度检测记录(结论)→ 保温段曲线段指针(过程)→ 装炉记录(条件)→ 同批次对照炉次(比对)→ 来料化验记录(排除)。各环节以编号或指针引用,参数数值不在本样本中复制。\n#不确定项\n机加工工序过程记录缺失,链条在该处断开;若硬度检测在机加工之后实施,机加工环节的影响无法排除。本样本的根因判断限定在热处理环节,该限定在样本中显式标明。",
"task_type":"TRC",
"labels":{"criteria_ver":"【待填】","difficulty_layer":"L3","synthetic":false},
"evidence_ref":[{"record_no":"【待填:硬度检测记录编号】"},{"seg_ref":{"heat_no":"【待填】","phase":"保温","window":["【待填】","【待填】"]}},{"record_no":"【待填:装炉记录编号】"},{"record_no":"【待填:来料化验记录编号】"}],
"difficulty":"L3",
"biz_key":{"construct_no":"【待填】","product_no":"【待填】","part_no":"【待填】","heat_no":"【待填】","material_batch_no":"【待填】"}}
示例 3(任务码 NCD,难度 L2,处置方案选择与返修后复检要求):
{"instruction":"给定不合格品的缺陷信息与所处工序,选择处置方案并给出返修后的复检要求。",
"input":{"text":"缺陷:焊缝局部咬边,长度与深度见检验记录;工件已完成组焊,未进入热处理工序。","defect_image":"WDF-202504-B029-0117.png"},
"output":"处置方案:按甲方不合格品处置流程,本缺陷类型与等级对应的可选处置为返修(打磨后补焊)或让步接收。本样本选择返修,理由是工件尚未进入热处理工序,返修的工序代价与质量风险均低于让步接收后在役服务阶段的风险。\n返修要求:打磨去除咬边至母材,打磨范围与过渡要求按焊接工艺规程;补焊的焊接材料与参数窗口按原焊接工艺卡,层间温度与预热要求按规程执行并留痕。\n返修后复检要求:外观检验全覆盖返修区;无损检测按原检测等级对返修区及其两侧延伸区域实施;复检结论与原检验记录成对保留,使处置结论与返修后复检结果可对照。\n不确定项:让步接收方案的适用性取决于该部位在整机中的受力情况,本样本未取得该部位的受力评定结论,故未将让步接收列为优选;若受力评定支持,让步接收亦属合规处置。",
"task_type":"NCD",
"labels":{"defect_code":"【待填:咬边缺陷码】","severity":"【待填】","criteria_ver":"【待填】","difficulty_layer":"L2","synthetic":false},
"evidence_ref":[{"record_no":"【待填:不合格品票编号】"},{"file":"WDF-202504-B029-0117.png","page":1,"bbox":[0,0,1920,1080]}],
"difficulty":"L2",
"biz_key":{"construct_no":"【待填】","part_no":"【待填】","weld_seam_id":"【待填】","inspect_record_no":"【待填】"}}
示例 2 是本子集中与制造过程数据集联动最紧的样本形态。它的 evidence_ref 含一个指向制造过程集的 seg_ref,参数段本身不在本子集中计量,引用不产生新的计量;同时它把断链处与判断的限定范围写进 #不确定项 段,而不是回避。这两点合起来构成本集根因追溯样本的基本要求。
本子集机器可读卡片片段(字段取值与 A2 节样例二一致,此处只列与分布、字典相关的键):
dataset_card_id: GHY26691-DC-04-0002-V1.0
A03_subset_purpose: 有监督指令微调
A08_sample_count: 240000
B05_topic_distribution: {WDC: 75000, INR: 56000, TRC: 48000, NDR: 34000, NCD: 27000}
B08_difficulty_distribution: {L1: 0.55, L2: 0.31, L3: 0.14} # 测算
B09_defect_dict_ref: defect_dict_v1.csv # 见表 A10-5,判据版本绑定
B14_synthetic_ratio: 【待填】 # 上限 0.45;集中于低频缺陷类型
C07_annotation_org: {pre_label: 1.0, human_review: 1.0, cross_label: 0.15, expert_arbitration: 不一致样本全量}
C12_augment_policy: {亮度对比度有限调整: 允许, 旋转镜像: 允许, 形变: 禁止}
D04_scoring_note: 缺陷分类按类别分层;根因类按结论一致率与证据链完整率分别统计
E01_qc_report_id: GHY26691-QC-04-0002-V1.0
E05_validation_report_id: GHY26691-VR-04-0002-V1.0
G07_package: GHY26691-04-SFT-V1.0.pkg
本卡对应产品质量数据集的人类偏好对齐生产任务(b1565、b1566),规模依 b1598r04。本子集的判级一致性类偏好有一个其他子集不具备的来源优势:多名检验人员对同一缺陷图像的判定差异及最终裁定结果,这类数据在质量管理系统推行过程中会自然产生,我方按月归集,不需要另行组织标注活动。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-04-0003-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品质量数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 人类偏好对齐 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 04 产品质量 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集样本形态为「提问+候选回答对+偏好序+偏好理由」,覆盖缺陷判级一致性、根因解释充分性、报告表述规范性三类偏好对象。判级一致性类的判据来自多名检验人员对同一缺陷图像的判定差异及最终裁定结果;根因解释充分性类的判据来自质量工程师对归因结论的裁定;报告表述规范性类的判据来自报告审核的修改痕迹。本子集的一条特有偏好维度是判据引用正确性:给出判级结论而未引用判据版本与条款的回答判为劣选,理由是判据换版后无法判断该结论是否仍然成立 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 1.6 万组(b1598r04)。含偏好理由方计为有效组 | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按组计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),每行一组含 prompt、responses、preference、rationale、pref_object、judge_source、defect_ref、arbitration_ref 八个字段;.png(随组引用的缺陷图像) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | 字段结构同 GHY26691-DC-01-0003 卡,另增 defect_ref(缺陷码、严重度与判据版本,口径见表 A10-5)与 arbitration_ref(裁定记录编号与参与判定的人数,姓名不入集)两字段。逐字段定义见本卡附表 A10-32 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /04_quality/preference/{grade_consist,cause_suffic,report_norm}/ 按三类偏好对象分目录 | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | PREF-<偏好对象码>-<批次号>-<序号>.jsonl,偏好对象码取 PGC(缺陷判级一致性)/PCS(根因解释充分性)/PRN(报告表述规范性) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经质量管理部门与安全管理岗两级审批。受理时限 2 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-04-0003、《多模态数据标注规范·产品质量册》偏好分册、《缺陷名录与分级判据对照表》defect_dict_v1.csv、偏好裁决规则 pref_rule_04.md、样本校验脚本 verify_pref_04.py | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含缺陷图像 1.09 万组(测算 68%)、纯文本 0.51 万组(测算 32%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 2(图像、文本) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 68%(1.09 万组);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 测算 88%(1.41 万组);实测值【待填】。判定差异与裁定记录随质量管理系统推行产生,集中在近三年(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 缺陷判级一致性 0.7 万组、根因解释充分性 0.5 万组、报告表述规范性 0.4 万组(依技术方案 T1C 节第六部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 提问中位数【待填】字;单个候选回答中位数【待填】字;偏好理由中位数【待填】字,下限 40 字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 判据来源为检验人员判定差异与裁定的组测算 44%、为质量工程师裁定的组 33%、为报告审核修改痕迹的组 23%;实测值【待填】。按缺陷大类的分布见附表 A10-33 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层:L1 候选中有一个明显违反判据或遗漏必填字段、L2 候选均合规而优劣取决于判据引用与证据组织、L3 候选优劣取决于判级在边界档位上的取舍。测算分布 L1 占 32%、L2 占 50%、L3 占 18% | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层偏好对象(3 类);第二层偏好维度标记,取值集为 判据引用正确性/判级与判据一致性/证据链完整性/位置口径准确性/表述规范性/不确定项交代六值,可多选 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐维度命中组数见附表 A10-33;判据引用正确性 维度在 PGC 类中命中率最高 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 组,全文见本卡附件十五 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、判级一致性类的偏好序以最终裁定结果为准,而裁定本身可能受裁定人经验影响;处置办法是在 arbitration_ref 中记录参与判定的人数,参与人数少于三人的组在评测中单列。二、低频缺陷类型的判定差异样本少,这类缺陷的判级边界反而最需要对齐;首版按实际达成填报,不以合成劣选填平数量。三、边界档位(L3 层)的判级取舍在不同判据版本下可能结论不同;样本在 defect_ref.criteria_ver 中记录判据版本,评测按版本分层。四、报告表述规范性类(PRN)与质量结论的正确性无关,评测时单列、不与前两类合并计算胜率。以上四项列入《下一版本修订计划》GHY26691-PL-04-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 【待填:平台统计值】%,上限 50%(b1512)。合成用途限于劣选候选的构造:按规则生成未引用判据的判级结论、遗漏证据环节的归因、缺必填字段的报告表述。构造规则清单随集发布 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 检验人员判定记录与裁定记录(质量管理系统)、质量工程师裁定记录(本项目期内组织)、检测报告审核的版本比对结果(质量管理系统、协同办公系统)、缺陷图像(产线图像采集)。逐源登记于《数据源登记台账》GHY26691-LG-00-0001 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 判定差异与裁定记录按月从质量管理系统归集;报告审核修改痕迹按文档版本比对提取;质量工程师裁定按《偏好裁定作业指引》组织,记录裁定人角色与人数而不记录姓名 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 提问构造(取自真实缺陷图像或检测结论)→ 候选收集(不同检验人员的判定为候选,最终裁定为优选;规则构造劣选)→ 缺陷码与判据版本绑定 → 偏好裁定 → 不一致组仲裁 → 偏好理由撰写与要素校验 → 有效组判定 → 去重与与基准集比对 → 质检门控 → 定版 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 候选回答数固定 2—4 个;候选长度差异控制在 1.5 倍以内;候选顺序在发布态中随机打乱并记录打乱种子;缺陷图像按标注多边形裁切局部视图,保留原图指针 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-04-0004-V1.0 偏好分册 | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 判级一致性类:以质量管理系统中的真实判定差异为候选,最终裁定为偏好序,不另行组织标注;根因与报告类:双人独立裁定,不一致进第三人仲裁,仲裁不成立的组不入集(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。偏好序一致度按成对比较的一致比例统计;本子集另报一项「原始判定一致率」,即裁定前多名检验人员判定的一致比例,该指标本身是对齐工作的基线 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 【待填:实测值】%。黄金集由质量管理部门定标,按缺陷类别全覆盖 | 1.3.4(b1944/b1945) |
| C10 合成方法记录 | 【待填:种子来源、合成方法、提示词版本与模型版本标识】(b1514) | 1.3.3(b1942/b1943) |
| C11 教师模型许可登记 | 登记条目编号【待填】(b1515) | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C12 增强方法记录 | 不适用(本子集未做数据增强) | 1.3.3(b1942/b1943) |
| C13 去重与相似度比对结论 | 已与 GHY26691-DC-04-0004 基准评测子集完成去重与相似度比对;提问层与候选层分别比对;部件集合与检验记录集合隔离,同一工件的缺陷图像不得分落训练与基准两侧,结论编号【待填】(b1544) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用,不得对外再分发 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | SC-05 焊接过程控制智能化(主)、SC-04 热处理过程控制智能化(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 偏好对齐 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 偏好对齐胜率(按偏好对象、缺陷大类与判据版本三重分层);判据引用率(对齐后模型给出判级结论时引用判据版本与条款的比例,越高越好);判级与裁定结果一致率;证据链完整率 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-04-0003 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 偏好对齐脚本 align_04.sh、偏好序校验脚本 verify_pref_04.py、缺陷码映射工具 defect_map.py | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 焊接过程控制场景的缺陷判级子任务:对齐前后模型判级结论与检验岗位最终裁定的一致率对比,以及判据引用率的变化,效果数据见 GHY26691-VR-04-0003 第 4 章 | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 本子集不作为评测集使用;PRN 类与质量结论正确性无关,不适合用于质量判定能力的对齐评测;参与判定人数少于三人的组不适合单独用于论证判级一致性的提升;本子集不作为缺陷检出能力的对齐依据——本期图像采集承担的是标定后的视觉测量与形貌留痕,缺陷判定仍由无损检测与检验岗位负责 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-04-0002(指令微调子集,提问来源)、GHY26691-DC-04-0004(基准评测子集) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01—E10 质量与评测 | 质检报告 GHY26691-QC-04-0003-V1.0;验证报告 GHY26691-VR-04-0003-V1.0(b1561);六维度质检结果见质检报告摘要表(b1542、b1543);质检结论与未关闭缺陷【待填】;能力增量与场景可用性结论见验证报告第 3、4 章(b1555—b1558);第三方评测状态待评测(b0688);依据标准版本 TC609-5-2025-04、GB/T 36344—2018、GB/T 19418—2003、GB/T 11345—2023;复测记录【待填】 | 1.3.3(b1942/b1943)· 1.4.3(b1953/b1954)· 1.4.4(b1955/b1956)· 1.3.5(b1946/b1947);主依据 b1568、b1561、b0688 |
| F01—F10 安全与合规 | 数据分类:生产经营数据—质量管理类;分级【待填:按甲方分级标准取值】;涉及商业秘密,判定与裁定记录含人员信息;去标识化方法:检验人员与裁定人仅记录角色与人数不记录姓名,缺陷图像中如出现人员身影按遮蔽法处理,客户名称按泛化法处理,依据 GB/T 37964—2019;去标识化效果按 GB/T 42460—2023 评估,结论编号【待填】;商用可用性已核查,记录编号【待填】;来源合法性见 GHY26691-ST-00-0007 审查记录编号【待填】;访问权限范围:质量管理角色、检验岗、工艺业务角色、数据加工岗、评测岗;审计记录按 GHY26691-DC-04-0003 检索;不得跨境传输,对外共享须经甲方书面同意 | 1.4.1(b1949/b1950)· 1.3.3(b1942/b1943)· 1.3.1(b1938/b1939)· 1.1.4(b1920/b1921)· 1.1.5(b1922/b1923)· 1.2.5(b1935/b1936);主依据 b1396、b1534 |
| G01—G09 版本与指纹 | 【待填:由平台在定版时写入】;摘要算法 SM3(GB/T 32905—2016);签名算法 SM2(GB/T 32918.1—2016);自描述封装文件 GHY26691-04-PREF-V1.0.pkg;上游版本无(首版);血缘标识【待填】 | 1.3.5(b1946/b1947)· 1.1.6(b1924/b1925)· 1.1.2(b1916/b1917);主依据 b1567、b1568、b1569、b1570 |
附表 A10-32 本子集记录级字段定义(数据字典节选,仅列与 DC-01-0003 卡不同的字段)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
defect_ref | 对象 | {defect_code, severity, criteria_ver, position} | 缺陷码、严重度、判据版本号与位置口径(统一到焊缝焊道坐标或零件坐标系) | PGC 类必填;defect_code 须在《缺陷名录与分级判据对照表》中存在;criteria_ver 非空 |
arbitration_ref | 对象 | {record_no, judge_count, role_list[]} | 裁定记录编号、参与判定人数与角色清单(不含姓名) | judge_source=检验人员判定差异 时必填;judge_count<3 的组在评测中单列 |
judge_source | 枚举 | 检验人员判定差异/质量工程师裁定/报告审核修改痕迹 | 判据来源,用于评测分层 | 非空、在枚举内 |
responses | 数组 | 长度 2—4,元素含 text、origin、synthetic;origin 取值 检验人员判定/最终裁定/修改前/修改后/模型生成/规则构造 | 候选回答 | 长度在 2—4 内;origin=最终裁定 的候选不得被判为劣选 |
附表 A10-32 数据来源:字段设置依本卡 A12;缺陷码与判据版本依表 A10-5;参与人数门槛依 B12 第一项。
附表 A10-33 本子集偏好对象、缺陷大类与偏好维度分布(测算,单位万组)
| 偏好对象 | 组数 | 主要缺陷大类 | 判据引用正确性 | 判级与判据一致性 | 证据链完整性 | 位置口径准确性 | 表述规范性 | 不确定项交代 |
|---|---|---|---|---|---|---|---|---|
| PGC 缺陷判级一致性 | 0.70 | 焊接缺陷(11 类)、外观缺陷 | 0.52 | 0.58 | 0.14 | 0.31 | 0.06 | 0.19 |
| PCS 根因解释充分性 | 0.50 | 跨大类 | 0.21 | 0.17 | 0.44 | 0.09 | 0.08 | 0.36 |
| PRN 报告表述规范性 | 0.40 | 跨大类 | 0.13 | 0.08 | 0.11 | 0.15 | 0.34 | 0.12 |
| 合计 | 1.60 | — | 0.86 | 0.83 | 0.69 | 0.55 | 0.48 | 0.67 |
附表 A10-33 数据来源:组数依技术方案 T1C 节第六部分第 3 小节;缺陷大类依表 A10-5 第二层;维度命中数为测算值,维度可多选故各行之和大于该行组数。
附件十五 本子集样本示例全文(2 组)
示例 1(偏好对象 PGC,判据来源「检验人员判定差异」,难度 L3,边界档位取舍):
{"prompt":"给定该焊缝缺陷图像与超声检测反射信号记录,判别缺陷类型与严重度等级。",
"responses":[
{"text":"判定为气孔,等级按判据取较低一档。","origin":"检验人员判定","synthetic":false},
{"text":"判定为气孔。按甲方现行判据与 GB/T 11345 的对照,本缺陷的当量与延伸长度落在两个等级的边界处;按判据中边界情形从严的规定,取较高一档。判据版本号与所依据条款随结论记录。位置按焊缝焊道坐标给出:焊缝标识、焊道序号与沿缝距离。","origin":"最终裁定","synthetic":false},
{"text":"判定为气孔,建议返修。","origin":"规则构造","synthetic":true}],
"preference":[2,1,3],
"rationale":"差异所在:三个候选的缺陷类型判断一致,区别在等级取舍与判据引用。判据:本缺陷的当量与延伸长度落在两个等级的边界处,现行判据对边界情形有从严规定;候选二引用了判据版本与具体条款、给出了统一口径的位置、并说明了从严的依据,候选一取较低一档且未引用判据,候选三既未判级也未引用判据而直接给处置建议。不确定项:边界档位的取舍在不同判据版本下可能结论不同,本组的判据版本号已随结论记录,判据换版后须复核本组。",
"pref_object":"PGC",
"judge_source":"检验人员判定差异",
"defect_ref":{"defect_code":"【待填:气孔缺陷码】","severity":"【待填:较高一档】","criteria_ver":"【待填:现行判据版本号】","position":{"weld_seam_id":"【待填】","weld_pass_id":"【待填】","along_seam_mm":"【待填】"}},
"arbitration_ref":{"record_no":"【待填:裁定记录编号】","judge_count":3,"role_list":["检验员","检验员","质量工程师"]}}
示例 2(偏好对象 PCS,判据来源「质量工程师裁定」,难度 L2,证据链完整性):
{"prompt":"某工件热处理后硬度低于工艺要求下限,请给出根因解释。",
"responses":[
{"text":"热处理工艺参数设置不当导致硬度不足,建议调整淬火温度与保温时间。","origin":"规则构造","synthetic":true},
{"text":"硬度不足的成因不指向参数设置:淬火与回火温度、保温时间、淬火次数与冷却时间均按作业指导书设定为固定程序,参数取值无自由度。证据链为:硬度检测记录(结论)→ 本炉次保温段曲线段指针(过程,显示装炉侧测点在前段低于设定值)→ 装炉记录(条件,装炉量偏大、工件间隙偏窄)→ 同材料批次同装炉方式的对照炉次(比对,装炉量常规者硬度合格)→ 来料化验记录(排除成分波动)。据此判断根因为装炉条件。未排除因素:机加工工序过程记录缺失,若硬度检测在机加工之后实施,该环节影响无法排除。","origin":"最终裁定","synthetic":false}],
"preference":[2,1],
"rationale":"差异所在:候选一把成因归到参数设置并给出调参建议,候选二指出参数无自由度、组织了五环节证据链、并交代了未排除因素。判据:热处理工艺参数本身没有自由度,参数取值既已固定,废品成因通常落在曲线能否按要求执行与来料状态是否与工艺假设一致这两类条件上;候选一的归因方向与这一业务事实不符,其调参建议也超出了允许的可调量范围(可调量限于装炉量与码装间隙)。候选二的证据链每一环都可按编号或指针核对。不确定项:机加工环节的影响未排除,候选二已如实写明;若后续补齐该工序记录,本组结论须复核。",
"pref_object":"PCS",
"judge_source":"质量工程师裁定",
"defect_ref":null,
"arbitration_ref":{"record_no":"【待填:裁定记录编号】","judge_count":2,"role_list":["质量工程师","热处理工艺员"]}}
示例 1 用的是质量管理系统中真实产生的判定差异,裁定结果直接构成偏好序。这类样本的价值不止在对齐:裁定前多名检验人员判定的一致比例本身就是对齐工作的基线,该比例在卡的 C08 字段中单列为「原始判定一致率」,使对齐后的改善幅度有可比的起点。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-04-0003-V1.0
A03_subset_purpose: 人类偏好对齐
A08_sample_count: 16000 # 单位:组
B02_modality_kinds: 2 # 图像与文本,如实填报
B05_topic_distribution: {PGC: 7000, PCS: 5000, PRN: 4000}
B07_judge_source_distribution: {检验人员判定差异: 0.44, 质量工程师裁定: 0.33, 报告审核修改痕迹: 0.23}
B08_difficulty_distribution: {L1: 0.32, L2: 0.50, L3: 0.18}
B14_synthetic_ratio: 【待填】 # 上限 0.50,仅用于劣选候选构造
C07_annotation_org: {PGC: 取系统真实判定差异与裁定, PCS_PRN: 双人独立+仲裁}
C08_extra_metric: 原始判定一致率 # 对齐工作的基线
D04_scoring_note: 胜率按偏好对象、缺陷大类与判据版本三重分层;另报判据引用率
E01_qc_report_id: GHY26691-QC-04-0003-V1.0
E05_validation_report_id: GHY26691-VR-04-0003-V1.0
G07_package: GHY26691-04-PREF-V1.0.pkg
本卡对应产品质量数据集的基准评测生产任务(b1565、b1566),规模依 b1598r05。本子集的抽样设计有一条特有要求:缺陷分类类基准样本按缺陷类别分层,每类不低于 60 条;对天然稀少但后果严重的缺陷类别,基准样本不足时以人工构造样本补充,构造样本单列标记并在评测报告中与真实样本分别统计,不混合计算准确率。
这一处置与基准子集不得使用合成数据的规定(b1513)并不矛盾,但必须把界限说清楚:构造样本不是由模型生成的合成样本,而是由质量管理部门按真实缺陷形貌在实物或既有图像上人工制备并经专家定标的样本,其标签来源与真实样本同为检验岗位判定。B14 字段仍填 0,构造样本的数量与占比在另一字段 B14b 中单列。
| 字段 | 填写内容 | 对应说明文档指标 |
|---|---|---|
| A01 数据卡编号 | GHY26691-DC-04-0004-V1.0 | 1.3.5(b1946/b1947) |
| A02 数据集名称 | 产品质量数据集 | 1.1 组级(b1913)——见第 1.5 小节说明 |
| A03 用途子集 | 基准评测 | 1.4.2(b1951/b1952) |
| A04 所属业务域 | 04 产品质量 | 1.4.2(b1951/b1952) |
| A05 版本号 | V1.0 | 1.3.5(b1946/b1947) |
| A06 发布日期 | 【待填:实际发布日,首版冻结日】 | 1.3.5(b1946/b1947) |
| A07 数据集简介 | 本子集为冻结的评测样本集合,覆盖缺陷分类、检验判定、根因追溯、报告生成四个能力维度。样本取自未被用于训练的部件集合与检验记录集合,且业务发生时间晚于训练样本截止时间。缺陷分类类按缺陷类别分层、每类不低于 60 条;稀少缺陷类别以人工制备并经专家定标的构造样本补充,单列标记、分别统计 | 1.4.2(b1951/b1952);1.1 组级(b1913) |
| A08 样本总数 | 0.25 万条(b1598r05) | 1.1.1(b1914/b1915) |
| A09 Token 总数 | 不适用(本子集按条计量) | 1.1.1(b1914/b1915) |
| A10 存储总量 | 【待填:平台统计值】GB | 1.1.1(b1914/b1915) |
| A11 文件类型与编码 | .jsonl(UTF-8),字段结构同 GHY26691-DC-01-0004 卡,另增 defect_ref、sample_origin、criteria_ver 三个字段;.png(缺陷图像与报告扫描件切片);.json(评测协议冻结记录与分层抽样核验结果) | 1.1.2(b1916/b1917) |
| A12 数据结构说明 | sample_origin 取值 真实/人工制备,用于分别统计;gold 为唯一正确答案(缺陷分类、检验判定类)或对象形态(根因追溯类,含 cause 与 evidence_chain 两子字段分别判分);rubric 为评分细则(报告生成类)。逐字段定义见本卡附表 A10-34 | 1.1.2(b1916/b1917);1.1.6(b1924/b1925) |
| A13 目录组织方式 | /04_quality/benchmark/{classify,judge,trace,report}/;根目录放 protocol_frozen.json 与 stratify_check.json | 1.1.3(b1918/b1919) |
| A14 文件命名规则 | BM-<能力码>-<冻结批次>-<序号>.jsonl,能力码取 CCL(缺陷分类)/CJG(检验判定)/CTR(根因追溯)/CRP(报告生成) | 1.1.3(b1918/b1919) |
| A15 获取方式 | 平台申请,经质量管理部门与评测管理岗两级审批;gold 与 rubric 仅向评测岗开放。受理时限 3 个工作日 | 1.1.4(b1920/b1921) |
| A16 技术支持渠道 | 平台内工单入口,受理时间与响应时限同本项目统一口径 | 1.1.5(b1922/b1923) |
| A17 配套件清单 | 《数据字典》GHY26691-LG-04-0003、《评测协议固化记录》GHY26691-ST-00-0019、《缺陷名录与分级判据对照表》defect_dict_v1.csv、判分脚本 score_04.py、隔离核验脚本 verify_isolation_04.py、分层抽样核验脚本 verify_stratify_04.py、标注多边形校验脚本 verify_polygon.py、评分细则册 rubric_04.md(限评测岗) | 1.1.6(b1924/b1925) |
| B01 模态构成 | 含缺陷图像或报告扫描件 0.1875 万条(测算 75%)、纯文本 0.05 万条(测算 20%)、含时序 0.0125 万条(测算 5%) | 1.2.1(b1927/b1928) |
| B02 模态种类数 | 3(图像、文本、时序) | 1.2.1(b1927/b1928) |
| B03 多模态条数占比 | 测算 80%(0.2 万条);实测值【待填】(b1601r03) | 1.2.1(b1927/b1928);1.2.2(b1929/b1930) |
| B04 近三年数据条数占比 | 按时间隔离取训练样本截止时间之后的样本,测算趋向 100%;实测值【待填】(b1601r04) | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B05 业务主题分布 | 缺陷分类 0.1 万条、检验判定 0.07 万条、根因追溯 0.05 万条、报告生成 0.03 万条(依技术方案 T1C 节第六部分第 3 小节) | 1.2.2(b1929/b1930) |
| B06 样本长度分布 | 输入中位数【待填】字;参考答案中位数【待填】字 | 1.2.2(b1929/b1930) |
| B07 来源分布 | 按缺陷类别分层统计,逐类条数见附表 A10-35;按样本来源统计:真实样本测算 92%、人工制备样本 8%。本子集不披露具体部件号与检验记录号,仅披露分层结构与每层条数 | 1.2.2(b1929/b1930);1.3.1(b1938/b1939) |
| B08 难度分布 | 三层,口径同指令微调子集(L1 单因素判别/L2 多因素归因/L3 跨工序追溯)。测算分布 L1 占 44%、L2 占 34%、L3 占 22%;缺陷类别为主分层维度,难度层为次维度 | 1.2.2(b1929/b1930) |
| B09 标签体系 | 两层:第一层能力维度(4 类);第二层考点标记,取值集见附表 A10-35。缺陷码与判据版本依表 A10-5 | 1.2.3(b1931/b1932);1.3.4(b1944/b1945) |
| B10 标签分布 | 逐考点与逐缺陷类别条数见附表 A10-35 | 1.2.3(b1931/b1932);1.2.2(b1929/b1930) |
| B11 样本示例 | 2 条,全文见本卡附件十六。只给基础考点示例,理由同 GHY26691-DC-01-0004 卡 B11 | 1.2.4(b1933/b1934) |
| B12 已知局限性 | 一、低频缺陷类型的真实样本不足 60 条的,以人工制备样本补足;人工制备样本的形貌与真实缺陷存在差异,故单列标记、分别统计,不混合计算准确率。若某一类别连真实加制备仍不足 60 条,该类别按实际条数填报并在评测报告中标注其结论不具代表性。二、根因追溯类样本依赖追溯链完整,上游工序记录缺失的案例不纳入本子集;这一筛选使本类样本的难度分布偏向链条完整的情形,评测结论对断链情形不适用。三、判据版本绑定:缺陷分类与检验判定类的 gold 对应其当时有效的判据版本,判据换版后相应样本须重新裁定,新版另立冻结批次、不覆盖旧批次。四、报告生成类采用 rubric_human 判分,评分者差异的处置同 DC-02-0004 卡 B12 第三项(双人独立评分,差异超一档进第三人,取中位数)。五、隔离核验依赖训练侧部件与检验记录集合及时间截止点被如实登记;每版发布前重跑核验,不通过不予发布。以上五项列入《下一版本修订计划》GHY26691-PL-04-0007 | 1.2.5(b1935/b1936) |
| B13 时间跨度 | 【待填:最早业务日期】至【待填:最晚业务日期】,均晚于训练侧样本截止时间 | 1.3.1(b1938/b1939) |
| B14 合成样本占比 | 0%(固定值,b1513)。由平台在发布前校验,非零则阻断发布。另列 B14b 人工制备样本占比:测算 8%,实测值【待填】;人工制备样本非合成样本,其标签来源与真实样本同为检验岗位判定,定义见本节开头 | 1.2.2(b1929/b1930);1.3.3(b1942/b1943) |
| C01 数据来源清单 | 隔离后部件集合与检验记录集合的检验记录、缺陷图像、无损检测报告、追溯链、同期质量结论;质量管理部门人工制备并经专家定标的稀少缺陷样本。逐源登记于《数据源登记台账》GHY26691-LG-00-0001,并单列「基准集专用」标记 | 1.3.1(b1938/b1939) |
| C02 采集方法 | 同 GHY26691-DC-04-0001 卡 C02;本子集另有隔离核验与分层抽样核验两道环节,均在样本构造之前执行;人工制备样本按《稀少缺陷样本制备与定标作业指引》组织,制备过程与定标结论一并留档 | 1.3.2(b1940/b1941) |
| C03 许可状态 | 企业自有 | 1.4.1(b1949/b1950) |
| C04 加工处理流程 | 隔离核验 → 分层抽样设计与核验(含稀少类别缺口识别)→ 采集登记 → 纸质件版面还原与字段抽取 → 缺陷名录与判据统一、位置口径统一 → 人工制备样本补足(仅稀少类别)→ 样本构造 → 人工裁定答案(双人独立,不一致进仲裁,仲裁不成立不入集)→ 判分方式与评分细则定稿 → 与训练侧去重与相似度比对 → 冻结发布。本子集未经合成与增强 | 1.3.3(b1942/b1943) |
| C05 预处理参数 | 缺陷图像裁切口径与指令微调子集一致(按标注多边形裁切,保留原图指针),以保证可比;纸质件解析口径同 DC-04-0001 卡 C05;根因追溯类样本的输入须含完整追溯链,使答案在给定输入下唯一 | 1.3.3(b1942/b1943) |
| C06 标注规范编号 | GHY26691-ST-04-0004-V1.0 评测分册(答案裁定部分) | 1.3.4(b1944/b1945) |
| C07 标注组织方式 | 答案一律双人独立裁定,不一致进第三人仲裁;仲裁不成立的样本不入集;人工制备样本的定标由质量管理部门专家完成并留档;报告生成类的评分细则由质量管理部门评审确认(b1493) | 1.3.4(b1944/b1945) |
| C08 跨标注员一致性 | 【待填:实测一致性指标值】。基准集一致性门限高于训练侧子集;严重度层的不一致样本一律进仲裁,低于门限的样本不入集 | 1.3.4(b1944/b1945) |
| C09 黄金集通过率 | 不适用(本子集本身即评测基准) | 1.3.4(b1944/b1945) |
| C10—C12 合成、教师模型与增强 | 均不适用(B14=0,无合成与增强,不调用教师模型)。人工制备样本不属合成样本,其记录见 C02 与 C04 | 1.3.3(b1942/b1943);1.4.1(b1949/b1950) |
| C13 去重与相似度比对结论 | 已与 DC-04-0001、-0002、-0003 三子集完成去重与相似度比对,命中样本从训练侧移除;部件与检验记录集合隔离核验结论编号【待填】。每版发布前重跑核验(b1544、b1554) | 1.3.3(b1942/b1943) |
| C14 版本变更记录 | V1.0 首版冻结,无上游版本 | 1.3.5(b1946/b1947) |
| D01 使用许可条款 | 限本项目及甲方内部使用;gold 与 rubric 限评测岗;第三方评测机构按委托协议授权 | 1.4.1(b1949/b1950) |
| D02 目标应用场景 | 为 SC-04、SC-05、SC-06 三个场景的能力评测供数(b0684) | 1.4.2(b1951/b1952) |
| D03 目标模型任务类型 | 基准评测 | 1.4.2(b1951/b1952) |
| D04 推荐评测指标 | 缺陷分类准确率(按缺陷类别分层,真实与人工制备样本分别统计);缺陷定级与判据一致率;检验判定规则问答准确率;根因追溯类按 cause 与 evidence_chain 分别判分;报告生成类按 rubric_human 人工评分。总分按四个能力维度等权或按场景权重加权两种口径分别给出 | 1.4.3(b1953/b1954) |
| D05 评测协议 | 《评测协议固化记录》GHY26691-ST-00-0019;协议随本子集一同冻结;真实与人工制备样本的分别统计规则写入协议(b1554) | 1.4.3(b1953/b1954) |
| D06 基线结果 | 见《数据集验证报告》GHY26691-VR-04-0004 第 3 章 | 1.4.4(b1955/b1956) |
| D07 可复现实现参考 | 判分脚本 score_04.py、隔离核验脚本、分层抽样核验脚本、标注多边形校验脚本、评测执行示例 run_bench_04.sh | 1.4.4(b1955/b1956);1.4.5(b1957/b1958) |
| D08 典型应用案例 | 首轮全量评测:按本子集与协议对基线模型与训练后模型各执行一轮,输出逐能力维度得分、逐缺陷类别得分、真实与人工制备样本的分别得分与置信区间,见 GHY26691-VR-04-0004 第 4 章(b0688) | 1.4.5(b1957/b1958) |
| D09 不适用情形 | 不得用于训练、不得用于提示词示例、不得用于合成样本的种子;gold 不得进入任何训练侧批次。本子集不作为缺陷检出能力的唯一评测依据,理由同 DC-04-0000 卡 D09;根因追溯类结论对断链情形不适用;判据换版后相应样本须重新裁定 | 1.2.5(b1935/b1936);1.4.2(b1951/b1952) |
| D10 配套数据集 | GHY26691-DC-04-0001、-0002、-0003(三者为隔离对象) | 1.1.6(b1924/b1925);1.4.2(b1951/b1952) |
| E01—E10 质量与评测 | 质检报告 GHY26691-QC-04-0004-V1.0;验证报告 GHY26691-VR-04-0004-V1.0(b1561);六维度质检结果见质检报告摘要表,均衡性维度另加逐缺陷类别样本量核对(b1542、b1543);质检结论与未关闭缺陷【待填】;能力增量与场景可用性结论见验证报告第 3、4 章(b1555—b1558);第三方评测状态待评测,本子集为第三方评测的执行依据之一(b0688、b2076、b2077);依据标准版本 TC609-5-2025-04、GB/T 36344—2018、GB/T 2828.1—2012、GB/T 8170—2008、GB/T 19418—2003、GB/T 11345—2023、GB/T 3323.1—2019、GB/T 231.1—2018;复测记录【待填】 | 1.3.3(b1942/b1943)· 1.4.3(b1953/b1954)· 1.4.4(b1955/b1956)· 1.3.5(b1946/b1947);主依据 b1568、b1561、b0688 |
| F01—F10 安全与合规 | 数据分类:生产经营数据—质量管理类;分级【待填,gold 按较高一级处理】;涉及商业秘密;去标识化方法同 GHY26691-DC-04-0001 卡 F04,另:本子集不披露部件号与检验记录号,仅披露分层结构与每层条数;去标识化效果按 GB/T 42460—2023 评估,结论编号【待填】;商用可用性已核查,记录编号【待填】;来源合法性见 GHY26691-ST-00-0007 审查记录编号【待填】;访问权限:评测岗全字段,质量管理与检验角色除 gold/rubric 外字段,数据加工岗不得访问 gold;审计记录按 GHY26691-DC-04-0004 检索,gold 字段每次访问单独留痕;不得跨境传输,对外共享须经甲方书面同意 | 1.4.1(b1949/b1950)· 1.3.3(b1942/b1943)· 1.3.1(b1938/b1939)· 1.1.4(b1920/b1921)· 1.1.5(b1922/b1923)· 1.2.5(b1935/b1936);主依据 b1396、b1534 |
| G01—G09 版本与指纹 | 【待填:由平台在冻结时写入】;摘要算法 SM3,签名算法 SM2;冻结后指纹不得变化;自描述封装文件 GHY26691-04-BM-V1.0.pkg,gold 与 rubric 单独封装为 GHY26691-04-BM-GOLD-V1.0.pkg(SM4 加密);上游版本无(首版冻结);血缘标识【待填】 | 1.3.5(b1946/b1947)· 1.1.6(b1924/b1925)· 1.1.2(b1916/b1917);主依据 b1567、b1568、b1569、b1570 |
附表 A10-34 本子集记录级字段定义(数据字典节选,仅列与 DC-01-0004 卡不同的字段)
| 字段名 | 类型 | 取值域 | 填写口径 | 校验规则 |
|---|---|---|---|---|
defect_ref | 对象 | {defect_code, severity, criteria_ver, position} | 缺陷码、严重度、判据版本号与位置口径 | CCL/CJG 类必填;defect_code 须在《缺陷名录与分级判据对照表》中存在 |
sample_origin | 枚举 | 真实/人工制备 | 样本来源,用于分别统计 | 非空;人工制备 仅允许出现在稀少缺陷类别中,且须有定标记录编号 |
criteria_ver | 字符串 | 判据版本号 | 本条 gold 所依据的判据版本 | CCL/CJG 类必填;换版后样本须重新裁定 |
gold(根因类) | 对象 | {cause, evidence_chain} | 根因结论与证据链分列,分别判分 | 根因类必为对象形态;两子字段均非空 |
scoring | 枚举 | exact/field_f1/set_overlap/rubric_human/对象分列 | 判分方式 | 非空;rubric_human 时 rubric 必填 |
附表 A10-34 数据来源:缺陷码与判据版本依表 A10-5;sample_origin 依本节开头关于人工制备样本的界定与 B14b 字段;gold 分列依 D04。
附表 A10-35 本子集能力维度、考点与缺陷类别分层
| 能力码 | 能力维度 | 条数 | 考点 | 考点条数(测算) | 判分方式 |
|---|---|---|---|---|---|
| CCL | 缺陷分类 | 1000 | 焊接缺陷类型判别(按十一类分层) | 480 | exact |
| CCL | — | — | 外观缺陷类型判别 | 240 | exact |
| CCL | — | — | 严重度定级与判据引用 | 200 | exact |
| CCL | — | — | 缺陷位置口径给定 | 80 | field_f1 |
| CJG | 检验判定 | 700 | 检验项目适用性判定 | 240 | exact |
| CJG | — | — | 判定规则与关键工序对应 | 200 | exact |
| CJG | — | — | 热处理硬度判定 | 160 | exact |
| CJG | — | — | 材料化验项判定 | 100 | exact |
| CTR | 根因追溯 | 500 | 追溯链构建与断链识别 | 180 | set_overlap |
| CTR | — | — | 根因判断与证据链组织 | 220 | 对象分列 |
| CTR | — | — | 跨集参数段引用正确性 | 100 | field_f1 |
| CRP | 报告生成 | 300 | 检测报告字段生成 | 160 | rubric_human |
| CRP | — | — | 报告复核与差异指出 | 140 | rubric_human |
| 合计 | — | 2500 | 13 个考点 | 2500 | — |
缺陷类别分层(CCL 维度内,焊接缺陷十一类):每类不低于 60 条;真实样本不足 60 条的类别以人工制备样本补足,补足数量与各类真实、制备条数见 stratify_check.json。外观缺陷类别的分层按企业外观缺陷目录,每类下限同为 60 条。
附表 A10-35 数据来源:能力维度条数依技术方案 T1C 节第六部分第 3 小节;每类不低于 60 条的下限依同节关于缺陷分类基准样本按类别分层的要求;缺陷类别清单依表 A10-5 第二层;考点划分与条数为测算值。
附件十六 本子集样本示例全文(2 条)
示例 1(能力码 CCL,考点「严重度定级与判据引用」,判分方式 exact,真实样本):
{"item_id":"BM04-CCL-F1-000312",
"capability":"CCL",
"prompt":"给定缺陷图像与检测记录,判别缺陷类型与严重度等级,并给出所依据的判据版本与条款。",
"input":{"defect_image":"BM04-0312-crop.png","ndt_result":{"检测方法":"【待填】","反射信号":"【待填】","验收标准":"GB/T 11345 相应等级"}},
"gold":{"缺陷类型":"【待填:按判据对应类型】","严重度等级":"【待填】","判据条款":"【待填:条款号】","位置口径":{"weld_seam_id":"【不披露】","weld_pass_id":"【待填】","along_seam_mm":"【待填】"}},
"rubric":null,
"scoring":"exact",
"defect_ref":{"defect_code":"【待填】","severity":"【待填】","criteria_ver":"【待填:本条所依据的判据版本号】","position":{"along_seam_mm":"【待填】"}},
"sample_origin":"真实",
"criteria_ver":"【待填】",
"source_isolation":{"part_set_id":"ISO-04-B","time_cutoff":"【待填】"},
"biz_key":{"inspect_record_no":"【不披露,见 B07】"}}
示例 2(能力码 CTR,考点「跨集参数段引用正确性」,判分方式 field_f1):
{"item_id":"BM04-CTR-F1-000088",
"capability":"CTR",
"prompt":"给定质量结论与追溯链,指出为支撑根因判断需要引用制造过程数据集中的哪些参数段;逐段给出引用键。",
"input":{"text":"质量结论:热处理后硬度低于工艺要求下限。","trace_chain":{"工序":["备料","组焊","热处理","机加工"],"热处理":{"heat_no":"【不披露】","可引用工况段":["装炉","升温","保温","淬火冷却","回火升温","回火保温","出炉"]},"机加工":{"过程记录":"缺失"}}},
"gold":{"应引用段":[{"heat_no":"【不披露】","phase":"保温","理由":"硬度不足与保温段执行条件直接相关"},{"heat_no":"【不披露】","phase":"淬火冷却","理由":"冷却速率影响硬度"},{"heat_no":"【不披露】","phase":"装炉","理由":"装炉量与码装间隙属执行条件"}],
"不应引用段":[{"phase":"回火保温","理由":"本结论为硬度偏低,回火段偏离会使硬度更低但本炉次回火段无偏离记录,不作为主证据"}],
"链条缺口":"机加工工序过程记录缺失,若硬度检测在机加工之后实施则该环节影响无法排除"},
"rubric":null,
"scoring":"field_f1",
"defect_ref":null,
"sample_origin":"真实",
"criteria_ver":"【待填】",
"source_isolation":{"part_set_id":"ISO-04-A","time_cutoff":"【待填】"},
"biz_key":{"heat_no":"【不披露】"}}
示例 2 直接度量跨集引用能力。gold 同时给出「应引用段」与「不应引用段」,判分按字段级 F1 计算,既考察召回也考察精确——只会把所有工况段都引用一遍的回答在精确率上会被扣分。这一考点的设置理由是本集与制造过程数据集的联动是四集中最紧的一处,引用不准会使根因结论的证据链失效。
本子集机器可读卡片片段:
dataset_card_id: GHY26691-DC-04-0004-V1.0
A03_subset_purpose: 基准评测
A08_sample_count: 2500
B05_topic_distribution: {CCL: 1000, CJG: 700, CTR: 500, CRP: 300}
B07_sample_origin_distribution: {真实: 0.92, 人工制备: 0.08}
B08_difficulty_distribution: {L1: 0.44, L2: 0.34, L3: 0.22} # 次维度,缺陷类别为主维度
B09_defect_class_floor: 60 # 每缺陷类别下限条数
B14_synthetic_ratio: 0.00 # 固定值,非零阻断发布(b1513)
B14b_manual_prepared_ratio: 0.08 # 人工制备样本,非合成;分别统计
C13_isolation_conclusion_id: 【待填】 # 部件与检验记录集合隔离,每版重跑
D04_scoring_note: 分类按缺陷类别分层且真实与人工制备分别统计;根因类 gold 分 cause 与 evidence_chain
D09_prohibited_use: [训练, 提示词示例, 合成种子]
E01_qc_report_id: GHY26691-QC-04-0004-V1.0
E05_validation_report_id: GHY26691-VR-04-0004-V1.0
G07_package: GHY26691-04-BM-V1.0.pkg
G07_gold_package: GHY26691-04-BM-GOLD-V1.0.pkg # SM4 加密,限评测岗
本部分回应招标文件对数据集按版本组织产出、每一正式发布版本产出五件套的要求(b1567、b1568),以及下一版本修订计划的要求(b1571、b1572)。前六部分出的是二十张卡本身,本部分回答三个问题:这些字段由谁在什么时点填、平台怎么校验、改了之后下游怎么知道。
数据卡的填写不是交付前的一次性文书工作。把它当文书,结果是交付前集中补填、字段靠回忆、与实际数据不符;把它当生产流程的产物,字段才是真的。我方的做法是把八十四个字段按填写时点拆到三处:统计类字段由工具链在批次发布时自动写入,业务含义类字段由生产任务负责人在批次结项时填写并经质检环节复核,许可与责任部门两类字段由甲方确权后填写。平台在发布前校验必填字段,缺项不予发布。
表 A10-6 八十四个字段的填写责任与时点
| 分区 | 字段范围 | 平台自动写入 | 人工填写 | 填写时点 | 复核方 | 缺项处置 |
|---|---|---|---|---|---|---|
| A 标识与基本信息 | A01—A17(17 项) | A01、A05、A06、A08、A09、A10、A11、A13、A17(9 项) | A02、A03、A04、A07、A12、A14、A15、A16(8 项) | 自动项在定版时写入;人工项在生产任务立项时填 A02—A04,在批次结项时填 A07、A12、A14—A16 | 质检岗 | 必填缺项阻断发布 |
| B 内容特征 | B01—B14(14 项) | B01—B08、B10、B13、B14(11 项) | B09、B11、B12(3 项) | 自动项在定版时写入;B09 在标注规范定稿时填,B11 与 B12 在批次结项时填 | 质检岗;B12 另经数据所有权部门确认 | B12 填「无」不得分,视同缺项(b1935) |
| C 建设过程 | C01—C14(14 项) | C05、C08—C10、C12—C14(7 项) | C01—C04、C06、C07、C11(7 项) | 自动项在加工过程中累积写入;人工项在批次结项时填 | 质检岗;C11 另经合规审查岗确认 | 必填缺项阻断发布;标注类子集 C06—C09 缺项阻断 |
| D 应用说明 | D01—D10(10 项) | D06(1 项) | D01—D05、D07—D10(9 项) | D01 待甲方确权后填;其余在批次结项时填;D06 在验证实验完成后自动写入 | 质检岗;D01 另经甲方确权 | D01 未确权时以占位发布,但须在资产台账中标记「许可待确权」 |
| E 质量与评测 | E01—E10(10 项) | E01—E07、E10(8 项) | E08、E09(2 项) | 自动项在质检与验证报告出具后写入;E09 在标准适用清单定版时填 | 评测管理岗 | E01—E03 缺项阻断发布 |
| F 安全与合规 | F01—F10(10 项) | F05、F08、F09(3 项) | F01—F04、F06、F07、F10(7 项) | 在批次结项前由数据安全岗填写并经合规审查 | 数据安全岗、合规审查岗 | 涉敏子集 F04、F05 缺项阻断发布 |
| G 版本与指纹 | G01—G09(9 项) | 全部 9 项 | 无 | 定版时自动写入,写入后不可修改 | 平台自校验 | 指纹计算失败即定版失败 |
| 合计 | 84 项 | 48 项 | 36 项 | — | — | — |
表 A10-6 数据来源:字段分区与字段号依附录佐证卷 A2 节第 4.3 小节;填写方取自同节各字段的「填写方」一列;填写时点与复核方依技术方案 T1B 节数据集项目管理的批次立项与结项流程;B12 填「无」不得分依招标文件评测规范 b1935、b1936。
把四十八个字段交给平台自动写入,是本机制的主要设计取向。理由不是为了省人工,而是为了减少两类错误:一类是统计口径不一致——同一批数据,人工填报的样本数与工具链统计的样本数差一点点,评测时就要解释差异来自哪里;另一类是版本错配——卡片在批次结项时填,而数据在之后又补了一个小批次,人工填的数字就落后了。自动写入的字段与数据同源同时,这两类错误不会出现。
剩下三十六个人工字段都是判断性内容:这份数据能解决什么业务问题(A07)、它的已知局限在哪(B12)、不适合用在什么任务上(D09)。这些写不出来不是因为缺工具,是因为要真的清楚这批数据是怎么做出来的。
平台在发布前执行一轮字段校验,不通过则阻断发布。校验规则分四类:必填性、取值合法性、交叉一致性、承诺符合性。前三类是形式校验,第四类是本项目特有的——它把招标文件中的指标要求写成规则,使不达标的版本在发布前就被拦下,而不是等到第三方评测时才发现。
表 A10-7 数据卡发布前的自动校验规则
| 规则号 | 类别 | 校验内容 | 触发范围 | 不通过处置 | 依据 |
|---|---|---|---|---|---|
| R01 | 必填性 | 全部必填字段非空;不适用字段须显式填「不适用」或 null,不得省略键名 | 全部二十张卡 | 阻断发布 | b1567、b1912—b1958 |
| R02 | 必填性 | B12 已知局限性非空且不为「无」,每条局限性配一条后续补齐计划并指向修订计划编号 | 全部卡 | 阻断发布 | b1935、b1936、b1571、b1572 |
| R03 | 必填性 | 标注类子集的 C06—C09 四项非空 | 指令微调、偏好对齐、基准评测各卡 | 阻断发布 | b1493、b1852 |
| R04 | 取值合法性 | A02、A03、B01 模态、C03 许可状态、D03 任务类型、F01—F03 等枚举字段取值在取值集内 | 全部卡 | 阻断发布 | A2 节 4.3 小节取值约束 |
| R05 | 取值合法性 | 工序码在 28 道封闭字典内;缺陷码在《缺陷名录与分级判据对照表》内;材料牌号在合法牌号集内 | 业务域 02、04 各卡 | 阻断发布 | 表 A10-4、表 A10-5 |
| R06 | 交叉一致性 | A08 样本总数与工具链统计值一致;与资产台账同版本行的差异不超过 0.5% | 全部卡 | 差异超限阻断发布,须先定位差异来源 | b1573、b1574 |
| R07 | 交叉一致性 | B01 各模态条数之和等于 A08;B05 各主题条数之和等于 A08;B10 各标签条数之和不小于 A08(标签可多选) | 全部卡 | 阻断发布 | b1927—b1932 |
| R08 | 交叉一致性 | E01 质检报告、E05 验证报告编号存在且其业务域码与序号段与本卡一致;G07 封装文件存在 | 全部卡 | 阻断发布 | b1568、b1561 |
| R09 | 交叉一致性 | 基准评测卡的 C13 隔离核验结论为通过;训练侧三卡的 C13 均指向同一隔离结论编号 | 全部卡 | 阻断发布 | b1544、b1554 |
| R10 | 承诺符合性 | B14 合成样本占比不超过子集上限:预训练 30%、指令微调 45%、偏好对齐 50%、基准评测 0% | 全部卡 | 超限阻断发布 | b1512、b1513 |
| R11 | 承诺符合性 | 四集汇总层面的模态种类数不少于 4 种(按较高要求承接) | 四张汇总卡联合校验 | 阻断发布 | b1601r02、b0670、b0683 |
| R12 | 承诺符合性 | 四集汇总层面的多模态条数占比不低于 40%;低于 45% 时发出预警但不阻断 | 四张汇总卡联合校验 | 低于 40% 阻断;40%—45% 预警 | b1601r03 |
| R13 | 承诺符合性 | 四集汇总层面的三年内数据条数占比不低于 40%;低于 45% 时发出预警,该版发布前先补充近期批次 | 四张汇总卡联合校验 | 低于 40% 阻断;40%—45% 预警并要求补批次 | b1601r04 |
| R14 | 承诺符合性 | 分期累计达成下限核对:各子集的本版累计规模不低于所处期次的下限 | 全部卡 | 低于下限不阻断发布,但须在卡的 C14 中记录缺口并触发偏差处置流程 | 技术方案 T1C 节表 3 |
| R15 | 取值合法性 | 时效判定基准日正确:按业务发生时间、以本版发布日前推 36 个月计算 | 全部卡 | 阻断发布 | b1601r04、b1939 |
| R16 | 必填性 | 涉敏子集的 F04 去标识化方法、F05 效果评估结论非空 | 全部卡 | 阻断发布 | b1396、b1534 |
| R17 | 交叉一致性 | G01—G09 指纹字段由平台计算得出,与封装包内清单文件一致 | 全部卡 | 不一致即定版失败 | b1568、b1569 |
表 A10-7 数据来源:R01—R04 与 R16 依评测规范说明文档维度指标与安全要求;R05 依本附录表 A10-4、表 A10-5;R06 依资产台账对账口径;R10 依合成占比上限;R11—R13 依招标文件表格 3-5 三项指标;R14 依分期达成下限;R15 依时效口径;R17 依版本指纹要求。
R12 与 R13 两条规则的预警线设在 45%,高于 40% 的要求线五个百分点。这个安全边界不是凑的:时效性占比会随基准日逐版后移而自然下降,早期入集的样本会陆续退出三年内区间;如果等到跌破 40% 才处置,补批次来不及。预警线前置五个百分点,留出一个版本周期的处置时间。
自动校验管得住形式与数值,管不住判断性字段写得对不对。A07 数据集简介写得含糊、B12 局限性写得轻描淡写、D09 不适用情形漏写——这些都通不过人的眼睛,通不过机器。因此人工字段另设三级评审。
第一级是生产任务负责人自审,在批次结项时按《数据卡填写指引》逐项自查,自查清单与本附录各卡的字段顺序一致。第二级是质检岗复核,复核的重点不是文字通顺,而是三件事:A07 与 D02 所述的业务问题与场景,与本批次实际加工的样本是否对得上;B12 所列局限性,与质检报告中的缺陷项是否对得上;D09 所列不适用情形,是否覆盖了质检过程中发现的全部边界。第三级是数据所有权部门确认,确认范围限于 B12 局限性、D01 使用许可、D02 目标应用场景与 F 区安全合规字段四处——这四处涉及对外承诺与权责,不由项目组单方面定。
三级之间出现分歧时,按下列顺序处置:事实性分歧(如某条局限性是否存在)以质检报告与工具链统计为准;口径性分歧(如某项是否算作局限性)提交数据治理工作组裁定;权责性分歧(如许可条款的表述)由甲方决定。裁定结论记入卡的 C14 版本变更记录,并同步更新《数据卡填写指引》,使同类分歧不再重复发生。
评审周期与批次节奏绑定,不另设固定周期:每一个正式发布批次走一轮三级评审。另有两种情形触发额外评审——判据或标准换版时(触发 B09、E09 两处字段的专项复核)、第三方评测提出字段缺陷时(触发缺陷所涉字段的专项复核与整改复测,对应招标文件的缺陷整改复测要求 b0688)。
图 A10-3 数据卡从字段生成到下游通知的流转与门控。数据来源:字段填写责任与时点依表 A10-6;校验规则依表 A10-7;版本号规则与验证结论沿用关系依附录佐证卷 A2 节第 4.6 小节;资产台账对账口径依招标文件 b1573、b1574;五件套同批产出依 b1567、b1568。
版本号形如 V<主>.<次>。样本范围、标签体系或加工口径发生变化时主版本号递增;仅修复缺陷、补填字段而样本集合不变时次版本号递增。主版本号递增的版本须重做验证实验并重出验证报告;次版本号递增的版本可沿用上一主版本的验证结论,但须在 C14 字段注明沿用关系。这一规则沿用 A2 节第 4.6 小节,本附录不另立。
改了之后下游怎么知道,是本机制中最容易被忽略的一环。数据集一旦被取用,使用方的模型、评测结果与场景结论都建立在某一个具体版本上;换了版本而没通知,下游拿旧结论对新数据,差异无从解释。我方的通知机制依托两处既有记录:卡的 D02 目标应用场景记录了本子集设计支撑哪些场景,资产台账的使用情况一列记录了实际取用方。两者取并集,构成通知对象清单。
通知内容固定四项:新版本号、变更摘要(取 C14 版本变更记录)、是否须重做验证实验(主版本号递增则须重做)、旧版本可用期限。旧版本不立即下线,保留一个版本周期供使用方完成切换;保留期内两个版本同时可取用,卡的 G08 上游版本字段使二者关系可查。基准评测子集是例外:冻结版本在其评测周期内不得被替换,新版另立冻结批次,两个批次的评测结果不可直接比较,这一点在卡的 C14 与评测协议中同时写明。
第 1.5 小节是正向对齐——每个字段标注它应答哪些指标。本小节是反向核对——每一项指标点出哪些字段在应答它,并逐项核对是否存在无字段应答的指标。两张表方向相反,用途也不同:正向那一列给填卡的人看,反向这张表给评测与自查用。评测规范按这二十一项给说明文档维度打分(b1911),整体验收要求三个维度得分均达最低合格标准、综合总分不低于 85 分(b2145),因此有没有指标落空,是本附录自查的第一件事。
核对结论:二十一项指标全部有字段应答,无落空项。八十四个字段中,八十三个至少对一项指标,一个(A02 数据集名称)只对到组级,原因见第 1.5 小节。
表 A10-8 二十一项说明文档指标的反向覆盖矩阵(逐项列出应答字段)
| 指标组 | 指标号与单元 | 评估说明单元 | 应答字段(本附录各卡字段号) | 字段数 | 填写方 | 缺项后果 |
|---|---|---|---|---|---|---|
| 1.1 基本信息完整性(b1913) | 1.1.1 数据集规模(b1914) | b1915 | A08 样本总数、A09 Token 总数、A10 存储总量 | 3 | 平台 | 阻断发布(R01);另受 R06 与台账对账约束 |
| 1.1 | 1.1.2 格式规范(b1916) | b1917 | A11 文件类型与编码、A12 数据结构说明、G07 自描述封装文件、G01—G09 中的封装结构说明 | 4 | 平台+人工 | 阻断发布 |
| 1.1 | 1.1.3 文件结构(b1918) | b1919 | A13 目录组织方式、A14 文件命名规则 | 2 | 平台+人工 | 阻断发布 |
| 1.1 | 1.1.4 获取渠道(b1920) | b1921 | A15 获取方式、F08 访问权限范围、F09 审计记录位置(访问留痕) | 3 | 人工+平台 | 阻断发布 |
| 1.1 | 1.1.5 技术支持(b1922) | b1923 | A16 技术支持渠道、F09 审计记录位置、A17 中的工单入口指向 | 3 | 人工+平台 | 阻断发布 |
| 1.1 | 1.1.6 使用便捷性(b1924) | b1925 | A17 配套件清单、A12 数据结构说明(指向数据字典)、D10 配套数据集、G07 自描述封装文件、各卡机器可读片段 | 5 | 平台+人工 | 阻断发布;另由第八部分空机校验第四步实测 |
| 1.2 内容特征完整性(b1926) | 1.2.1 模态类型(b1927) | b1928 | B01 模态构成、B02 模态种类数、B03 多模态条数占比 | 3 | 平台 | 阻断发布;另受 R11 承诺校验(不少于 4 种) |
| 1.2 | 1.2.2 数据分布(b1929) | b1930 | B04 近三年占比、B05 业务主题分布、B06 样本长度分布、B07 来源分布、B08 难度分布、B10 标签分布(含长尾与不均衡)、B14 合成样本占比 | 7 | 平台 | 阻断发布;B06/B08 按子集类型判适用性;另受 R07 加总一致性校验 |
| 1.2 | 1.2.3 标签类别(b1931) | b1932 | B09 标签体系(层级树、定义与边界条件)、B10 标签分布 | 2 | 人工+平台 | 标注类子集阻断发布(R03);预训练子集按「不适用」判定 |
| 1.2 | 1.2.4 样本示例(b1933) | b1934 | B11 样本示例(每卡不少于 3 条,全文见各卡样本示例附件) | 1 | 人工 | 阻断发布;条数不足或未覆盖不同形态按缺项计 |
| 1.2 | 1.2.5 局限性说明(b1935) | b1936 | B12 已知局限性、D09 不适用情形、F03 涉及敏感信息类型 | 3 | 人工 | B12 填「无」不得分,视同缺项(R02);每条须配补齐计划并指向修订计划编号 |
| 1.3 建设过程完整性(b1937) | 1.3.1 数据来源(b1938) | b1939 | C01 数据来源清单(逐源列源系统、采集时间范围、所属单位)、B13 时间跨度、B04 近三年占比(业务发生时间口径)、B07 来源分布、F07 来源合法性承诺 | 5 | 人工+平台 | 阻断发布;地理区域项按密级处理后填写 |
| 1.3 | 1.3.2 采集方法(b1940) | b1941 | C02 采集方法(逐源说明接口方式、采集频次、增量机制、纸质数字化与补录路径) | 1 | 人工 | 阻断发布 |
| 1.3 | 1.3.3 加工处理流程(b1942) | b1943 | C04 加工处理流程、C05 预处理参数、C10 合成方法记录、C11 教师模型许可登记、C12 增强方法记录、C13 去重与相似度比对结论、B14 合成样本占比、E01—E04 质检报告与结论、F04 去标识化方法、F05 去标识化效果评估、G09 血缘标识 | 13 | 人工+平台 | 阻断发布;C10/C12 按是否含合成与增强判适用性 |
| 1.3 | 1.3.4 标注规范(b1944) | b1945 | C06 标注规范编号(指向标注手册册号与版本)、C07 标注组织方式、C08 跨标注员一致性、C09 黄金集通过率、B09 标签体系(标签定义与规则)、各卡样本示例附件(典型示例) | 6 | 人工+平台 | 标注类子集阻断发布(R03) |
| 1.3 | 1.3.5 版本记录(b1946) | b1947 | C14 版本变更记录、A01 数据卡编号(末段为版本号)、A05 版本号、A06 发布日期、G01—G06 指纹六项、G08 上游版本、G09 血缘标识、E10 复测记录 | 12 | 平台 | 阻断发布;主版本号递增须重出验证报告 |
| 1.4 应用说明完整性(b1948) | 1.4.1 使用许可(b1949) | b1950 | D01 使用许可条款(是否商用、是否署名、再分发限制、有效期)、C03 许可状态、C11 教师模型许可登记、F01 数据分类、F02 数据分级、F03 涉及敏感信息类型、F06 商用可用性核查、F10 出境与共享限制 | 8 | 人工(D01 须甲方确权) | D01 未确权以占位发布,台账标记「许可待确权」;其余阻断发布 |
| 1.4 | 1.4.2 目标应用场景(b1951) | b1952 | D02 目标应用场景(逐场景编号 SC-01—SC-11)、D03 目标模型任务类型、A03 用途子集、A04 所属业务域、A07 数据集简介、D09 不适用情形、D10 配套数据集、E07 场景可用性结论 | 9 | 人工+平台 | 阻断发布 |
| 1.4 | 1.4.3 评估方法(b1953) | b1954 | D04 推荐评测指标(含计算口径)、D05 评测协议(环境、推理参数、随机种子、指标脚本版本)、E09 依据标准版本 | 3 | 人工 | 阻断发布;基准子集的协议随集冻结 |
| 1.4 | 1.4.4 基准测试结果(b1955) | b1956 | D06 基线结果、D07 可复现实现参考、E05 验证报告编号、E06 能力增量结论、E07 场景可用性结论、E08 第三方评测状态 | 6 | 平台+人工 | 阻断发布 |
| 1.4 | 1.4.5 典型应用案例(b1957) | b1958 | D08 典型应用案例(不少于 1 个已验证场景的输入输出示例与效果数据)、D07 可复现实现参考(脚本路径与运行说明) | 2 | 人工 | 阻断发布 |
| 合计 | 21 项(b1914—b1957 中的 21 个指标名单元) | 21 个评估说明单元 | 八十四个字段中八十三个至少对一项;A02 只对组级 | — | — | 无落空指标 |
表 A10-8 数据来源:指标组、指标号与评估说明的单元 id 依招标文件第 112—115 页原文(b1912—b1958,含维度标题 b1912 与四个组标题共 47 个单元);字段号与字段名依附录佐证卷 A2 节第 4.3 小节;应答字段依本附录各卡字段表第三列逐格汇总;缺项后果依表 A10-7 校验规则;打分与验收口径依 b1911、b2145。
矩阵做出来之后有三件事值得交代,它们是这次逐条对齐查出来的。
第一件,1.1.5 技术支持这一项的要求比字面更高。b1923 的原文是「是否提供了官方的技术支持渠道,如论坛、邮箱或问题追踪系统,并能提供有效的帮助」——后半句「并能提供有效的帮助」不是形式项,光填一个邮箱地址答不满。因此 A16 字段在本附录各卡中填的是受理时间与分档响应时限(工作日 9:00—18:00 受理,一般问题 4 小时内响应,数据内容类问题 1 个工作日内答复),并由 F09 审计记录位置提供工单可追溯的凭据。能不能提供有效帮助,验收时看的是工单响应记录而不是渠道声明。
第二件,1.1.6 使用便捷性是唯一一项可以被实测而不只是被审阅的指标。b1925 问的是「开箱即用」体验——数据字典、解析脚本、示例代码是否齐备。这一项与第八部分的空机校验正好对上:空机四步里的第四步就是在未安装本项目任何组件的机器上执行包内脚本抽样读出样本,读出的条数与卡的 A08 字段比对。我方把这一步写成验收口径,而不是停在「已提供接口文档」上,就是为了让这一项有客观判据。
第三件,二十一项里只有 1.4.1 使用许可一项存在以占位发布的情形。D01 使用许可条款须由甲方确权后填写,确权未完成时卡以占位发布,但资产台账同步打「许可待确权」标记,并列入第九部分待补清单第 3 项。这一项不阻断发布的理由是确权不在本包权责范围内;但它会直接影响该指标得分,因此须在卡与台账两处留痕,确权完成后逐卡回填。
本部分回应招标文件对数据字典与自描述封装文件的要求:须使数据集在脱离平台后仍能被第三方平台准确解析(b1569、b1570)。「脱离平台后仍能被解析」这句话的验收口径不能停在「我们提供了接口文档」上,否则交付时双方对同一份数据会得出不同结论。我方的验收口径是一台未安装本项目任何组件的机器——下文称空机——执行包内脚本即可读出样本并校验指纹。
每张数据卡同时产出 Word 与机器可读两种形态,内容同源,由平台从同一份字段数据渲染,避免两份不一致。机器可读文件的键名用 A2 节 4.3 小节的字段号加字段英文名,形如 A08_sample_count、B14_synthetic_ratio、G02_content_root_digest,便于校验脚本直接按键取值。三条规则需要明确:
第一,不适用字段写 null 并在注释中说明原因,不省略键名。省略键名会使字段完整性的自动校验无法区分「不适用」与「漏填」,而这两者在评测中的后果完全不同——前者不扣分,后者按缺项计。本附录各卡的机器可读片段中,预训练子集的 C06_annotation_spec_id: null 都带注释,就是这条规则的体现。
第二,数值字段不带单位,单位写进键名。A09_token_total_yi 的 yi 即「亿」,B03_multimodal_ratio 为比例而非百分数。理由是带单位的字符串需要解析,解析规则一旦双方理解不同,数字就对不上。
第三,取值受约束的字段在同目录下的 schema.json 中给出取值集,校验脚本按 schema 校验而不按硬编码规则校验。标准换版、缺陷判据换版、工序字典扩充时只改 schema,不改脚本。
版本指纹回答一个很实际的问题:拿到手的这份数据集,是不是卡片所描述的那一份。我方采用三段式摘要,摘要算法采用国产商用密码杂凑算法 SM3(GB/T 32905—2016),签名采用 SM2(GB/T 32918.1—2016),与技术方案中的国密要求一致。
第一段是内容摘要:对每一个样本文件逐个计算 SM3 摘要值,形成校验清单 manifest.json,清单中逐行记录文件路径与摘要值。第二段是清单摘要:对校验清单整体计算 SM3 摘要,即卡中 G01 字段。第三段是卡片摘要:对卡片中除 G 区指纹字段本身以外的全部字段,按固定序列化规则(键名字典序、UTF-8、无缩进)计算 SM3 摘要。三段摘要值按清单顺序归并为内容根摘要(G02),再以 SM2 对根摘要签名(G05)。任何一个样本被替换、清单被改动或卡片关键字段被修改,根摘要都会变化。
这一设计的要点是校验方不需要联回平台。清单在包内、摘要算法在卡的 G03/G04 字段中写明、校验脚本在包内,校验方按清单重算摘要并验签即可判定文件是否被改动。基准评测子集另有一层处置:冻结后指纹不得变化,变化即视为冻结被破坏;gold 与 rubric 单独封装并以 SM4(GB/T 32907—2016)加密存储,其摘要计入根摘要但内容仅向评测岗解密。
图 A10-4 自描述封装包的目录结构与空机校验路径。数据来源:封装结构与自描述要求依招标文件 b1569、b1570;三段式指纹与国密算法依本节第 8.2 小节与附录佐证卷 A2 节第 4.4 小节;空机验收口径依技术方案 T1C 节第八部分第 3 小节。
空机校验的四步里,第四步最容易被低估。前三步验的是文件没被改动,第四步验的是文件能被读懂——这两件事不一样。一份指纹校验通过但字典缺字段定义、脚本依赖平台内网服务的包,在空机上同样读不出样本。因此我方把读取脚本的依赖限定在标准库范围内,字段定义全部落在 dict/ 目录的数据字典与 schema.json 中,不留任何指向平台接口的引用。验收时按第四步实际执行一次抽样读取,读出的样本条数与卡的 A08 字段比对,这是自描述能力成立的最终判据。
下列内容需由甲方确认或由项目组在蓝图设计阶段补充,本附录各卡中已以 【待填:…】 标明占位。清单按影响范围排序,影响多张卡的列在前。
表 A10-9 本附录待补材料清单
| 序号 | 待补内容 | 需要谁提供 | 影响的卡与字段 |
|---|---|---|---|
| 1 | 甲方数据分类分级标准的档位定义与适用规则 | 数字化转型工作办公室、数据安全管理岗 | 二十张卡的 F02 数据分级字段 |
| 2 | 数据集责任部门名称、对外联系方式与技术支持入口 | 甲方 | 二十张卡的 A07、A15、A16 字段 |
| 3 | 数据集对外授权条款与确权结论 | 甲方 | 二十张卡的 D01 使用许可条款;台账「许可待确权」标记的清除 |
| 4 | 备料分厂正式工序字典(28 道工序全称与各大类道数) | 工艺部门 | 表 A10-4 全表;业务域 02 四张卡的 B09、process_codes 校验 |
| 5 | 缺陷名录、缺陷分级判据与三类检测的位置口径对照表 | 质量管理部门 | 表 A10-5 全表;业务域 04 四张卡的 B09、defect_ref 校验 |
| 6 | 《数据集规模计量规则》的书面确认(分词器选型、条与组的判定、合成占比上限) | 甲方与项目组共同确认 | 二十张卡的 A08、A09、B14 字段口径 |
| 7 | 占比指标「数据条数」统计基数的确认(技术方案 T1C 节口径一或口径二) | 甲方、第三方评测机构 | 四张汇总卡的 B03、B04 字段;表 A10-7 的 R12、R13 规则参数 |
| 8 | 各源系统只读接口的开通范围与时间表 | 甲方数字化转型工作办公室 | 二十张卡的 C01、C02 字段;各卡 B12 回退条款的触发判定 |
| 9 | 纸质检测报告与化验报告的实际存量盘点结果 | 质量管理部门、档案管理 | DC-04-0001 卡 B12 第一项、B07 来源分布;DC-04-0004 卡分层设计 |
| 10 | 现行校核公式版本号与中性层位置系数版本号及其取值表 | 营销中心、工艺部门 | DC-01-0002、-0004 卡的 formula_ver;DC-02-0002、-0004 卡的 coef_ver |
| 11 | 历史选型方案投运使用评价的填报入口与流程改造安排 | 营销中心、生产管理部 | DC-01-0003 卡 B07 判据来源构成、B12 第一项 |
| 12 | 异常处置记录填报入口的流程改造安排 | 生产管理部、设备动力部门 | DC-03-0003 卡 B07 判据来源构成、B12 第一项 |
| 13 | 焊接层间温度、预热温度等新增感知设备的到位时间 | 项目组与甲方共同确认 | DC-03-0001、-0002、-0004 卡的相关样本与考点 |
| 14 | 工艺过程图像与视频采集的布点方案与实施时间 | 项目组与甲方共同确认 | DC-03-0001、DC-04-0001 卡的视频模态规模 |
| 15 | 可借用工艺「可比性」判据的成文稿 | 工艺部门 | DC-02-0002 卡 B12 第四项、DC-02-0003 卡 PRR 类样本 |
| 16 | 装炉作业规范中装炉量与码装间隙的允许范围 | 热处理分厂、工艺部门 | DC-03-0002、-0003 卡的可调量字段 |
| 17 | 稀少缺陷样本制备与定标作业指引的评审确认 | 质量管理部门 | DC-04-0004 卡 B14b、sample_origin 字段 |
| 18 | 《标准规范适用清单》的定版(含煤矿机械产品类行业标准的查新结论) | 项目组提交、甲方评审 | 二十张卡的 E09 依据标准版本字段 |
| 19 | 文档编号序号段的正式分配(本附录按 A2 节五段式编号规则预编) | 甲方档案管理部门 | 二十张卡的 A01 卡编号;E01、E05、G07 的引用编号 |
| 20 | 示例样本中可对外使用的真实编号(施工号、图号、炉次号等)的授权范围 | 甲方 | 十六张子集卡的样本示例附件 |
表 A10-9 数据来源:各项依本附录各卡 B12 已知局限性、C 区建设过程字段与 F 区安全合规字段所列前提条件;第 6、7 两项与技术方案 T1C 节第十部分待补清单第 1、2 项为同一事项,在该处亦有登记,不重复计数。
二十项待补材料中,第 1 至第 5 项是数据卡能否进入自动校验的前提:没有分级标准、没有责任部门、没有授权条款、没有工序字典与缺陷判据,表 A10-7 的 R04、R05、R16 三条规则无法执行。我方建议在蓝图设计阶段优先完成这五项,其余各项随对应生产任务的立项逐步补齐。本附录各卡的结构与字段粒度不因这些材料待补而改变——待补的是取值,不是口径。