递交截止 2026-10-20 09:30 · 生成于 2026-10-16 08:44
预览稿,非最终投标文件;各节内容以各任务 MAIN.md 为准。
本项目同时涉及矿山装备制造的现场业务与数据集加工生产两套专业语汇,同一个词在两边的所指并不相同:批次在生产现场指一次投料或一次装炉,在数据集生产中指一组具有唯一标识、可关联到采集与交付记录的受理数据。用词不统一,质量检查的判据、验收的计量口径与争议时的裁定对象就会落在不同的事物上。以下两表确定全卷的用词取值,实施期按同一取值执行,不因章节或交付文件不同而改变。
表 0-1 收录招标方现行信息系统与管理制度中的既有简写,释义以招标文件原文与现用命名为准,不另行改译;凡本投标文件正文出现该简写,即按本表释义理解。
表 0-1 术语定义
| 序号 | 简写名称 | 释义 |
|---|---|---|
| 1 | 天地奔牛 | 宁夏天地奔牛实业集团有限公司 |
| 2 | Token | 词元,大模型处理文本的最小单位 |
| 3 | ERP | 企业资源计划 |
| 4 | MES | 制造执行系统 |
| 5 | QMS | 质量管理系统 |
| 6 | WMS | 仓储管理系统 |
| 7 | LMS | 物流管理系统 |
| 8 | EAM | 设备资产管理系统 |
| 9 | OA | 办公自动化系统 |
| 10 | CRM | 客户关系管理系统 |
| 11 | SCM | 供应链管理系统 |
| 12 | SOS | 售后服务管理系统 |
| 13 | SCADA | 数据采集与监控系统 |
| 14 | IIoT | 工业物联网平台 |
| 15 | MDM | 主数据管理系统 |
| 16 | ESB | 企业服务总线 |
| 17 | WCS | 仓库控制系统 |
| 18 | WMS-APP | 仓储管理系统移动端 |
| 19 | PDA | 手持终端 |
| 20 | RBAC | 基于角色的权限访问控制 |
| 21 | SSL 协议 | 安全套接层协议 |
| 22 | 6S | 整理(SEIRI)、整顿(SEITON)、清扫(SEISO)、清洁(SEIKETSU)、素养(SHITSUKE)、安全(SECURITY)六个项目 |
| 23 | RFID | 射频识别 |
| 24 | AGV | 自动引导搬运车 |
| 25 | PMP | 项目管理专业人士 |
| 26 | PgMP | 项目集管理专业人士 |
| 27 | RPA | 机器人流程自动化程序 |
| 28 | PPT | 演示文稿 |
| 29 | CRON 表达式 | 一种时间表达式,用于指定定时任务的时间规则 |
表 0-2 收录数据集加工生产的专有术语,释义依据招标文件用户需求书的用词、现行数据质量评测标准与本方案的生产链路设计确定。其中批次、数据集版本、质量检查节点、定向回流四条是后文质量论述的承重词:质量检查在哪一级对象上放行、血缘追溯追到什么粒度、整改要求退回到哪一道加工环节,均以这四条的定义为准。
表 0-2 数据集生产术语定义
| 术语 | 释义 |
|---|---|
| 业务域 | 按照业务对象、业务活动及管理职责划分的数据组织单元。 |
| 用途子集 | 按照模型使用目的划分的数据子集,包括预训练、有监督指令微调、人类偏好对齐和基准评测。 |
| 批次 | 具有唯一标识的一组受理数据,采集、加工、质量检查和交付记录通过该标识关联。 |
| 数据集版本 | 具有唯一版本标识,经质量检查和场景验证后冻结的数据成果及其配套交付文件。 |
| 数据卡 | 记录数据集来源、组成、规模、模态、时间范围、加工过程、质量结果、适用用途和使用限制的交付文件。 |
| 质量检查节点 | 设置在数据生产流程中的检查环节,依据质量规则判断数据是否符合进入后续工序或交付的条件。 |
| 定向回流 | 依据质量检查结论、场景验证结论与错例归因结果,结合数据血缘定位受影响的来源、环节、批次与算子,将修订要求送回相应加工环节执行补采、重标或重切,并对处理结果及其下游成果重新检查与验证。 |
面向矿山装备制造领域,建设数据加工生产及运营服务能力,汇聚供需计划、产品工艺设计、制造过程和产品质量业务数据,开展数据治理、标注、合成、增强、质量检查和验证,形成可追溯、可训练、可评测、可交付的数据集。建设专项智能工具链和数据集运营服务管理平台,实施系统集成、训练推理技术服务、场景验证及配套保障,支持数据资源持续更新、质量改进和合规使用。
围绕专业数据供给、标注规则一致性和场景适配开展数据资源调查、治理加工及验证。调查数据来源、业务对象、保存形式、覆盖时间、更新机制和授权条件,形成资源清单;建立标签体系、标注规则、复核及争议处理流程,形成可执行的标注规范;逐场景明确数据需求和验证条件,形成测试用例、验证记录及整改成果。
对历史业务记录、设备过程数据、图纸和工艺文件开展数据盘点,核查覆盖时间、文件数量、有效版本、审核状态、关键字段及保存完整性。图纸与工艺卡按图号、版本、产品或零部件标识建立候选关联,复核变更记录和签发状态后确认配对关系;无法唯一匹配的记录列入异常清单,交由业务人员确认,未经确认不得作为配对监督样本。
选型方案抽取工况、需求、配置及校核结果;焊接数据关联工件、焊缝、焊道和工艺任务;热处理数据关联炉次、工件、材料批次和检验结果;故障数据关联设备、事件时间、诊断和维修记录。对缺失关联分别制定数据补充、编码映射或人工复核措施,保存原始证据、处理记录和关联置信状态。
建立跨系统业务对象标识及映射关系,记录对象类型、统一标识、来源系统、源记录主键、映射依据和规则版本。对一对多、多对一及无法匹配的记录设置复核流程,不覆盖原始主键。统一数据时间格式和时区,分别保留业务发生时间、系统记录时间、采集时间及修正依据。完成关联完整性、唯一性和时间一致性检查后,将合格数据纳入相应数据集;原始数据缺失或粒度不足的,按场景需求组织补采并保留来源记录。
表 1-1 对象标识映射登记表的字段、取值规则与校验方法
| 字段 | 含义 | 取值规则 | 校验方法 | 不合格处置 |
|---|---|---|---|---|
| 统一对象标识 | 跨系统唯一标识一个业务对象 | 按对象类型分段编码,同一对象在各系统中对应同一标识 | 唯一性校验、重复标识比对 | 重复或冲突的挂起,经业务确认后合并或拆分 |
| 对象类型 | 工件、工单、焊缝、焊道、炉次、材料批次、检验批、设备、部件、物料、合同等 | 取自知识本体发布版本的类目 | 与本体版本的类目清单逐项比对 | 类目缺失的提交本体变更申请,审批后补入 |
| 来源系统 | 该条映射记录的数据来源 | 取自数据源登记台账的数据源编号 | 与台账逐条核对 | 未登记来源的记录不予建立映射 |
| 源记录主键 | 来源系统中该记录的主键值 | 原值保存,不覆盖、不改写 | 回源抽样核对 | 回源查不到的标记为失效,暂停使用 |
| 关系类型 | 等同、从属、派生、关联 | 按关系字典取值 | 关系闭合性与方向性校验 | 关系成环或方向矛盾的转人工裁定 |
| 业务发生时间 | 业务事件的发生时刻 | 与系统记录时间、采集时间分别保存 | 与工单执行记录、设备事件比对 | 时间缺失或超出合理区间的进入复核队列 |
| 时区与时间精度 | 时间字段的时区与精度 | 统一记录时区、精度与同步状态,保留原始值 | 抽样复算时间换算结果 | 换算依据缺失的不纳入时序敏感样本 |
| 映射规则版本 | 生成该条映射所用规则的版本号 | 规则发布后绑定,加工过程中不切换 | 与规则库发布记录比对 | 版本不一致的重新执行映射 |
| 映射依据 | 建立该映射所依据的资料 | 记录资料名称、版本与条目位置 | 抽查依据资料的有效性 | 依据缺失的降为待确认,不进入样本构建 |
| 关联置信状态 | 映射成立的把握程度 | 按依据强度分档记录,低于阈值的转人工确认 | 人工抽样复核,统计复核通过率 | 低于阈值且复核未通过的不计入有效映射 |
| 审核状态 | 待审、通过、驳回 | 通过后方可被下游引用 | 审核记录完整性检查 | 未通过的不对下游开放 |
| 生效与失效时间 | 映射关系的有效区间 | 对象发生变更或拆并时登记失效时间 | 区间重叠与断档检查 | 区间冲突的按业务确认结论修订 |
逐系统核对产品、物料、设备、工序及缺陷等对象的代码、名称、定义和使用范围,建立编码映射与差异清单。对工艺卡记录与实际执行记录开展对应检查,识别工序名称、粒度和顺序差异,形成经业务审核的转换规则。焊缝缺陷保留原始描述,增加规范化缺陷类别、部位、程度、检测方法及关联工艺参数。设备报警关联故障诊断和维修证据,区分未确认报警、已确认故障和误报,未经核验不得直接用作故障标签。
标注作业启动前,完成标签体系、标注粒度、标注规则、一致性检查方法和返工条件的编制、评审及发布。每项标签记录定义、适用对象、判定依据、正反例、排除条件和歧义处理方法。标注人员使用同版本规则开展试标,复核结果达到质量要求后进入批量作业。规范未覆盖的对象暂停标注,登记问题并提交业务专家裁决;规则修订后确定受影响样本范围,组织补标或复标。标注、复核、裁决及返工记录关联样本标识、人员、时间和规则版本。
选型数据按使用工况、技术需求、设备配置、计算条件、校核过程和结论组织,保留公式、参数单位、适用范围和专业审核记录。工艺设计数据建立图纸特征与工艺路线、工序参数、工装及检验要求的关联,区分现行、变更和作废版本,记录可复用条件及限制。库存数据保留物料、批次、库位、收发存、订单需求、在途状态和成本期间,分别形成数量与金额指标,支持按物料、项目、时间和业务原因开展分析及场景验证。
建设供需计划、产品工艺设计、制造过程和产品质量四类数据集,每类分别形成预训练、有监督指令微调、人类偏好对齐和基准评测子集。样本记录来源系统及业务对象,按场景、产品类别、部件族、时间和质量状态进行分层统计,识别覆盖不足、分布失衡及重复样本。训练配比和采样规则经实验验证后版本化保存;基准评测子集独立管理,执行跨子集重复检查和隔离控制。
图 1-1 数据关联、标注与验证流程
供需计划、产品工艺设计、制造过程和产品质量数据分别开展来源识别、业务对象核验、数据粒度分析和关联关系建设。对每类数据记录业务主管部门、来源系统、对象标识、关键字段、保存形式、时间范围及更新方式,明确采集任务、加工规则、质量检查和问题处理责任。资源调查结果经业务确认后纳入数据目录,变更时同步更新关联规则和加工任务。
表 1-2 业务数据来源与加工要求
| 业务领域 | 数据来源及对象 | 加工处理 | 质量核验 | 交付规模 |
|---|---|---|---|---|
| 供需计划 | CRM 项目与商机,ERP 需求计划和库存账,SCM 采购计划与履约,WMS 实物库存和批次,LMS 运输记录,历史选型文件 | 建立客户、项目、物料、订单与批次关联;抽取选型需求、配置和校核记录;统一时间字段,分别计算库存数量与金额指标 | 检查授权、关键字段、对象匹配、时间一致性、数量平衡和方案审核依据 | 预训练 276 亿 Token;指令微调 40 万条;偏好对齐 3.2 万组;基准评测 0.4 万条 |
| 产品工艺设计 | PLM 产品结构、零部件、图纸、工艺卡片和变更记录,工序字典及工艺规程 | 校验文件版本与有效性;建立图纸、零部件和工艺卡片关联;抽取尺寸、材料、工序、参数及检验要求 | 检查图文对应、版本一致、配对有效、参数单位和工艺规则;不确定关联转人工复核 | 预训练 70 亿 Token;指令微调 10 万条;偏好对齐 0.8 万组;基准评测 0.1 万条 |
| 制造过程 | MES 工单和工序记录,SCADA 及工业物联网平台过程数据,热处理炉次及温控记录,EMS 能耗数据,设备运维记录 | 关联工单、设备、工件、焊道、炉次及材料批次;处理时间同步、缺失、异常和重复;标注过程事件与工况 | 检查采样粒度、时钟偏差、事件关联、计量单位、序列连续性及异常处理记录 | 预训练 105 亿 Token;指令微调 15 万条;偏好对齐 1 万组;基准评测 0.2 万条 |
| 产品质量 | QMS 检验及质量记录,检测报告、图像和附件,无损检测、硬度检测、售后及维修记录 | 规范缺陷类别、部位、程度和检测方法;关联工艺参数、材料批次、检验对象及维修事实 | 检查检验依据、结论一致性、附件可读性、缺陷定位和证据关联;区分报警与确认故障 | 预训练 164 亿 Token;指令微调 24 万条;偏好对齐 1.6 万组;基准评测 0.25 万条 |
各领域、各用途子集分别计量验收,不用一个领域的超额数量抵补另一领域。
汇聚 CRM 的客户、商机、报价、合同、订单、回款记录,以及获准使用的招投标文件、资质文件和业绩合同;接入 ERP 的组织、人力、物料、采购、销售订单、成本核算、应收应付、凭证、资产及资金数据;接入 SCM 的供应商档案与评估、采购计划与订单、订单下达、供货履约和付款计划;接入 WMS 的仓库、库区、货位、物料、批次及出入库单据;接入 LMS 的物流需求、运单、调度、装卸、取货、送达和运输时间数据。
对历史选型方案建立文档目录,记录项目、客户需求、产品配置、方案版本、审核状态及文件校验值。各数据源在采集前确认字段范围、访问权限、更新机制和责任人;个人、财务及商业敏感信息按授权范围和分类分级策略处理。
库存关联数据分别保留合同签订、需求计划、核算期间、实物收发和运输事件的时间字段,禁止将不同业务含义的时间直接替换。按确定的统计截止时点生成库存快照,记录在途、在库、占用、冻结和已消耗状态。数量指标使用实物计量单位和批次明细,金额指标关联成本期间、计价规则和财务记录。
以销售合同、施工令号、生产批次、客户、供应商和物料标识关联供需计划、库存实物流与资金记录。设置数量平衡、单据衔接和时间顺序校验,对未达账、延迟记账、单位转换及跨期业务分别登记差异原因、处理依据和复核结果,支持库存指标的多维追溯。
历史选型方案按需求条件、产品配置、参数校核、审核结果和后续使用记录组织。将验收、售后工单、故障与维修记录及获准使用的运行反馈关联至方案版本,记录反馈来源、时间、适用条件和可靠性。缺少使用效果证据的方案保留其需求与配置关系,并标明可用于的任务类型;不得补写未经证实的效果标签或将专家推断标记为实际运行结果。
库存样本保留指标计算明细及业务关联,支持按合同、施工令号、批次、客户和供应商追溯超龄、滞留及结构异常的原因。偏好对齐样本在相同需求条件下组织候选配置,按安全约束、适配程度、技术校核、交付条件及可用效果证据开展专家比较,形成排序或成对偏好标签。保存评价依据、专家复核记录和分歧裁决结果;证据不足、条件不可比或存在关键约束冲突的样本不进入合格偏好子集。
建立各系统时间字段的语义映射,分别保存业务发生、单据创建、审核、记账、采集和运输事件时间。库存分析采用明确的统计截止时点和状态转换规则,对延迟记录、补录、冲销及跨期事项保留修正记录。实物数量与库存金额分别计算并保留关联明细,差异通过单据、批次、计价及时间因素逐项核验。
选型效果评价关联验收记录、售后工单及运行反馈,由专家按明确的评价规则开展复核。样本注明评价属于实际测量、历史记录核验或专家判断,记录证据来源、适用工况、评价人员、时间及规则版本。专家评定的偏好标签单独标识;缺乏支持证据的效果结论不写入合格样本。
接入 PLM 的 BOM 编号、工序、变更记录和零部件信息,以及选型方案、工艺图纸、CAD 图纸和工艺卡片。建立文件目录及元数据,记录图号、版本、零部件标识、文件类型、审核状态、签发日期、变更关联和校验值。依据图号、零部件及变更版本生成图纸与工艺卡候选配对,核对业务关联和有效状态后形成配对样本;多候选、版本冲突和缺失文件进入人工复核,保存判定依据。
建立图纸与工艺卡关联表,记录源文件标识、图号、零部件标识、图纸版本、工艺卡版本、匹配方法、复核状态及证据位置。对工艺卡工序名称与执行记录开展比对,按有效工序字典建立映射,保留原始表述、标准代码及差异原因。
原生 CAD 文件与扫描文件分别处理:原生文件提取图元、图层、尺寸标注和文本,扫描文件开展图像质量检查、版面识别和文字抽取。区分现行、历史、作废和变更中版本,关联变更通知及生效时间;训练样本标明版本用途,不将不同版本内容拼接成同一有效工艺。
工艺设计样本建立图纸特征、工序序列和工艺卡字段的关联。图纸特征包括形状、尺寸、材料、公差及技术要求;工序记录包括工序代码、顺序、加工参数、设备、工装和检验要求;工艺卡字段记录值、单位、来源位置及审核状态。逐样本检查特征到工序、工序到卡片的对应关系,确认前后版本一致、关键字段完整、单位正确及技术约束满足要求。配对缺失、关联冲突或专业复核不通过的样本进入整改流程。
按图号、零部件编号和变更版本建立图纸与工艺卡关联,记录匹配规则、冲突情况和人工复核结论。工序分类使用工艺主管部门审核发布的字典,记录代码、名称、适用范围和版本;卡片记录与实际执行记录存在差异时,保存双方原值、差异类型、确认依据和处理结果。
原生图纸采用图元、图层和标注解析,扫描图纸采用图像预处理、版面识别与文字抽取。对关键尺寸、公差、材料和工艺参数执行规则校验及人工复核;低置信度、无法解析和规则冲突的内容进入问题队列,纠正后重新检查。先以代表性样本完成解析、配对、标注和质量验证,再按照生产计划扩大处理规模。
接入 MES 的焊丝牌号、焊丝直径、生产工单、工序及生产进度记录,接入 EAM 的设备台账、设备档案、点检记录、维修工单和作业计划。通过设备标识、工单标识和作业时间建立业务记录关联,核验字段类型、计量单位、时间语义及更新方式,保留来源记录主键和采集批次。
通过 SCADA 接入设备电流、电压、温度、湿度、运行状态及焊接电流、电压、送丝速度、气体流量等过程数据;通过热处理群控系统接入设定与实测温度、电流、电压、加热和冷却时间、冷却水及淬火介质温度等数据;通过 EMS 接入能耗监测和统计数据。
逐设备登记测点、采样周期、量程、单位、数据质量标识和时钟来源,执行连通性、取值范围、时间连续性及异常状态测试。将通过核验的测点纳入采集任务;未接通、缺测或精度不满足要求的测点列入整改清单,完成联调和复测后启用。
天地奔牛现有 15 台焊接机器人,通过 SCADA 系统采集电流、电压、温度和速度等过程参数。对既有采集通道核验设备标识、测点配置、采样周期、时间同步和数据完整性,建立设备、工单、工件及焊道的关联,扩展参数数据与熔池影像、温度数据和检测结果的联合处理能力。
以工件、焊缝和焊道为对象关联焊接过程数据。关联记录包含设备标识、工单、工件标识、焊缝及焊道编号、工艺版本、作业起止时间、参数序列和检测结果。根据作业事件及时间窗口生成候选关联,再结合任务切换、工件流转和工艺记录核验;同一时段存在多工件或多道焊接时,无法唯一确认的数据进入人工复核。保留关联规则、时间偏差、缺失片段和复核结果,支持同类焊道在不同工况下的参数及质量比较。
建立热处理炉次、工单、工件、材料批次和检验结果的关联。记录工艺类型、设定参数、实测曲线、装炉信息、作业起止时间及温度测量条件,关联外观、硬度和其他质量检测记录。逐炉次核验工件清单、过程时间窗口、材料批次及检测对象,检查缺测、重复、错配和版本冲突。无法确认关联的数据保留原始记录并进入业务复核,不以时间相近直接认定同一处理对象。
配置 15 台红外图像采集设备获取焊接熔池影像,配置 6 台在线高温热成像设备用于热处理加热过程测温和图像采集,配置 21 台在线热成像设备,其中 6 台用于热处理淬火后测温和图像采集,15 台用于焊接前温度测量。设备安装后完成测量范围、精度、发射率及环境补偿参数设置,开展校准、时间同步、接口联调和样本核验,记录设备与工位、工件及作业任务的关系。
图像与温度数据保留采集时间、设备标识、测量区域、配置版本和质量状态。工单数据同时保留实际作业与报工时间,使用任务事件及经核验的时间窗口关联过程数据;存在延迟报工时记录偏差依据,不覆盖原始时间,不以固定偏移量代替逐任务核验。
热处理样本关联炉次工艺曲线、工件及材料批次、工艺参数、外观检测和硬度结果,支持工艺条件与质量表现的关联验证。焊接样本关联焊道级参数序列、熔池影像、测温数据和缺陷检测结果,保存多模态同步关系、缺陷位置及专业复核依据。设备诊断样本关联工况片段、报警事件、故障诊断、维修工单和复查结论,用于诊断规则与模型的离线回放及效果比较。各类样本记录有效时间范围、数据完整性、关联可信状态和不适用条件,关联未确认的样本不得作为确定性监督标签。
按炉次、工件、焊缝、焊道和工单建立过程档案,关联设备、材料、工艺版本、过程参数、图像及质量结果。新增感知设备完成安装、校准和联调后,以代表性设备和任务开展试采,检查覆盖范围、时间同步、质量状态及业务关联,再按实施计划完成全部配置设备的接入和验证。
时序数据保留原始采样时间及周期;工单保留实际作业与报工事件。对时钟偏差、传输延迟和业务补录分别识别、记录和修正,修正前后数据及规则可追溯。跨模态关联设置时间容差和事件校验,超出条件的数据转人工复核,禁止无依据补齐或强行配对。
接入 QMS 的制程检验、进厂检验、出厂检验、成品检验和质量台账,以及质量报告、检验数据、产品质量档案和质量知识资料。接入 SOS 的设备健康状态时序数据、运维计划、报警处置、售后工单和备件消耗记录,以及设备档案、维修记录、诊断报告和故障案例。
以产品、设备、工件、批次、检验单和服务工单建立数据关联,保留检测方法、检测时间、检验依据、结论及附件。采集前确认使用权限与数据分类分级,处理过程中保留原文和标准化字段,确保质量结论能够回溯至原始证据。
对缺陷记录建立标准化分类与属性,覆盖气孔、裂纹、咬边、余高、弧坑、焊脚偏差等对象,记录缺陷位置、尺寸或程度、检测方法、判定依据及审核结果。保留原始文本和图像,将规范化标签与原始证据关联。缺陷类别存在歧义、检测结论冲突或证据缺失时,提交专业人员复核并登记裁决结果。
纸质及扫描检测报告按报告标识、检验对象、批次、日期和页码登记,检查扫描完整性、清晰度、旋转、遮挡及附件缺页,达到可识别条件后开展文字与表格提取;无法可靠读取的内容转人工核对,不以推测补写检测结果。
无损检测与硬度检测报告保留原件或原始影像,结构化提取检验对象、检测位置、方法、设备、测量值、单位、判定标准和结论。手写批注与印刷内容分区提取,人工核对关键数值及结论,记录来源页码、区域位置、识别结果和复核人员。
报警数据通过设备标识、事件时间和处置工单关联诊断、维修、更换备件及复查结果。区分已确认故障、误报、已处理但原因未定和待确认事件。故障标签须具备相应诊断或维修证据;不能确认的事件保留状态,不强制归入故障类别。
产品质量数据集交付预训练数据 164 亿 Token、指令微调数据 24 万条、偏好对齐数据 1.6 万组和基准评测数据 0.25 万条。按缺陷类型、产品及部件类别、检测方法、工况和时间范围统计样本覆盖情况,分别检查各用途子集的数量、重复、完整性、准确性和适用性。生产计划同时安排数据补充、专业标注、证据复核和质量检查,合格数据方可纳入交付计量。
质量数据加工前完成缺陷分类、属性、判定规则和复核要求的评审发布。纸质资料执行影像质量检查、版面分析、字段提取和人工核验;未适配模板及手写内容进入专门复核流程,关键参数与检测结论逐项核对原始证据。
报警、处置工单、更换备件和复查结论通过设备、事件和时间窗口关联,记录关联依据及复核状态。无法确认的事件保留未确认标识,与已确认故障样本分开管理。数据卡记录来源、处理方法、样本构成、质量结果、使用限制和不适用场景;问题样本完成整改复核后再纳入发布版本。
表 1-3 数据来源与接入核验要求
| 数据来源 | 接入对象 | 关联与加工要求 | 接入核验内容 |
|---|---|---|---|
| CRM系统 | 客户、商机、报价、合同、订单、回款及相关文档 | 按项目、客户、合同和订单标识关联结构化记录与附件,登记选型方案及其业务对象 | 核验主键唯一性、附件对应、授权范围和更新方式,抽样检查合同与订单关系 |
| ERP系统 | 组织、人力、物料、采购、销售、成本、应收应付、凭证、资产和资金数据 | 区分业务发生时间与核算期间,保存数量、金额、币种、单位和统计范围 | 核验账期、单据状态、冲销关系及统计口径,开展业务对账 |
| SCM系统 | 供应商、采购计划、采购订单、履约及付款计划 | 关联供应商、物料、订单行与履约节点,记录计划与实际到货时间 | 核验订单行标识、分批交付、变更、退货及付款节点 |
| QMS系统 | 制程、进厂、出厂、成品检验、质量台账及报告 | 关联检验批、工件、材料批次和工序,规范缺陷类别、测量值和判定结果 | 核验检验标准版本、测量单位、报告有效性及复检记录 |
| WMS系统 | 仓库、库区、货位、物料、批次及出入库单据 | 关联实物批次、订单与生产对象,分别记录库存数量及其统计时点 | 核验批次流转、库存状态、单位换算、退料及盘点调整 |
| MES系统 | 焊丝信息、生产工单及生产进度 | 关联工单、工序、工件、焊道与炉次,分别保存业务事件时间和报工时间 | 核验工序状态、对象标识、报工延迟及记录修订 |
| LMS系统 | 物流需求、运单、调度及取货、装卸、送达信息 | 关联订单、发货计划与运单节点,记录在途状态和事件时间 | 核验拆单合单、异常签收、回单及运输节点完整性 |
| EMS系统 | 能耗监控、统计及分析数据 | 按设备、计量点和时间区间关联生产对象,保留计量单位及累计值属性 | 核验采样周期、计量边界、累计值复位、缺测和异常跳变 |
| SOS系统 | 健康状态、运维计划、报警处置、售后工单、备件及相关文档 | 关联设备、报警事件、处置工单、维修部件和复查结论,区分报警与确认故障 | 核验事件时间、故障确认依据、维修闭环和标签来源 |
| EAM系统 | 设备台账、档案、点检、维修工单和作业计划 | 建立设备与部件层级,关联点检、维修和更换记录 | 核验设备编码、部件变更、维修状态及历史记录连续性 |
| PLM系统 | BOM、工序、变更、零部件、选型方案、图纸与工艺卡片 | 按图号、零件编号和有效版本建立配对关系,保存变更链与有效状态 | 核验文件可读性、版本有效性、图纸卡片对应关系及配对可信度 |
| SCADA系统 | 设备状态、电流、电压、温度、湿度及焊接过程参数 | 保存测点、设备、采样时间、单位和质量标志,并与工单、工件或焊道建立关联 | 核验采样周期、时间同步、量程、缺测、重复及采集异常 |
| OA系统 | 管理制度和合同文档 | 按文档、条款、版本、发布部门和适用范围组织,保留引用与失效关系 | 核验文档授权、现行状态、附件、签发及条款完整性 |
| 久其系统 | 营业收入、利润、成本及资产负债等指标 | 保存指标定义、统计期间、组织范围、计量单位和来源口径 | 核验指标口径、汇总层级、期间一致性及修订记录 |
| 主数据管理平台 | 组织机构、人员和物料编码 | 以有效主数据建立跨系统映射,记录编码版本、生效时间及变更关系 | 核验编码唯一性、有效状态、审批记录和映射冲突 |
| 热处理群控系统 | 温度、电流、电压、加热冷却时间及相关过程数据 | 关联炉次、工件、材料批次、工艺曲线和检验结果 | 核验测点含义、采样时间、炉次边界、曲线完整性及单位 |
| 安全监管平台 | 经授权的安全监管和生产监控数据 | 采用单向只读方式接入,按批准范围登记业务归属和使用限制 | 核验接口范围、访问权限、字段授权及接入日志 |
| 离线资料 | 文档、图片、工程图纸、技术书籍、票据和音视频 | 登记来源与授权,分类解析并关联业务对象,保留原件与加工记录 | 核验文件完整性、清晰度、版本、重复及抽取准确性 |
| 新增感知设备 | 15 台红外图像采集设备的熔池影像;6 台在线高温热成像设备的热处理加热测温与图像;21 台在线热成像设备的热处理淬火后和焊接前测温数据 | 按设备、工位、工件、炉次或焊接任务建立关联,记录采集时间、测量区域、配置和校准版本 | 核验安装位置、视场、测量范围与精度、发射率及环境补偿、时间同步、SDK 或工业接口和采集完整性 |
表 1-4 数据来源、加工用途与验证场景
| 数据来源 | 适用业务范围 | 数据加工用途 | 验证场景 |
|---|---|---|---|
| CRM | 供需计划 | 商机与合同文本;选型问答指令样本;经证据支持的选型偏好样本;独立基准评测样本(选型要素识别) | 产品智能选型、库存控制智能化、标书智能问答、合同合规智能审查 |
| ERP | 供需计划 | 经授权并完成敏感信息处理的经营记录;经营分析指令样本;独立指标一致性评测样本 | 库存控制智能化、决策数据智能问答、合同合规智能审查 |
| SCM | 供需计划 | 采购与履约记录;补货与履约问答指令样本 | 库存控制智能化、决策数据智能问答 |
| QMS | 产品质量 | 检验记录与质量报告;缺陷判定问答指令样本;判定分歧偏好样本;独立基准评测样本(判定一致性) | 焊接过程控制智能监控、刮板输送装备健康智能诊断、技术标准智能问答 |
| WMS | 供需计划 | 出入库流水;库存问答指令样本 | 库存控制智能化 |
| MES | 制造过程 | 工单与工序流转记录;工艺执行问答指令样本 | 板材备料工艺智能设计、焊接过程控制智能监控、热处理过程智能监控 |
| LMS | 供需计划 | 运单与节点时间记录 | 库存控制智能化 |
| EMS | 制造过程 | 能耗时序摘要;独立基准评测样本(能耗异常判定) | 热处理过程智能监控 |
| SOS | 产品质量 | 售后工单与维修记录;故障问答指令样本;处置方案偏好样本 | 刮板输送装备健康智能诊断 |
| EAM | 产品质量 | 设备台账与点检记录;点检与维修问答指令样本 | 刮板输送装备健康智能诊断 |
| PLM | 产品工艺设计 | 经版本核验的图纸与工艺记录;经复核的图纸和工艺卡配对样本;工艺编制指令样本;经专家裁决的方案偏好样本;独立要素识别与计算评测样本 | 产品智能选型、板材备料工艺智能设计、技术标准智能问答 |
| SCADA | 制造过程 | 过程参数时序摘要;参数异常问答指令样本;独立基准评测样本(异常识别) | 焊接过程控制智能监控、热处理过程智能监控、刮板输送装备健康智能诊断 |
| OA | 管理制度、合同及业务管理 | 经授权的有效制度和合同文本;制度检索与问答样本;独立条款出处和适用性评测样本 | 管理制度智能问答、合同合规智能审查、标书智能问答 |
| 久其系统 | 供需计划 | 经营指标序列;指标口径问答指令样本;独立基准评测样本(指标定义与计算一致性) | 决策数据智能问答 |
| 主数据管理平台 | 四个业务领域共用 | 业务对象标识、编码映射、版本与有效状态校验 | 各验证场景的业务对象识别与关联核验 |
| 热处理群控系统 | 制造过程 | 炉次曲线摘要;配方与偏差问答指令样本;独立基准评测样本(工艺偏差判定) | 热处理过程智能监控 |
| 安全监管平台 | 制造过程 | 单向获取且获准使用的安全与生产监控记录,经分类分级处理后形成授权用途的数据样本 | 刮板输送装备健康智能诊断的授权工况信息核验 |
| 离线资料 | 四个业务领域 | 经权属和授权核验的文档、图像、图纸、音视频内容;经质量检查的问答及结构化样本;独立来源核验评测样本 | 技术标准智能问答、标书智能问答、管理制度智能问答、板材备料工艺智能设计 |
| 新增感知与检测设备 | 制造过程、产品质量 | 熔池影像与温度时序;工况判读问答指令样本;独立基准评测样本(缺陷与温度判读) | 焊接过程控制智能监控、热处理过程智能监控 |
样本记录来源系统、源记录或文件标识、采集批次、处理任务、数据集版本及授权信息。数据从采集到加工、质量检查和验证的关系纳入血缘管理,支持按样本追溯来源及处理过程。
建立数据需求和采集任务清单,逐项记录业务用途、来源、字段、授权、更新频率、加工任务及验证方式。采集范围覆盖项目确定的数据资源和服务任务,新增或调整对象履行需求确认与变更审批。场景验证发现数据问题时,根据样本血缘、共享规则和版本依赖确定影响范围,制定补采或返工任务;涉及共用源数据、映射规则或模型配置的,同步检查关联数据集和场景。整改后完成回归验证并记录关闭结果。
选型验证覆盖需求解析、参数计算与验算、配置推荐及方案生成。数据样本记录矿井产量、采高、工作面长度、倾角、配套设备等需求条件,关联候选产品配置、计算参数、校核结果和审核记录。对公式及规则登记名称、版本、输入输出、单位、适用条件和约束,核验输送能力、运行阻力、驱动功率、刮板链速度及链条安全系数等计算结果。
构建包含需求工况、历史配置、计算过程、校核结果和专业审核结论的指令样本,并建立相同需求下候选配置的成对偏好样本。候选配置首先满足适用规则和安全约束,再按设备适配、性能、可制造性及使用证据开展比较。模型推荐结果经公式与规则校验,对关键计算和配置冲突设置人工复核,不以语言模型判断替代工程计算。
从 CRM 项目记录和 PLM 选型方案中提取需求条件与历史配置,从方案文档、计算书和审核记录中提取校核过程及结论。核对字段单位、配置版本、适用工况和审核状态后形成关联样本。偏好标签依据有效验收记录、售后工单、运行反馈和专家评审形成,分别标识证据类型、评价条件和不确定项。专家意见不一致时开展复核裁决,保留原始意见和最终依据;无充分证据的样本不标记为确定优劣。
图 1-2 产品智能选型样本构建与验证流程
表 1-5 场景数据需求与样本结构
| 场景 | 数据对象与样本结构 | 主要来源 | 加工与核验要求 |
|---|---|---|---|
| 产品智能选型 | 工况、候选配置、计算条件、校核结果及候选方案偏好 | CRM 关联项目资料、PLM 选型资料、校核与运行反馈 | 统一参数和单位,关联配置版本与证据,复核校核结果及偏好标签 |
| 板材备料工艺智能设计 | 图纸要素、零件特征、材料、工序序列及工艺卡片字段 | PLM 图纸、工艺文件、有效工序字典 | 按图号、零件和版本配对,检查要素完整性及工序约束,低置信结果转人工复核 |
| 库存控制智能化 | 物料、需求、采购履约、出入库、在途状态和库存时序 | ERP、SCM、WMS、LMS | 保留数量与金额口径,统一统计时点,关联订单和批次,核验需求消耗及库存变化 |
| 热处理过程智能监控 | 炉次、工件、材料批次、工艺曲线及质量检测结果 | 热处理群控、MES、QMS 及相关检测设备 | 关联炉次边界和测点时间,校验曲线完整性、温度单位及检验结果对应关系 |
| 焊接过程控制智能监控 | 工件、焊道、过程参数、影像及缺陷标签 | SCADA、MES、感知设备及质量检测记录;焊接前温度测量对应 15 台在线热成像设备,熔池影像对应 15 台红外图像采集设备 | 按焊道关联参数和影像,保存工艺条件、时间映射、缺陷位置及复核结论 |
| 刮板输送装备健康智能诊断 | 设备部件、工况分段、状态参数、报警及维修结果 | SOS、EAM、点检巡检和失效分析资料 | 区分报警与确认故障,关联维修及复查证据,按设备和工况分层组织样本 |
| 管理制度智能问答 | 问题、答案、制度条款、适用对象及有效版本 | 授权使用的现行制度及历史版本 | 解析条款层级与引用关系,检查答案出处、适用范围和版本状态 |
| 技术标准智能问答 | 问题、条文、参数限值、单位及适用条件 | 有效技术标准、设计手册和企业标准 | 关联标准版本,校验参数及单位,记录引用链和替代关系 |
| 标书智能问答 | 问题、采购要求、响应资料、资质证据及原文位置 | 授权使用的招标文件、历史投标资料和企业资质资料 | 区分具体项目、有效期及证据来源,建立条目检索与回答核验样本,防止跨项目混用 |
| 决策数据智能问答 | 问句、指标定义、统计期间、取数路径及计算结果 | 久其系统及经授权的业务系统指标数据 | 统一指标、单位和组织范围,保留数据更新时间及计算过程,校验结果可追溯性 |
| 合同合规智能审查 | 合同条款、审查事项、风险类别、适用规则及复核结论 | 授权合同、有效制度规则和专业审查记录 | 按条款定位风险,保留规则版本和证据,冲突及证据不足事项转人工复核 |
表 1-6 场景数据需求清单的记录字段与取值要求
| 字段 | 取值要求 | 来源 | 核验方法 |
|---|---|---|---|
| 场景编号与名称 | 取招标文件场景验证服务要求列明的场景名称 | 招标文件场景条目 | 与场景清单逐项比对,不增不减 |
| 业务任务 | 一句话写明该场景要完成的业务动作 | 业务部门确认 | 业务部门书面确认记录 |
| 输入条件 | 执行该任务所需的业务输入及其取值范围 | 现行业务流程调查 | 与业务流程记录核对 |
| 目标输出 | 任务应产生的结论形态及其表达方式 | 业务部门确认 | 与验证用例的期望输出一致 |
| 业务对象 | 该场景涉及的对象类型及其层级 | 知识本体发布版本 | 与本体类目比对 |
| 样本字段 | 逐字段给出名称、类型、单位、取值域、必填性 | 数据源字段映射表 | 字段级比对与空值率统计 |
| 样本量 | 该场景所需样本的条数或组数,按生产计划分配 | 数据集分域指标与验证用例规模 | 与分域承诺量核对,不以其他领域抵补 |
| 时间范围 | 样本的业务时间起止 | 业务部门确认与时效占比要求 | 时效占比统计 |
| 来源系统与授权 | 数据来源及其授权范围、有效期 | 数据源登记台账 | 授权文件有效性核验 |
| 模态构成 | 文本、图像、时序、视频各自的条数占比 | 采集与加工计划 | 按数据卡字段统计 |
| 质量要求 | 适用的质量维度及其判定规则 | 质量规则库发布版本 | 规则可执行性检查 |
| 标注规范引用 | 适用的标注规范名称与版本 | 数据标注规范 | 规范版本与标注任务配置一致 |
| 验证用例编号 | 与该需求对应的验证用例标识 | 验证用例集 | 需求与用例双向可追溯 |
| 评价指标与通过判据 | 指标名称、计算规则与通过阈值 | 评测方法文件 | 指标可复算,判据有数值或判定规则 |
| 生产任务编号 | 承接该需求的加工任务标识 | 加工任务池 | 需求、任务、批次三者可追溯 |
合同审查样本按合同类别、条款类型、审查事项和风险类别组织,关联有效审查规则、业务制度及专业复核记录。核验条款定位、适用条件、规则版本和证据完整性,形成风险识别、依据检索、审查结果展示及人工复核的验证用例。对证据不足、规则冲突或超出适用范围的事项保留状态并转交专业复核,记录处理结果和版本变化。
管理制度、技术标准和标书问答保留文档名称、版本、有效状态、条款或页码及证据片段,答案与引用内容逐项核对。决策数据问答关联指标定义、组织范围、统计期间、查询条件、取数路径及计算过程,确保结果可复算。设置无有效证据、版本冲突、越权查询和问题歧义测试用例;证据不足时提示缺少的条件,不生成无依据答案。独立评测检查回答正确性、引用准确性、适用性和权限控制,保存输入输出及复核记录。
建立数据质量指标、检查规则、测试数据和结果记录,覆盖保真度、完备性、规整性、均衡性、可用性和可信性要求。对各数据集版本组织质量检查和正式评测,保存检查范围、计算方法、样本及运行记录。内部检查与正式评测采用明确且可比较的指标定义,差异逐项核查原因。首轮评测发现的问题形成整改清单,明确责任、措施和完成时间;整改后复测并记录关闭结果,交付正式评测报告及完整的数据质量档案。
建设目录标识、身份登记及标准接口对接能力,建立项目元数据与接入字段的映射,配置标识登记、身份注册、接口认证、调用审计和异常处理机制。对外接口完成格式、权限、错误处理和数据一致性测试,交付接口文档、映射表及测试记录。外部服务具备接入条件后,开展标识注册、解析及联调验证;外部条件尚未具备时,完成项目侧接口实现和模拟验证,记录外部依赖、待联调事项及后续实施安排。
数据库、安全软件、云平台、服务器、存储、网络、芯片等软硬件整体国产化比率不低于 80%。建立软硬件清单,逐项记录名称、型号或版本、生产厂商、国产化属性、证明材料和部署位置。按确定的统计范围和计算规则测算比率,核对计数依据及配套证明,完成操作系统、数据库、芯片、接口和密码组件的适配测试。交付国产化清单、测算记录、证明材料和适配测试结果,实施变更后重新核验。
梳理数据要素市场化配置、高质量数据集建设、人工智能产业发展、新型信息基础设施、数据安全及绿色低碳等领域的法律法规、产业政策、专项规划、技术导则、建设指南和评价标准,形成不少于 25 个文件的政策与标准清单。逐份登记发布机构、文件编号、发布日期、生效及有效状态、适用范围、实施事项和责任岗位,形成梳理报告。对文件更新、替代和废止建立跟踪机制,评估对建设、运营及交付成果的影响,经审核后更新实施要求及相关记录。
数据集发布前完成来源授权、权属材料、数据质量、使用范围和交付条件核验,登记数据集名称、版本、内容范围、质量结果、许可条件和使用限制。对外服务按批准的产品及服务目录执行,保留挂牌、订单、授权、交付、计量、结算和审计记录。成本归集记录关联生产任务、资源投入和数据集版本,支持企业开展数据资源管理及相关核算工作。涉及权利、会计及交易事项,由相应责任主体依据有效材料履行审核和确认程序。
项目建设目标包括协同汇聚、平台技术、数据质量、标准生态、场景赋能及服务与安全六个方面。建立数据资源协同机制,完善数据加工与运营能力,形成质量可检验的数据集、专业人员及制度支撑,完成场景验证和安全保障。各项目标分别落实到实施任务、交付成果和验收记录。
建立行业数据协同汇聚机制,整合企业内部、产业链上下游及经授权使用的公共数据资源,建设行业数据资源库。按业务场景识别数据需求,以知识本体及对象关系组织资源目录,明确参与单位、数据责任、授权条件、共享方式和更新要求,形成多方参与的数据资源协同工作机制。
企业内部数据汇聚按实施单位、业务对象和来源系统组织,指定数据接口人,确认字段含义、授权范围及更新频率。外部数据在接入前核验提供方权限、许可范围、使用目的和有效期限。数据源登记后按批次受理,每批次保留来源、授权、采集时间、数据范围、处理记录和质量状态;许可失效或授权变化时暂停相应使用并开展影响处置。
表 1-7 数据源登记台账的字段、取值规则与维护要求
| 字段 | 取值规则 | 维护责任 | 更新时机 | 核验方法 |
|---|---|---|---|---|
| 责任部门与接口人 | 记录责任部门、岗位及获准用于项目协作的接口人姓名和工作联系方式,按最小必要原则控制访问 | 来源部门 | 人员或职责变动时更新 | 核对部门授权和接口人确认记录,职责变化时同步更新 |
| 来源系统或资料名称 | 取系统正式名称或资料正式名称 | 数据管理岗 | 登记时填写,更名时同步 | 与资产清单核对 |
| 授权范围 | 写明可用于的业务用途与数据范围 | 数据管理岗维护,来源单位或权利主体审核确认 | 授权变更时更新 | 核对授权主体、用途、数据范围、有效期和限制条件,确认台账与有效授权材料一致 |
| 许可条件与有效期 | 记录使用限制、保密要求与到期日 | 数据管理岗维护,来源单位或权利主体审核确认 | 许可变更或续期时更新 | 到期前复核,失效即暂停使用 |
| 授权范围 | 写明可用于的业务用途与数据范围 | 管理单位批准 | 授权变更时更新 | 授权文件与台账一致 |
| 许可条件与有效期 | 记录使用限制、保密要求与到期日 | 管理单位批准 | 许可变更或续期时更新 | 到期前复核,失效即暂停使用 |
| 接入方式 | 数据库只读抽取、接口调用、文件通道、测点订阅、离线录入 | 采集实施岗 | 接入方案变更时更新 | 与接入配置一致 |
| 更新频率 | 按实时、按日、按周、按批次记录 | 采集实施岗 | 调度调整时更新 | 与调度配置及实际作业记录比对 |
| 批次受理记录 | 记录每批次的采集时间、数据范围、对账结果 | 采集实施岗 | 每次采集作业结束 | 核对记录数、文件数、校验值和关键业务汇总,超出容差的批次隔离调查,确认原因并完成补采或重采后复核 |
| 使用限制 | 出域、留存期限、加工限制 | 安全管理岗 | 策略调整时更新 | 出域记录与限制一致 |
| 批次受理记录 | 记录每批次的采集时间、数据范围、对账结果 | 采集实施岗 | 每次采集作业结束 | 对账差异超范围的挂起复采 |
| 状态 | 在用、暂停、终止 | 数据管理岗 | 状态变化时更新 | 暂停与终止的数据源无新增取数记录 |
针对十一个验证场景分别明确业务对象、字段、时间范围、样本结构和质量要求,形成场景数据需求清单,并据此配置采集与加工任务。通过知识本体定义对象、属性和关系,将跨系统数据映射到统一业务语义,建立可查询、可追溯的对象关联和知识检索能力。
建设不少于 9 类 25 项数据集加工生产专项智能工具链,实施多模态数据治理、智能标注、数据合成和质量验证,配套建设数据集运营服务管理平台,形成数据生产、管理、发布与服务的持续运行能力。
对 25 项工具分别明确输入数据、处理规则、输出结构、调用接口、权限、执行日志及验收用例。工具共用任务调度、版本管理、质量规则、血缘登记和审计服务,按依赖关系分批部署和验证。工具调用保留任务标识、数据及规则版本、运行参数、执行结果和异常记录,支持失败重试、结果复核与定向回流。
完成数据集运营服务管理平台 16 项功能模块建设,并实现平台服务与 SLA 保障能力。对各模块分别开展功能设计、业务流程配置、权限设置、接口联调及测试,提供相应功能界面、操作流程和验收证据。服务保障覆盖运行监测、事件响应、问题处理和服务报告,形成可持续运营能力。
通过多模态数据对齐和元数据管理统一处理文本、图像、时序及视频数据;通过预标注、主动学习、规则标注和一致性校验支持标注生产;通过受控生成、场景模拟和文本重写形成合成及增强数据。合成样本单独记录生成来源、方法、模型及规则版本,并按用途子集执行比例控制和质量核验。基准测试数据集采用独立受控数据,禁止训练、合成或增强结果泄漏至基准测试数据。
表 1-8 合成与增强数据的登记字段与控制规则
| 登记字段 | 取值规则 | 控制规则 | 核验方法 |
|---|---|---|---|
| 生成方法 | 受控生成、场景模拟、文本重写、数据增强,逐条标明 | 方法须在数据合成方案中列明并经评审 | 与方案登记的方法清单比对 |
| 生成来源样本 | 记录种子样本的批次号与对象标识 | 种子样本须为已通过质量检查的样本 | 回溯种子样本的质量结论 |
| 生成来源样本 | 记录种子样本的批次号与对象标识 | 种子样本通过质量检查,授权范围允许相应加工及生成用途,且不含受保护的基准评测内容 | 回溯种子样本的质量结论与授权记录 |
| 规则或模板版本 | 记录生成规则、提示模板的版本号 | 版本在作业启动时绑定,过程中不切换 | 与规则库发布记录比对 |
| 生成参数 | 记录采样参数、长度限制、约束条件 | 参数随批次留存,不逐条改动 | 抽样复现生成结果 |
| 生成参数 | 记录采样参数、随机种子、长度限制、约束条件和实际生效配置 | 批次绑定参数版本,样本记录其实际使用的配置;参数变更时建立新任务版本,不覆盖原记录 | 核对任务配置和运行日志,在保存环境下复测并记录结果差异 |
| 人工复核结论 | 通过、修改后通过、废弃 | 按用途、生成方法和风险分层复核,关键业务参数及安全相关结论执行专项复核;抽检不合格时扩大检查范围并隔离受影响批次 | 复核记录完整性与一致率统计 |
| 占比上限 | 按用途子集分别给定,取值写入数据合成方案 | 批次入库时校验,超出上限的部分不予入库 | 按数据卡字段统计批次与累计占比 |
| 基准测试数据集隔离 | 基准测试数据集不接受合成与增强样本 | 入库前执行来源标识检查与近重复检测 | 检出泄漏即作废该基准版本并重建 |
| 基准测试数据集隔离 | 基准测试数据集不接受合成与增强样本 | 入库前执行来源标识检查与近重复检测 | 发现泄漏后立即停止受影响基准版本使用,定位污染范围,替换受影响样本,重新冻结版本并对相关评测结论重新验证 |
四类业务数据集分别达到各用途子集的交付数量和质量要求,覆盖文本、图像、时序、视频等超过 3 种模态,多模态数据条数占比不低于 40%,近 3 年内时效性数据条数占比不低于 40%。落实保真度、完备性、规整性、均衡性、可用性和可信性要求,按适用评测规范完成质量检查、正式评测及缺陷整改复测。
表 1-9 数据集交付指标与核验方法
| 指标 | 交付指标 | 计量与核验方法 |
|---|---|---|
| 预训练数据 | 合计 615 亿 Token;供需计划 276 亿、产品工艺设计 70 亿、制造过程 105 亿、产品质量 164 亿 | 固定分词规则和工具版本,按有效交付数据计量,逐业务域登记并核对,保留计算记录 |
| 指令微调数据 | 合计 89 万条;四业务域分别 40 万、10 万、15 万、24 万条 | 按有效指令样本计量,保存任务、输入输出及必要上下文,执行重复检查和质量核验 |
| 强化学习偏好数据 | 合计 6.6 万组;四业务域分别 3.2 万、0.8 万、1 万、1.6 万组 | 按完整有效偏好组计量,核验共同任务条件、候选内容、偏好结论及依据 |
| 基准测试数据 | 合计 0.95 万条;四业务域分别 0.4 万、0.1 万、0.2 万、0.25 万条 | 独立冻结测试样本、答案及判分规则,检查训练隔离、重复及泄漏风险 |
| 数据模态 | 覆盖文本、图像、时序、视频四类 | 根据实际数据结构及模态标记统计,检查文件内容与元数据一致性 |
| 多模态条数占比 | 不低于 40% | 以纳入计量范围的合格多模态条目数除以合格条目总数;固定条目定义、统计范围和去重规则,不将 Token 数与条数直接相加 |
| 近 3 年内时效性数据条数占比 | 不低于 40% | 按数据原始产生时间及统计截止日核验,保留时间证据;采集、转换或复制时间不得替代原始产生时间 |
| 数据质量 | 保真度、完备性、规整性、均衡性、可用性、可信性达到规定要求 | 执行统一指标定义和质量控制规则,完成正式评测及整改复测,保存可复算的证据 |
多轮样本保留完整任务上下文与确定的样本单位,不以拆轮重复放大计量。
各业务数据集按用途子集制定分期生产计划,分别登记目标数量、合格数量、缺陷数量和待补数量。阶段核验未达计划时,分析数据来源、加工产能及质量损耗,落实补采、补标和资源调整,安排后续批次补足。最终按各业务域及用途子集分别验收,不通过改变计量规则、重复归集或跨业务域抵销完成指标。阶段目标不足的纠正措施纳入批准的项目计划并满足合同交付节点;发生计划变更时履行审批。
数据加工质量控制与正式评测使用一致的指标定义、计算规则、适用条件和证据要求。将质量指标配置到相应加工环节,对输入、过程和输出执行检查并记录结果;发现偏差时定位受影响批次,组织整改和复核。正式评测结论与过程检查存在差异的,核查样本范围、规则版本和计算过程,完成问题处置后重新验证。
吸引不少于 5 家数据企业、高校或科研院所参与数据集建设,建立不少于 50 名专家的数据标注专家库,形成覆盖数据采集、标注和质量检查的专业人才支撑体系。明确参与任务、人员能力要求、工作职责、成果要求和协作机制,并对参与过程及成果进行记录和考核。
按建设任务组织参与单位开展协同工作,明确任务负责人、实施内容、交付成果及知识产权安排。专家库执行申请、资格审核、专业分类、任务分配、履职评价和退出管理;采集、标注及质检岗位分别建立能力要求、培训内容和考核规则。任务分配与质量复核相互制约,过程记录与成果关联保存。
专家库按专业领域、实践经验和履职能力组织人员入库,登记资格材料、擅长领域、可承担任务及利益冲突信息。按照任务对象和专业要求派工,对规则评审、标注争议及质量复核实施回避和独立复核,参与生产或存在利益关联的人员不得独立完成同一事项的最终裁决。
建成的数据集支撑不少于 11 个行业细分任务场景,围绕研发设计、中试验证、生产制造和经营管理开展数据适用性验证及模型能力评测。按场景建立任务、数据、指标和用例的对应关系,记录模型及数据版本,量化验证结果,并将质量缺陷和覆盖不足转化为后续数据整改任务。
实施十一个场景的数据集验证,完成数据准备、验证环境配置、测试样本及用例设计、验证执行、结果分析和整改复测。各场景逐项验证相应业务能力,保存数据版本、模型版本、规则版本、输入输出及指标计算记录。对验证未通过的事项分析数据质量、样本覆盖、标注、模型或环境原因,形成整改任务并复测。交付验证方案、用例、运行记录、验证报告和问题关闭记录。
利用模型评测结果识别数据质量缺陷、覆盖盲区、歧义标注及难度分布问题,关联数据血缘定位受影响批次,形成包含对象、原因、处理要求和复核条件的整改任务。对修复后的数据重新检查并开展回归评测,在一致的测试条件下比较不同数据及模型版本的表现,记录指标变化和影响因素。
表 1-10 场景验证任务与成果
| 类别 | 场景 | 验证任务 | 交付记录 |
|---|---|---|---|
| 专业场景 | 产品智能选型 | 验证需求解析、缺失信息提醒与校验;计算与验算输送能力、运行阻力、驱动功率、刮板链速度和链条安全系数;验证配置推荐、方案规格书与报价配置清单生成、编辑确认及版本留痕 | 需求解析结果、计算明细、规则校验、配置与方案输出、编辑及版本记录 |
| 专业场景 | 板材备料工艺智能设计 | 验证 PLM 任务与图纸接收、工艺卡片及工序附图生成、工艺变更修订、规则库与设备台账维护、应急工艺通道;验证 DWG/DXF 及 STP/STEP 批量识别、图纸要素提取与在线预览、PDF 导出与打印;对全部识别通过后生成的工艺卡片及工序附图逐项核验内容准确性 | 任务及图纸版本、要素识别明细、卡片与附图、专业逐项核验、变更记录、导出打印测试 |
| 专业场景 | 库存控制智能化 | 验证可配置库存指标及多维穿透;库存评级与健康诊断;全周期库存预测及风险预警;差异化物料需求预测;安全库存动态测算、智能补给及跨分厂调拨建议 | 指标计算及对账、分类评价、预测与实际对比、预警、补给和调拨测试记录 |
| 专业场景 | 热处理过程智能监控 | 验证结合目标链轮特征的历史工艺检索与推荐、工艺参数区间优化、链轮齿轨刮板感应淬火及调质生产线质量分析;分析外观缺陷、硬度异常与加热功率、温度及淬火介质参数的关联 | 炉次与样本关联、检索推荐、参数优化、缺陷与硬度分析、追溯结果 |
| 专业场景 | 焊接过程控制智能监控 | 验证电流、电压、预热及层间温度、焊接与送丝速度、气体流量、焊道类型等采集;熔池视频和焊缝图像缺陷检测;时序与视觉联合质量评估及预警干预判定;不同焊道、板厚和材质的参数优化;参数影像与检测结果追溯;工艺知识库 | 采集及同步记录、缺陷检测明细、质量评估与预警判定、参数推荐、关联追溯、知识库验证记录 |
| 专业场景 | 刮板输送装备健康智能诊断 | 验证诊断标签、典型故障样本划取、质检审核、版本与溯源;多机型结构工况的规则编排、机理台账及离线回放比较;时序质量分析、工况识别、故障模式搜索和在线异常检测;原因、处置及备件建议 | 样本与标签记录、规则台账、回放及比较、异常诊断、原因和处置建议验证结果 |
| 通用场景 | 管理制度智能问答 | 验证制度条文及类别、适用范围、发布部门和关联关系知识管理;精准检索、语义解读及跨制度咨询;引用关系和逻辑校验;查询与复杂咨询响应效率改善 | 知识条目、问答与引用、关联及冲突检查、人工基线与响应时间比较 |
| 通用场景 | 技术标准智能问答 | 验证标准条文、限值、引用、版本更迭及合规案例知识管理;多轮与历史版本问答;表格及公式提取并达到单元格级表格解析;检索量、高频条款和用户活跃度统计可视化 | 标准及版本记录、问答、表格单元格和公式解析结果、统计图表及核验记录 |
| 通用场景 | 标书智能问答 | 验证投标文本与商务知识库;项目、资格、评分、废标、技术设备及业绩材料要求提取与风险标注;商务及技术方案内容生成;废标、资格、评分、遗漏和格式检查及评审报告生成 | 知识库检查、条目提取与风险标注、生成内容核验、评审报告和漏误检记录 |
| 通用场景 | 决策数据智能问答 | 验证业务概念、指标定义与计算规则、分析报告知识管理;自然语言查数、可视化和多维分析;指标异动识别与影响因素追踪;多轮意图及条件继承 | 指标定义与计算、查询与图表、异动归因、对话上下文和权限检查记录 |
| 通用场景 | 合同合规智能审查 | 验证合同文本、附件、补充协议及合规风控知识管理;Word 和 PDF 解析与关键信息提取;合规、责任、交付及付款风险识别;单份合同审查效率提升 | 文件解析、条款及风险定位、依据复核、人工基线与审查用时比较 |
图 1-3 项目建设任务与交付成果
面向行业用户提供高质量数据集服务,建设目录标识、身份登记和标准接口对接能力,推进数据集登记、挂牌、上架和交易。定向开放执行用途确认、授权审批和受控交付,保留数据范围、使用期限、交付记录与审计证据。数据库、安全软件、云平台、服务器、存储、网络、芯片等软硬件整体国产化比率不低于 80%,完成适配测试和证明材料核验。
数据集运营平台维护数据目录、标识、版本、元数据和许可条件,提供身份登记、接口认证、协议适配、访问控制和调用审计功能。对接时完成字段映射、身份验证、目录查询、标识解析及接口异常测试,保留联调结果。
挂牌和交易前核验权属及授权材料、数据质量和服务条件,完成产品登记、展示发布、订单及合同管理、交付、费用记录和清算。定向开放单独登记服务对象、用途、数据范围、期限和出域条件,经审批后执行;超范围访问、授权失效及异常下载触发拦截和处置。
建立软硬件国产化清单和适配测试记录,核对型号、版本、国产化属性及证明材料。商用密码服务平台对身份认证、通信保护、数据存储、完整性校验和密钥管理提供密码服务,配置权限、密钥生命周期和审计策略,开展接口及应用验证。组织等级保护测评和商用密码应用安全性评估,由具备相应能力和资质的机构开展测评评估;项目组提供系统资料、配置、测试环境及运行记录,逐项完成问题整改和复测,交付报告及关闭证据。
对项目采购和交付的数据库、安全软件、云平台、服务器、存储、网络、芯片等建立逐项清单,记录名称、型号或版本、数量、部署位置、国产化属性及证明材料。确定统计对象、计算单位、分子分母、重复计入处理和复核责任,保存计算规则及数据来源,整体国产化比率不低于 80%。硬件整机与内含芯片、配套操作系统及软件组件分别登记,测算时避免重复计入。交付配置或数量变更后重新核验比率与兼容性,保留复核结果。
项目实施覆盖刮板机研究分院、工艺研究分院、备料加工分厂、生产管理部、热处理分厂、结构件焊接分厂、企业管理部、科研管理部、营销中心和审计法务部,管理单位为数字化转型工作办公室。围绕各单位参与的业务、资料和使用任务,开展需求调查、数据清点、专业核验、授权协同、成果验证及培训。
本项目实施数据资源汇聚与接入、数据治理规划与实施、数据集加工生产专项智能工具链建设、数据集运营服务管理平台建设、系统集成、行业大模型训练推理技术服务、数据加工生产、数据集场景验证和运营推广服务。配套完成安全软件与硬件部署、信息安全风险评估、数据集质量评测、技术标准验证、专家库与标注规范建设,以及管理制度、组织保障、安全合规和知识产权管理工作,形成软件、数据、服务成果及配套交付文件。
来源单位确认数据目录、接口人、授权范围和更新频率,按批次完成交接及对账。业务主管部门组织工序字典、部件层级、缺陷判定和指标定义评审,形成规则版本、适用范围、生效时间及审核记录;规则变更或新问题出现时重新评审,并检查受影响数据和任务。成果使用单位参与阶段样本复核及场景验证,记录评价依据、问题和改进要求。项目组跟踪问题处理与复测结果,阶段评审意见纳入后续任务安排。
数字化转型工作办公室统筹跨部门协调、计划推进和问题升级。数据开放及使用授权由具有相应管理权限的单位审核,分类分级由业务与安全管理责任部门评审,阶段验收由项目确定的验收组织实施。项目组登记申请事项、依据材料、审核角色、处理时限和批准结果;存在意见冲突时提交协调处理,未经授权批准不得开放数据或扩大用途。
对每项资料分别登记业务责任、来源系统、维护人员、提供人员、专业审核人员、使用对象和审批权限。一个单位承担多种职责或一项业务涉及多个单位时,明确对应事项及协作关系;管理协调、技术提供、专业判断和授权批准分别落实到具有相应职责的人员,授权依据按人员职责登记而不按单位名称推定。
业务资料清单记录对象、来源位置、格式、版本、有效时间、缺失内容及补充安排。涉及多个部门的同一对象保留来源和定义差异,通过实际业务记录及有效审核确认关联方式;未确认事项跟踪至完成,变更后检查受影响数据及成果。各单位的业务对接任务、资料核验内容与对接成果如表 2-1。
表 2-1 实施单位业务协同与资料核验
| 协同单位 | 业务对接任务 | 资料核验内容 | 加工与验证用途 | 对接成果及处理要求 |
|---|---|---|---|---|
| 营销中心 | 围绕需求、订单和产品选型组织业务调查,协调实际资料责任人员参与核验 | 客户需求、订单、销量、预测记录、历史选型方案及反馈的来源、版本、形成时间和使用权限;区分实际结果、预测值和主观评价 | 供需计划数据及产品智能选型、库存相关需求分析;共享资料按实际用途授权使用 | 形成业务对象和字段清单、需求及选型评价依据。偏好结论对应真实候选方案、条件和专业评定,效果分级以已验证的专业评定为准;缺失信息明确补充责任 |
| 生产管理部 | 协调生产计划、工单、排产、完工及相关库存物流业务资料核验 | 计划与实际执行时间、工单状态、产品及物料对象、库存时点和业务范围,核对来源系统和实际维护责任;仓储物流数据的持有范围按实际维护责任登记 | 供需计划、制造过程及相关业务指标和场景验证 | 形成计划执行关联、状态定义、时间与统计范围记录;返工、撤销、变更和跨部门交接保留历史。生产与仓储数据差异由相关业务责任人员共同核实,差异结论随事实记录保留 |
| 刮板机研究分院 | 围绕产品结构、部件设计、性能参数及选型技术条件开展专业核验 | 主机与部件设计资料、规格参数、技术规范和设计版本,区分设计类目、型号、具体产品和实际设备;核实参数适用条件及证据 | 产品工艺设计、供需计划中的产品技术与选型数据,相关知识和场景验证 | 形成对象关系、有效设计版本和参数依据;实物唯一标识单独建立,与设计编号分列对应。数据复用时登记用途,技术判断由具有实际职责及专业能力的人员审核 |
| 工艺研究分院 | 组织图纸、工艺卡、编制规则、工序及工艺变更的专业核验 | 图号、零件编号、版本、生效时间、工序、参数、工装和技术要求,检查图纸与工艺卡实际对应关系及适用条件 | 产品工艺设计及相关制造、质量知识,板材备料等场景验证 | 形成工序与工艺规则、来源及专业审核记录;保留共用工艺、多版本和变更历史,关联关系按实际对应情况建立。知识条目完成终审后用于标注、合成 |
| 备料加工分厂 | 核验备料工序执行、设备运行、完工、返工及异常处理资料 | 实际任务、设备、工件、工序、作业时间、执行参数、异常和处置记录,与有效工艺要求逐项关联 | 制造过程及工艺设计、质量相关样本和板材备料场景验证 | 形成实际执行与工艺要求的对应及偏差记录;无实测数据时保留缺失状态,计划参数与实际运行值分列登记。资料与设备时间不一致时核对事件和记录依据 |
| 热处理分厂 | 组织热处理工艺、设备、工件、材料及检验记录核验 | 炉次或实际热处理事件、群控曲线、装载对象、时间、温度及其他工艺参数、硬度和相关检测结果;检查返工复检及材料关系 | 制造过程、产品质量及热处理场景验证和知识构建 | 形成工件、处理事件、工艺版本、曲线和检验关联。不同处理方式按真实业务记录建立关系,炉次结构只用于以炉次组织的设备;批次检测结果按批次记录并标明覆盖范围,时间与计量信息保留原值和处理记录 |
| 结构件焊接分厂 | 围绕焊接任务、工件、焊道、参数、影像及检验开展核验 | 焊接程序或任务、设备、工件与焊道关系、过程参数、时间戳、熔池及相关图像、焊缝检查和返修记录,核实缺陷判定依据 | 制造过程、产品质量及焊接场景验证 | 形成焊接事件与影像、参数、检查结果的关联和专业审核记录;返修另记事件及版本,原过程记录保留。报警、异常信号与已确认缺陷分别登记,各自保留判定依据 |
| 企业管理部 | 组织管理制度、流程及相关业务知识的有效性核验,协调使用人员参与应用验证 | 制度名称、编号、发布部门、生效时间、适用范围、层级、引用关系和废止情况;核实可使用版本及权限 | 制度知识库、管理制度智能问答及获准的相关训练评测材料 | 形成条款级来源与有效版本记录,关联引用和适用范围。共享知识按实际用途纳入四类数据集的相应子集并防止重复计量;过期制度保留历史标识,当前有效规则以现行版本为准 |
| 科研管理部 | 协调技术资料、科研成果、标准工作及知识产权资料归集与核验 | 技术报告、项目成果、标准的来源版本、状态、权属和使用条件,核实论文、专利及软件成果的实际形成与办理记录 | 专业知识、技术标准智能问答、研究验证及知识产权成果管理 | 形成资料与项目成果对应、有效版本和权利证明清单;研究结论、建议、已发布标准和已取得成果分类登记,计划或申报安排另列为在办事项 |
| 审计法务部 | 围绕合同、投标相关资料及合规审查规则开展专业协同 | 合同要素、模板基线、实际条款差异、资料版本及适用依据,核实商业秘密、个人信息和其他敏感内容的处理及使用条件 | 供需计划中的合同条款及风险数据,合同合规审查、标书问答及相关知识应用 | 形成审核依据、条款标注和敏感内容处理记录;专业审核、数据使用授权和最终业务决定分别按实际权限执行,数据开放范围以单独的授权记录为准 |
| 数字化转型工作办公室 | 履行项目管理与跨单位协调职责,组织需求、数据、技术、质量、安全和成果事项的协同 | 参与人员及实际职责、需求任务、跨系统依赖、待确认事项、资源条件、变更和阶段成果,核验相应审批主体和程序 | 四类数据集及配套平台、工具、治理、验证和交付工作协调 | 形成协调计划、责任分工、问题跟踪和有效确认记录。数据授权、分类分级、专业终审、质量结论及正式验收分别由具备相应权限的人员或机构完成,各项批准保留本方的主体与依据 |
数据来源同时登记业务责任单位和实际来源系统,记录对象、字段、维护人员、提取方式、授权范围及使用任务。跨部门共享系统的数据按具体业务对象核验责任与含义;同一业务存在多系统记录时,比较形成时间、状态、版本及业务依据,确定适用关系并保留差异,有效性判定以业务依据与版本核验结果为准。
需要确认的事项按数据授权、专业规则、质量结论、安全控制和业务使用分别提交有相应权限的责任人员处理。数字化转型工作办公室组织跨单位协调及进度跟踪,批准和审核结果保留实际主体、内容、版本、生效时间及适用范围。
已有标准和审批结果在对象、用途、规则、版本和权限仍有效时按适用条件使用。每个任务启动仍检查相关条件,出现数据新增、用途变化、规则修订、权限失效或影响质量的差异时重新核验并完成必要审批,有效性检查逐任务执行。确认结果需要转为本体、知识或标准时,分别完成相应专业审核、发布和任务关联。
建设高质量数据集,实施应用场景验证、数据集运营服务管理平台建设、数据加工生产专项智能工具链建设、知识产权成果工作和数据集质量评测。各项任务分别明确交付清单、实施计划、质量要求、验证方法和验收记录,统一纳入项目进度与质量管理。
建设四个业务领域、四种用途的行业多模态高质量数据集,完成来源接入、加工、知识建设、质量检查、训练验证和版本交付。数据集与模型、知识、工具和评测记录建立实际关联,支撑业务使用、持续更新及受控服务。
完成九类 25 个专项智能工具和数据集运营服务管理平台建设,提供实际运行实例、必要授权、接口、配置和测试资料。运营平台落实 16 项功能及订单、交付、清算、审计和 SLA 要求,配套建立协同汇聚、运营组织、服务供给和实际国家数据基础设施接入能力,功能完成情况分别核验。
六个专业场景和五个通用场景按各自业务任务完成数据、模型及应用效果验证,检查全部要求功能和量化指标。正式数据质量评测完成首轮全量评测、模型对照、缺陷整改复测及盖章报告,由承担评测的机构独立于过程质检单独组织。
建设不少于 50 名、覆盖六个专业领域的数据标注专家库,形成标注规范和完整软建设成果;累计发表论文不少于 5 篇、申请发明专利不少于 3 项、获得软件著作权不少于 6 项。各类成果保存实际完成状态和证明,以建设与交付实物为验收依据。六项业务建设内容、交付成果与检查要求如表 2-2。
表 2-2 业务建设内容与成果检查要求
| 业务内容 | 实施内容 | 交付成果 | 检查要求 |
|---|---|---|---|
| 高质量数据集建设 | 按供需计划、产品工艺设计、制造过程、产品质量四领域建设预训练、指令微调、偏好对齐和基准评测子集;开展来源核验、预处理、知识及标注、适用合成增强、质检、训练验证与版本管理 | 实际数据体、数据卡、数据字典、来源授权、加工与质量记录、验证报告、血缘及规模结构明细 | 四领域预训练分别达到 276、70、105、164 亿 Token,微调 40、10、15、24 万条,偏好 3.2、0.8、1、1.6 万组,基准 0.4、0.1、0.2、0.25 万条。分项独立核验,不同领域与用途之间不互相抵充;具备文本、图像、时序、视频,多模态及近三年数据条数占比均不低于 40%。计数、去重、分母及来源时间可核验,基准子集独立建设且不使用任何形式的合成数据 |
| 应用场景验证 | 完成产品智能选型、板材备料工艺智能设计、库存控制智能化、热处理过程智能监控、焊接过程控制智能监控、刮板输送装备健康智能诊断六个专业场景,以及管理制度智能问答、技术标准智能问答、标书智能问答、决策数据智能问答、合同合规智能审查五个通用场景的验证任务 | 适用数据与知识、模型及验证环境、用例与实际输入输出、各功能和指标结果、问题及复测报告 | 逐场景验证全部要求功能和指标,数据、模型、规则及报告对应实际版本。板材备料对全部识别通过后生成的工艺卡片及工序附图逐卡逐字段全量核对,差异进台账并逐条关闭,存在未关闭项的卡片不予下发;闭合条件与等效表述认定规则在首轮验证前经甲方工艺部门确认。验证以功能实现与完整用例执行为准,数据可用性说明、测试计划与演示记录作为过程材料一并提交 |
| 数据集运营服务管理平台 | 建设目录、元数据、上传、下载、权限、动态更新、检索预览、版本、服务、对外接口、登记注册、确权、挂牌展示、交易合同、交易费用、全流程审计 16 项功能,落实订单、服务交付、清算及 SLA,并完成相应实际接入 | 可运行平台、不限节点及许可数量的授权、部署配置、接口与操作文档、测试记录,目录及版本登记、权限、交付、计量清算、审计及接入成果 | 逐项检查功能及正常异常流程,核验用户、用途、对象、版本、授权和期限,交付内容与登记一致,计量清算与订单和执行对应。SLA 功能和指标满足要求,国家数据基础设施接入以实际联调与运行记录为完成判据 |
| 数据集加工生产专项智能工具链 | 建设思维链构建、长上下文数据构建、多轮对话数据构建、多模态数据对齐、智能标注、数据生成与增强、数据质量与分布控制、数据生成控制与评测、数据集验证与归因九类 25 个工具,接入实际加工任务 | 25 个可运行工具、授权、输入输出及配置、接口文档、用例和测试报告、使用维护资料及任务追溯记录 | 逐工具核验真实功能,检查创建任务、状态查询、结果获取、重试、导出及回调等适用接口,权限、异常和版本记录完整;不限制使用节点及许可数量,验收以可运行实例的实测结果为准 |
| 专家库、标注规范、软建设及知识产权 | 建设不少于 50 人且覆盖标准编制、数据生产、质量管控、行业应用、项目管理、安全合规六领域的专家库和机制,形成各模态标注规范;完成政策梳理、规划、制度机制、标准规范等配套任务及实际知识产权成果 | 专家名单与能力资料、遴选派工考核,标注规范及实践记录;25 个政策文件梳理,中长期规划、4 项专项实施方案、制度体系、动态调整机制、年度政策符合性评估,5 项机制,2 项关键行业标准、18 项细分标准及 6 项实施技术规范等具体成果;论文发表、专利申请、软著登记证明 | 各项内容分别完整,按上列具体数量逐项核验。累计发表论文不少于 5 篇、申请发明专利不少于 3 项、获得软著不少于 6 项,完成状态与证据一一对应;专家身份、能力及实际任务可查,规范和机制有执行记录,人员、标准与权利状态以在办与已成两类分别登记 |
| 数据集质量评测 | 由承担评测的机构和人员组织首轮全量评测、模型对照实验、缺陷定位指导及整改复测,覆盖说明文档、数据质量和模型应用 | 完整评测方案、原始执行记录、分项及综合评分、模型实验、缺陷整改复测、正式盖章报告和质量档案 | 三维度指标覆盖率按《高质量数据集质量评测规范》(TC609-5-2025-04)的三级指标清单计量,分母为该受检版本适用的全部三级指标条目,分子为已完成取证、给出分项得分且结论可复算的条目;首轮正式评测对自建数据集按全量执行、不抽样,首期承诺基线不低于 98%,目标逐步接近全部覆盖。判定时点为每个交付批次随版本封装判定一次,服务期内增量数据按季度抽检复核一次,抽样批次按来源、模态与业务领域分层抽取,单维度样本量不少于 384 条,对应 95% 置信水平与 5% 误差上限,覆盖率结果与受检版本号、原始执行记录一并记入评测报告,由承担评测的机构出具。未覆盖项逐项说明原因、责任岗位与补测时间,在下一轮评测集中补测;连续两轮仍未覆盖的,单列说明并提请甲方确认处置方式后重测;各维度达到最低合格标准且综合得分不低于 85 分;高风险缺陷按复测抽样复查零发现判定达标,中低风险缺陷整改完成率趋向全部完成、承诺基线 99%,未闭环项附经甲方确认的不整改评估;模型动态验证达到最低性能提升阈值。报告与受检版本一致,正式评测独立于过程质检单独组织 |
按任务依赖组织软件部署、工具链开发、数据准备、加工生产、质量评测和场景验证。优先完成共用认证、存储、调度、版本及审计能力和首批数据接入,工具与数据分批实施,完成相应测试后进入下一阶段。各批次同步开展质量检查、缺陷整改与场景验证;知识产权及文档成果随研发和实施过程形成,分别登记成果、证据、评审状态和完成节点。各类交付成果独立核验,不以数据集数量达标替代平台、工具或服务验收。
面向六个专业场景和五个通用场景开展数据集验证,完成场景数据需求分析、样本准备、验证环境配置、测试用例设计、验证执行、结果分析和整改复测。验证记录关联数据集版本、模型版本、测试条件及评价指标,形成能够复核的数据适用性结论和场景验证报告。
逐场景编制数据需求清单和验证用例,明确业务对象、字段、样本结构、数据量、时间范围、质量条件、评价指标及通过判据。验证前检查数据、模型、环境和授权条件;准备条件不满足时登记缺项,明确责任岗位和完成时间,补齐后执行验证。
验证过程中保存输入、输出、指标计算、人工复核和异常记录。数据质量问题追溯至来源及加工环节,完成补采、清洗、标注修正或重新加工后复测;涉及场景接口或运行条件的问题形成协同处理单,记录责任方、措施和关闭结果。未通过的验证项持续整改和复测,达到验收要求后形成最终报告;待处理问题不得以情况说明代替完成成果。
场景验证交付验证方案、用例、测试数据版本清单、运行记录、指标计算结果、问题及整改记录、复测结果和验证报告。训练推理服务交付数据配比实验、各阶段训练配置与运行记录、模型版本及检查点、评测报告、错例归因和数据改进记录。数据集交付数据文件、版本清单、数据卡、质量检查与评测报告、血缘记录、授权及使用限制文件,并完成发布登记、移交确认和运营支持。
表 2-3 场景验证作业的步骤、输入、产出与判定依据
| 步骤 | 业务对象与输入 | 处理内容 | 角色与权限 | 产出物 | 判定依据 | 不合格处置 |
|---|---|---|---|---|---|---|
| 需求确认 | 场景任务说明、业务规则、授权范围 | 确定业务对象、字段、样本结构、数据量、时间范围与质量条件 | 场景分析岗编制,业务部门确认 | 场景数据需求清单 | 清单各字段齐备且经业务部门书面确认 | 字段或授权未确认的登记缺项,补齐后再进入下一步 |
| 用例设计 | 场景数据需求清单、评测指标定义 | 编制验证用例、评价指标、通过判据与抽样规则 | 验证设计岗编制,评审组核准 | 验证用例集与判据表 | 每条用例可对应到指标与判据,判据给出数值或判定规则 | 判据不可计算的退回重编 |
| 环境与数据准备 | 冻结的数据集版本、模型版本、运行配置 | 配置验证环境,核验数据、模型、授权与版本一致性 | 验证执行岗配置,安全管理岗核验授权 | 环境配置记录、版本清单 | 数据、模型、代码、规则和配置版本与批准的用例基线对应,依赖环境、访问授权及资源条件满足要求 | 版本不一致或授权缺失的暂停执行 |
| 验证执行 | 验证用例集、测试数据、运行环境 | 执行用例,记录输入、输出、运行参数与异常 | 验证执行岗执行,复核岗抽查 | 运行记录、原始输出 | 用例执行覆盖率与记录完整性达到用例集要求 | 保留失败日志、输入及中间状态,检查重复执行风险,恢复环境并确认幂等或回退条件后重新执行 |
| 结果分析 | 运行记录、指标定义 | 计算指标,逐项比对判据,标注未通过项 | 验证分析岗计算,评审组复核 | 指标计算结果、未通过项清单 | 指标计算过程可复算,结论有数据支撑 | 结论无法复算的重新计算 |
| 问题归因 | 未通过项清单、数据血缘、模型记录 | 核查数据来源、加工规则、标注、模型、接口与环境因素,记录证据及责任任务 | 归因岗分析,专家库裁定争议项 | 问题清单与归因结论 | 每一项问题定位到具体对象、环节与责任方 | 补充日志、对照实验和专业复核,证据不足时保持待确认,不以专家意见直接替代事实证据 |
| 整改复测 | 问题清单、补采与返工任务 | 执行补采、清洗、标注修正或重新加工,模型、接口和环境问题由相应责任岗位修复,完成后复测 | 加工责任岗与平台责任岗整改,验证执行岗复测 | 整改记录、复测结果 | 复测指标达到判据,且未引入新的不合格项 | 复测仍不合格的再次归因并整改,直至达到判据 |
| 结论出具 | 复测结果、全过程记录 | 汇总形成数据适用性结论与场景验证报告 | 项目组出具,招标方确认 | 场景验证报告 | 报告含用例、指标、证据与整改闭环记录 | 待处理事项未关闭的不出具最终结论 |
图 2-1 数据生产、验证与运营流程。实线为作业流转,虚线为整改返回。
数据治理贯穿数据生产全过程,知识本体与知识库为各加工环节提供对象、属性、关系、规则及知识服务。数据依次完成采集、预处理、标注、合成、增强、质量检查和验证,四类数据集按照各自业务特点配置加工路径,共用基础能力和质量规则。训练前完成数据质量检查,训练后完成数据集验证;未通过验证的数据依据问题归因和血缘记录定位责任环节,修复后重新执行受影响的质量检查和验证任务。每次返工形成新的任务或版本,保存前后关联和处理记录。
数据治理与加工任务按批准的实施计划协同开展。每批数据进入标注前,核验所涉业务对象、主键、编码、术语、分类分级和标注规则的有效版本。定义缺失、编码冲突或规则存在歧义时,暂停受影响对象的批量标注,完成业务评审、规则发布及试标验证后再处理。已具备条件的任务按计划执行;规则变更后识别受影响样本,组织复核与必要返工,保存变更及处理记录。
建立业务对象、属性、关系、术语和约束规则,形成经评审发布的知识本体版本。知识库接入获准使用的业务资料,记录来源、有效期、适用范围和证据位置,建立可检索知识条目及索引。标注、合成和检索任务引用明确版本的本体及知识内容;关键业务规则关联专业审核依据。知识更新先开展影响分析和回归测试,再发布新版本并通知相关任务。
在采集完成、预处理完成、本体版本发布、知识库交付、标注完成、合成增强完成和数据集版本冻结前设置质量检查。采集检查授权、来源、记录及文件完整性;预处理检查解析、去重、单位及时间规范化结果;本体检查类目、关系、约束和版本兼容性;知识库检查来源有效性、条目完整性及检索结果;标注检查标签准确性、一致性和专业复核;合成增强检查来源标识、生成约束、真实性及跨子集泄漏;版本冻结检查分项规模、质量结果、授权、数据卡和交付文件。
各检查明确对象、规则版本、执行岗位、复核岗位、通过条件和异常处理。未通过的对象隔离并生成整改任务,处理后重新检查;训练后的数据集验证独立执行,未通过时按问题归因返回相应环节,修复后重新质检和验证。
在采集和每个加工任务记录输入对象、来源批次、处理规则、算子及版本、参数、输出对象和执行时间,形成样本与任务级血缘。问题发生后结合错例、规则版本和共享依赖确定影响范围,将整改任务分配至对应来源、环节、批次或算子。返工保留原结果和新版本,重新执行受影响的下游检查及场景验证;共享源数据或规则问题影响多个数据集时,扩大检查范围,禁止仅修复单个错例而遗漏关联成果。
模型通过统一接入网关注册、授权和调用,保存模型名称、版本、许可、配置及测试记录。训练环境与评测环境隔离,基准评测数据不向训练任务开放。模型升级前完成任务适用性、质量、安全和性能回归评测,经批准后切换;异常时恢复已验证版本和配置。训练推理服务按任务交付模型版本、检查点、运行配置、训练记录和评测成果,数据集与所用模型、规则及环境建立可追溯关联。
表 3-1 建设成果与核验要求
| 建设成果 | 交付内容 | 核验要求 |
|---|---|---|
| 四类数据集 | 预训练 615 亿 Token、指令微调 89 万条、偏好对齐 6.6 万组、基准评测 0.95 万条,附版本、数据卡和质量文件 | 各业务领域及用途子集分别达标,按固定计量规则核验有效数量、质量、来源和授权,保留计算记录 |
| 专项智能工具链 | 不少于 9 类 25 项工具链及部署、配置、接口和运行文档 | 逐项核验输入输出、处理规则、权限、异常处理和验收用例,保存功能及性能测试记录 |
| 运营服务管理平台 | 16 项功能模块及平台服务与 SLA 保障能力 | 验证数据及服务管理、订单、交付、清算、审计和对外接口,核验监测与服务记录 |
| 本体与知识库 | 本体版本、术语、知识条目、图谱、检索索引和对象映射 | 核验来源、版本、对象关系、约束、检索效果和接口调用,保留专业评审与测试结果 |
| 数据治理成果 | 治理规划、实施记录、标准规则和不少于 25 份治理文档,支撑 DCMM 三级目标 | 核对治理任务及执行证据,开展规则测试、文档评审和适用性检查,配合评估并整改 |
| 场景验证成果 | 六个专业场景及五个通用场景的方案、用例、运行记录、报告和整改复测成果 | 逐项验证业务能力及指标,核验数据、模型、规则与环境版本,确认问题关闭 |
| 安全及国产化成果 | 国产化清单、适配记录、安全测试、等级保护测评和密码应用安全性评估材料 | 整体国产化比率不低于 80%,统计依据可核验;完成测评评估及整改复测 |
| 运营移交成果 | 数据集发布版本、登记信息、权限及使用限制、运维文档和移交记录 | 检查交付文件校验值、版本和数据卡一致性,测试授权及交付链路,完成双方移交确认 |
编制任务依赖和分阶段实施计划,明确数据授权、网络与资源环境、身份权限、标准规则、工具组件及验收条件。首批加工前完成必要的本体、字典、映射及质量规则发布;各工具按依赖关系部署和测试,数据集分批加工。运营平台的登记、授权、目录和交付能力在相应发布任务前完成验证。治理、安全及审计贯穿建设过程,场景验证使用经质量检查并受控冻结的数据版本。各阶段完成条件和交付节点纳入计划,未达条件时制定纠正措施并履行计划调整程序。
按依赖关系编排数据采集、预处理、标注、合成、增强、质量检查和验证任务,任务执行前核验输入版本、规则、授权及资源条件。各次执行形成有向无环的任务依赖图;整改重新生成任务并关联原失败任务,不覆盖历史输入输出。治理、安全、版本和审计控制覆盖全部任务,四类数据集分别配置加工路径,共享获准使用的基础能力。
通过数据库只读抽取、接口调用、文件交换、测点订阅和离线录入接入数据。接入前核验来源主体、授权范围、数据分类分级和接口安全条件,确定全量及增量识别规则。按批次记录源对象、时间范围、记录数、文件数及校验值,执行对账和入口保护,对不满足条件的数据隔离处理。
建立对象、属性、关系及约束定义,发布本体、字典和业务规则;知识资料完成授权、有效性和内容质量检查后入库,保存证据位置并建立索引。跨系统对象通过主键映射关联,各时间字段保留语义、原值、时区及转换规则,向加工任务提供确定版本的知识和规则服务。
数据加工任务调用专项工具完成标注、合成、增强及质量检查,记录每项任务的输入、规则、模型、参数、输出和血缘。按业务领域、部件类别和任务用途制定训练数据配比,开展配比预实验、继续预训练、指令微调和偏好对齐,保存配置、检查点及阶段结果。独立评测环境使用冻结基准进行模型与数据效果评测,形成质量结论、能力变化记录和问题清单。
开展十一个场景的业务能力验证,定位不合格项并组织整改复测。通过质量检查、评测、场景验证和发布审核的数据集封装为交付版本,完成数据卡、血缘、授权及使用限制文件核验,再移交运营平台登记和提供受控服务。
数据标准、质量规则、分类分级、元数据和血缘管理通过版本化配置及接口贯穿生产任务。任务启动核验适用规则和授权,运行时记录执行状态,完成后回传质量结果与血缘。密码、身份认证、权限、脱敏和审计能力按服务职责配置至采集、加工、存储、调用及交付环节,跨区域访问通过受控接口实施检查。敏感数据按分级策略限制字段、用途、接收方和留存期限,记录操作主体、对象、时间及结果,异常访问触发阻断和告警。
整改任务关联问题样本、来源批次、处理规则、算子和下游依赖,记录原因、影响范围、责任岗位、处理要求及复核条件。按确认的影响范围重新加工和验证,存在共用来源或规则问题时检查其他关联成果。新结果保留与原任务的版本关系,问题关闭后更新质量记录和交付版本。
建立覆盖供需计划、产品工艺设计、制造过程和产品质量的知识本体,定义业务对象、属性、关系、编码及取值约束。知识库保存经授权的制度、标准、工艺文件和业务记录,并登记文件版本、有效期、适用范围及原文位置。本体、知识库与加工规则分别实行版本管理。采集、标注、合成、质检、训练和场景验证任务登记所引用的版本,依据对象标识及证据位置关联源数据,支持复核、影响分析和结果追溯。
知识本体定义设备与部件、工艺与工序、故障模式、质量特性与检验项、物料与物料清单、供应商与合同、能耗与工况七类业务对象。交付类目定义、属性及值域、关系定义、对象标识映射、术语及别名、标准映射和版本记录。类目登记编码、名称、定义、适用范围及上下级关系;属性登记数据类型、计量单位、允许值、必填条件及来源;关系登记两端对象类型、方向、基数及有效时间。发布前检查编码重复、必填信息缺失、关系端点不存在、层级循环和规则冲突。一个术语存在多个业务含义时,分别登记所属领域、定义及适用条件;同一概念的不同称谓作为别名维护。评审未通过的条目不进入正式版本。
建立跨系统对象标识映射,分别保留设备资产编号、产品编号、零部件编号、物料编码、维修工单编号及其来源系统。根据对象类型、产品配置、部件层级、业务关系和有效时间识别记录间的对应关系,区分同一实物对象、同型号产品、替换部件及物料批次。候选映射登记匹配依据、置信度和复核状态;编号重复、关系冲突或依据不足的记录进入待核查队列。业务人员确认后发布有效映射,关联记录保留原始标识和历史版本。工序字典及历史工艺样本分别核验名称、数量、版本、来源和适用范围,形成可追溯的数据清单。
标注任务引用已发布的本体版本、标签集版本和标注规范版本,按对象类型、属性约束及关系定义执行标注。合成任务同时绑定工艺规则、适用参数范围、知识证据和生成模板,生成结果通过约束校验及人工复核后入库。检索任务按对象标识关联知识库条目,返回条目编号、文件版本、适用条件和原文位置。每项任务记录完整的版本依赖清单,运行期间保持依赖配置固定;需要更新时终止或完成当前任务,登记变更原因,经评审后以新的任务标识启动,保留前后结果的关联关系。
场景验证通过对象查询接口检索设备、部件、工艺、物料及其关联记录,查询请求携带对象标识、业务范围、时间范围和访问权限,返回结果保留来源与版本。验证发现的问题分别登记数据缺失、数据错误、对象映射错误、本体定义错误、知识证据缺失、检索错误及模型输出错误,关联验证用例、输入、实际输出、预期结果和复现条件。经复核属于本体的问题提交本体修订任务;其他问题分别交由数据加工、知识库、检索或模型服务岗位处理。修订前分析关联数据集与场景的影响,修订后实施对应复测及受影响用例回归,保存修订和验证记录。
图 3-1 数据加工、知识服务与场景验证流程
总体架构按六层一横一纵组织。六层是数据资源层、采集接入层、知识底座层、加工生产层、训练与评测层、运营服务层;一横是数据治理管控层,在六层之上横向贯穿;一纵是安全与国产化底座,自下向上纵向支撑。场景验证服务跨训练与评测层、运营服务层展开,是本包三类交付成果之一。
图 3-2 总体技术架构。向上箭头为数据与成果的主流向;治理层横向贯穿六层,安全与国产化底座纵向支撑六层。数据来源:架构骨架依招标文件 b1215;各层条目依第 3 章对应章节号(3.2.2、3.2.3、3.2.4、3.2.6.2、3.2.6.3、3.2.6.5);功能模块依 b0804r04 实列 16 项并另增 1 项(b1198);25 个工具链依 b0917;硬件台数依第五章硬件采购清单。
架构图给的是位置关系,真正决定可实施性的是层与层之间交什么、交到什么状态算完成。下表把六层的职责与交接物逐层写明,交接物的格式与字段在各节细化。
表 3-2 六层的职责、交接物与完成判据
| 层 | 本层职责 | 向上一层交什么 | 完成判据 | 详述位置 |
|---|---|---|---|---|
| 第一层 数据资源层 | 甲方既有系统与资料,本包不建设,只按授权范围取数 | 源系统的只读数据、离线资料、设备时序 | 授权书面确认、接口可连通、样本可取回 | 本卷 T12 第三部分 |
| 第二层 采集接入层 | 五类通道接入、接入四要素核验、增量识别、入口脱敏、批次成形 | 带批次号与采集记录的原始数据,写入落地区 | 入口检查节点通过:四要素齐备、格式合规、脱敏生效、批次台账登记 | 本卷 T12、T1A 第二部分 |
| 第三层 知识底座层 | 本体类目与关系定义、知识库建设、主数据与对象主键、时间基准统一 | 本体版本、术语表、知识条目与图谱、检索索引、主键映射表 | 口径检查节点与终审门通过:类目与关系经评审、与企业既有编码对齐、检索可用 | 本卷 T1A 第四、第五部分 |
| 第四层 加工生产层 | 十环节加工、25 个工具链执行、七道质量检查节点判定、定向回流 | 经质检与验证通过并冻结的数据集版本,含数据体、数据卡、质检与验证报告、血缘清单 | 版本检查节点通过:规模、模态、时效、六维质量指标达判据,血缘完整 | 本卷 T1、T2 |
| 第五层 训练与评测层 | 训练配比与四阶段训练、评测沙箱、多阶段评测与错题归因 | 知识注入有效性报告、能力增量结论、结构化整改任务单 | 评测可复现(同种子同版本同结果)、增量结论有对照 | 本卷 T13 |
| 第六层 运营服务层 | 功能模块(招标列明 16 个+我方增建 1 个):登记注册、目录与元数据、确权挂牌、订单与交付、清算与审计、SLA 保障、对外接口 | 可对外交付的数据集服务与交易记录 | 版本登记完成、目录可检索、交付通道可用、SLA 指标可度量 | 本卷 T3 |
| 横向 治理管控层 | 标准、质量规则、安全分级、元数据与血缘;九大能力域规划与实施 | 在每层生效的标准与规则,以及 DCMM 贯标所需执行记录 | 规则在平台上可执行、执行记录可追溯 | 本卷 T4 |
| 纵向 安全与国产化底座 | 密码服务、分类分级与出域控制、等保与密评、国产化适配 | 各层可调用的密码服务与安全管控能力 | 密码应用按设计落点生效、测评与评估结论出具、国产化测算表完成 | 本卷 T10、T11 |
表 3-2 数据来源:层次划分依招标文件 b1215 的生产逻辑规定;交接物与判据依各层对应章节的要求条目(3.2.2、3.2.3、3.2.4、3.2.6.1—3.2.6.5)。
六层之中有两层需要特别说明其边界,因为它们容易与甲方既有工作混淆。第一层数据资源层不在本包建设范围,本包对它的要求只有一件:按已授权范围开放只读数据接口。我方不替换、不重建其中任何一套系统,源系统的改造需求若出现,按变更流程另议(详见本卷「系统集成方案」节 1.4、1.10 与「数据资源采集接入」节第二部分的前置条件)。第六层运营服务层属于本包建设范围,但其运营工作本身(挂牌定价、客户拓展、交易撮合)在质保期内由我方提供支持、由甲方主导,机制与分工见本卷「技术创新与机制创新」节运营体系一段。
六层逐层的构成、设立依据、上下层接口与产出消费方如下。六层之中任何一层被当成可以省略的中间环节,省下的工作量都会以返工的形式在下游出现,因此每一层的边界与交接物均须在实施前固化。
本层是甲方既有的数据资产,不在本包建设范围。构成为三部分:十七套业务与设备系统(CRM、ERP、SCM、QMS、WMS、MES、LMS、EMS、SOS、EAM、PLM、SCADA、OA、久其系统、主数据管理平台、热处理群控系统、安全监管平台,依 b0804r02、b0807);离线非结构化资料,含业务域文档、图片、工程图纸、技术书籍、财务票据与音视频(b0911);本项目新增的五类 46 台现场感知与检测设备(b2150r02—b2150r06),设备本体由本包供货安装,其产生的数据归甲方。
本层单列成一层而不并入采集环节,原因是本包与甲方的责任边界就划在这一层与第二层之间,划不清楚会在实施期反复扯皮。本包对本层的要求只有三件,都是前置条件而非建设内容:按已授权范围开放只读数据接口或文件通道;提供数据库连接信息、接口信息或 FTP 信息(b0813、b0820、b0827 等各系统同类条目);提供数据字典或数据库设计说明书(b0815、b0822、b0829)。我方不替换、不重建其中任何一套系统,源系统的改造需求若出现,按变更流程另议。
接口形式按源系统的条件分别确定,取数时段按各系统要求安排在业务低峰(各系统条目均写明例如 0 点至 5 点)。本层的产出被第二层消费,消费方式是只读抽取与文件取回,不回写。
本层有五类通道:数据库只读抽取、接口服务调用、文件与图纸取回、时序测点订阅、离线与纸质录入。每类通道内含五个固定动作:接入四要素核验(源系统、授权范围、字段清单、责任人)、格式合规校验、入口脱敏、增量水位线识别、批次成形与采集记录登记。本层还承担对象主键的初次贯通尝试,即在批次成形时写入可识别的业务主键。
本层单列而不由加工环节直连源库,有三条理由。其一,脱敏必须在入口完成:高敏字段一旦进入加工域再脱敏,加工域就已经留下了副本,分类分级的管控失效。其二,增量识别必须在入口完成:十七套系统的增量判定方式各不相同,有的有时间戳、有的只能靠主键比对,这件事放到下游做会导致每个加工环节各写一套增量逻辑。其三,批次号必须在入口生成:批次号是后续血缘、定向回流与版本登记的唯一串联键,它若不是在数据第一次进入我方平台时生成,中间就一定有一段无法追溯。
向上交接的是带批次号与采集记录的原始数据,写入落地区,并附数据源登记台账与增量水位线对账结果。交接判据是入口检查节点通过:四要素齐备、格式合规、脱敏生效、批次台账登记完成。本层产出被第四层加工生产层消费,登记台账与水位线同时被横向治理层消费(用于元数据与质量规则的执行记录)。
本层有四件东西:知识本体(类目、属性、关系)、知识库(知识条目、图谱、检索索引、三元组)、主数据与对象主键映射表、时间基准与折算规则。本体的工序类目按工艺部门确认的 28 道备料工序字典建立,部件层级按链条、链轮、溜槽、电机、减速器、液压系统等刮板输送装备部件构成建立。
底座须先立,依据是招标文件已把本体与知识库定为标注口径、合成约束与检索证据的唯一来源(b1215)。若不先立,三件事会同时失控:标注员各自按理解给标签,同一缺陷在不同批次里有不同名字;合成样本没有约束条件,生成出与工艺事实冲突的内容;检索增强给不出可核对的出处。这三件事的共同特点是发现得晚、返工量大——它们都要到质检或场景验证阶段才暴露,而那时相关批次已经加工完毕。
与下层的接口是从第二层取规范化样本与术语原料;与上层的接口是向第四层下发本体版本、术语表、标注口径与合成约束,向第五层提供检索证据与评测题目的事实依据。交接判据是口径检查节点与终审门通过:类目与关系经评审、与企业既有编码对齐、检索可用。本层产出被第四层、第五层共同消费,且被四个数据集共享——四集共用一套底座,不各建一套,这是本架构与按数据集分别建库的做法的主要差别。
本层是本包工作量的主体,有三块内容:十个加工环节(采集、预处理、本体构建、知识库建设、标注、合成、增强、质检、验证、项目管理)、9 类 25 个专项智能工具链(b0915、b0917)、七道质量检查节点与三类定向回流。
环节细分到十个而不按采集—加工—交付三段组织,原因是门控的位置由环节边界决定。每一个环节之后设一道判定,一批数据的问题最多向后传递一个环节;若只分三段,问题会积累到交付段才暴露,返工的范围就是整段而不是单个算子。这一层的设计取舍已在第 3.0.1 节第三条交代。
与下层的接口是从第二层取原始数据、从第三层取本体与口径;与上层的接口是向第五层交冻结封装的数据集版本(数据体、数据卡、质检报告、验证报告、血缘清单),向第六层交版本封装包与登记信息。交接判据是版本检查节点通过:规模、模态、时效与六维质量指标达判据,血缘完整。本层产出的消费方有三个:第五层用于训练与评测,第六层用于对外交付,服务方案卷的质量评测节用于外部评测送检。
本层按三域一网关组织:训练域(配比预实验、继续预训练、指令微调、偏好对齐)、评测域(冻结沙箱)、推理域(内网隔离区与受控区),三域之上是统一模型接入与评测网关,承担鉴权、数据分级校验、多协议适配、调用计量留痕与版本路由。
评测域做成与训练域隔离的冻结沙箱,原因是基准测试数据集一旦进入训练数据,评测结论就失去意义,而本项目的交付物价值恰恰要靠评测结论来证明。隔离的代价是沙箱内的运维成本与评测作业的排队,收益是模型替换之后评测结论仍然可比(依 b1354 的可复现要求)。这也是全卷唯一一条写成无回退的技术约束。
本层单列而不把数据集直接交出,原因是本包承诺的不是「交付了多少数据」,而是「数据管用」。管用与否要靠两个证据:知识注入有效性(同一基准在注入前后的能力差)与错题归因(答错的题对应哪一批样本的缺陷)。这两个证据只能在训练与评测环节产生。
与下层的接口是从第四层取数据集版本、从第三层取事实依据;与上层的接口是向第六层提供可对外说明的能力增量结论,向第四层反向交付结构化整改任务单——这条反向接口就是 b1215 要求的定向回流在层间的体现。交接判据是评测可复现(同版本、同种子、同结果)且增量结论有对照基准。
本层承载的功能模块共 17 个,其中招标文件服务采购清单列明 16 个、我方额外增建 1 个:目录与元数据、上传下载、检索预览、版本与动态更新、权限、确权与挂牌、登记注册、数据集服务、订单、交易合同、交易费用、交付、清算、审计、对外接口(以上 15 项与国家数据基础设施对接能力 1 项,合计为招标列明的 16 项),以及我方增建的平台服务与 SLA 保障模块 1 项。对接国家数据基础设施按统一目录标识、统一身份登记、统一接口要求实施(b0676、b1206)。模块数量取采购清单实列的 16 项并另增 1 项(b0804r04、b1198),高于 b0685 的不少于 14 个模块要求。
本层的设立依据是:招标文件对本项目的目标不止于建成数据集,还要求数据集可服务行业用户、可在交易所挂牌上架交易(b0676)。没有这一层,数据集停在资产状态,政策要求的资本转化一段就没有承载物。
与下层的接口是接收第四层的版本封装包与登记信息、接收第五层的能力增量结论作为挂牌说明材料;对外接口按三统一要求提供目录、服务与交易接口。交接判据是版本登记完成、目录可检索、交付通道可用、SLA 指标可度量。本层产出被外部用户消费;其运营工作本身(挂牌定价、客户拓展、交易撮合)在质保期内由我方提供支持、由甲方主导。
本层横向贯穿六层,内容是五类管控对象:数据标准(术语、主数据、参考数据、数据元、指标)、质量规则库、分类分级结论、元数据与血缘库、九大能力域的治理实施记录,另含治理实施要求的决策数据指标体系(b1759)。
治理层设为横向而非前置阶段,取舍理由见第 3.0.1 节第一条:治理规划的九大能力域成果需要数月,而加工必须尽早启动。横向的含义是治理的产出在每一层都生效而不是只在开头生效——标准在采集层决定字段清单、在知识底座层决定类目命名、在加工层决定质检规则、在运营层决定目录元数据字段。
接口是双向的:向各层下发标准与规则,从各层接收元数据与执行记录。交接判据是规则在平台上可执行、执行记录可追溯。本层产出的消费方是全部六层,另外被 DCMM 贯标评估消费。
本层纵向支撑六层,内容是:商用密码服务平台与服务器密码机承担的国密加解密(b0693、b2150r02)、数据分类分级与出域控制、等保三级与密码应用安全性评估、RBAC 与三员分权、审计日志留痕与计量,以及数据库、安全软件、云平台、服务器、存储、网络、芯片的国产化适配与比率测算(b0677)。
安全做成纵向底座而不在每层各设一套安全措施,原因是安全管控的有效性取决于是否存在绕过路径。分级在采集层做、出域控制在网关层做、留痕在交付层做,这三处若各自实现,就会出现分级结论在网关层读不到的情况,而那正是高敏数据出域的典型漏洞。底座的做法是三处共用同一套分级结论与同一套审计日志。
接口是向各层提供可调用的密码服务与安全管控能力,从各层接收调用记录。交接判据是密码应用按设计落点生效、测评与评估结论出具、国产化测算表完成。本层产出被全部六层消费,测评与评估结论同时作为验收材料。
层间接口按施工口径逐条编号列出,每条给出传递内容、形式、触发时机与失败处理。失败处理一列是本表的要点:集成项目的实际故障大多不在接口不通,而在接口通了但上游给的内容不合格,而下游没有拒收的依据。
表 3-3 层间接口清单
| 编号及接口 | 提供方与接收方 | 传递内容及形式 | 触发与检查条件 | 失败处理与恢复 |
|---|---|---|---|---|
| I-01 结构化数据抽取 | 来源数据库→采集任务 | 获准库表字段的只读数据,附来源、范围、时间和增量位置 | 按来源系统确认的频率及低峰窗口执行,先核验权限、查询、字段映射和源端负载 | 连接异常记录任务状态,按验证的策略重试;权限或结构错误先整改;恢复后对已读范围和源端结果对账,重叠部分去重,确认完整后提交进度 |
| I-02 业务接口采集 | 来源业务接口→采集任务 | 接口返回的数据、分页或游标、状态及必要校验信息 | 按确认的调度、事件或订阅触发,核验身份、范围、接口版本及格式 | 区分限流、超时、权限错误和数据错误;保存已成功页面或对象及未完成范围,失败批次保留实际状态,不发布为完整批次;结果未知先查询再决定重试 |
| I-03 文件及图纸接收 | 来源文件通道→文件接收任务 | 原生图纸、工艺卡、报告等文件及清单、版本、校验信息 | 按获准清单接收,确认传输完成及文件完整后解析 | 缺失、损坏、不可读或版本不明的文件逐项登记并补取或修复;原始文件和异常记录保留,未修复对象不得计为合格交付 |
| I-04 设备数据采集 | 设备或历史数据服务→时序及图像采集任务 | 测点、事件、时间戳、序号、单位、帧及实际采样配置 | 按批准的连续、事件或历史补采任务执行,检查时间、顺序、重复、缺帧和延迟 | 中断后按设备支持的时间段、事件号或有效位置补取;不可补取范围记录原因和影响,安排其他合规补采或调整样本,不将缺失数据计为合格数量;处理后重新检查质量与规模 |
| I-05 离线资料录入 | 资料提供单位→录入任务 | 纸质件、扫描件及音视频,附来源、目录、页序或时间位置 | 按接收批次核验授权、完整性、清晰度和文件可读性 | 缺页、损坏和不可辨识内容补交、重扫或由有依据的人工复核处理;保留原件及转换结果,不通过增强生成不存在的文字或事实 |
| I-06 采集成果移交 | 采集任务→加工任务 | 合格批次、源对象标识、采集清单、授权、脱敏及质量结果 | 完成入口检查和对账,接收方核验内容、版本、权限及校验信息后取用 | 未通过对象进入受控异常区并生成整改任务;受影响批次保持未完成状态,复检通过后交接,原始结果及修订关系保留 |
| I-07 采集管理记录 | 采集任务→元数据及治理服务 | 来源登记、实际增量位置、数据量、采集状态和对账记录 | 采集状态变化或批次结束时提交,与实际接收数据关联 | 写入失败保留受保护的待提交记录并告警;先核查差异源于数据、记录或时点,再补录、补采或修订;恢复后对账,禁止无依据重复全量采集 |
| I-08 本体与映射资料 | 采集及预处理任务→本体和映射建设任务 | 规范化业务样本、术语、源编码、对象候选关系及出处 | 本体建设或修订时按授权范围提供,登记来源和版本 | 候选关系冲突或依据不足时保持待核查,检查对象类型、来源系统、有效时间及复合标识,专业确认后发布,不随意选择一个候选值 |
| I-09 本体及规则发布 | 本体与规则管理→标注及适用生成任务 | 本体、术语、标签规范、工艺约束和适用知识版本 | 专业评审通过后按确认的生效计划发布,任务固定记录所用版本 | 未通过版本不发布;已运行任务按影响分析继续、暂停或重建,历史样本按受影响范围复核,不能未经核查全部切换到新规则 |
| I-10 知识检索服务 | 知识库→获准加工及验证任务 | 索引、知识条目、图谱关系、证据位置、适用条件及版本 | 按任务授权调用,基准题目及答案资料独立限制访问 | 服务失败记录请求及状态;使用替代查询方式前确认权限、功能和证据要求仍满足;人工核查结果保留依据,不能以人工检索冒充原接口功能已通过验证 |
| I-11 对象及时间规则 | 映射与规则服务→获准使用任务 | 对象映射、原始与标准编码、有效时间、时区和单位转换规则 | 经确认发布后按生效范围调用,任务记录实际版本 | 映射不成立或时间单位不明时暂停该关联,补充依据及专业确认;新版本不自动覆盖历史结果,按影响范围重算和复核,保留原值及修订记录 |
| I-12 待验证数据移交 | 加工任务→训练及独立评测任务 | 受控冻结数据、数据卡、字典、质检结果、版本指纹、来源授权及血缘 | 完成相应质检和隔离核验后提交;训练子集与基准子集分别封装授权 | 质检或授权未通过的对象不送训;缺项补齐并复核;待验证包不要求预先存在本轮最终验证报告,完成验证后再绑定报告与实际版本 |
| I-13 正式版本登记 | 发布管理→运营平台 | 正式数据封装、版本及许可、数据卡、字典、质检、验证和规定质量评测成果 | 完成相应质量与验证要求、发布审批及登记信息核验后移交 | 缺项或版本不一致时退回补正,保持未发布状态;核验通过后登记、展示和交付,禁止先开放再补授权或验证结果 |
| I-14 加工元数据与血缘 | 加工执行任务→元数据及血缘服务 | 输入输出标识、任务、算子、模型、参数、规则、质量及版本关系 | 按任务执行和状态变化持久化记录,与实际产出关联 | 写入失败保存可核对的执行记录并补传;无法验证来源与处理链的产出不得纳入正式版本;补齐并通过对账后恢复相应流程,不伪造中间环节 |
| I-15 问题与整改任务 | 评测及专业复核→相应责任任务 | 问题样本、判分证据、已确认原因、待核查线索、影响范围及处理要求 | 发现问题并完成必要核验后登记,按实际原因分类派发 | 原因未明时分派补充调查任务,记录承办及验证安排;专家意见结合证据,不直接替代事实;整改后执行质检、复测和回归再确认关闭 |
| I-16 验证结果移交 | 训练评测及场景验证→成果与运营管理 | 知识注入、能力比较、场景结果、实际条件及适用范围 | 报告审核完成且与数据模型版本对应后提交 | 缺少对照、证据或条件不清的结论补充验证,不作为已证实效果发布;对外资料经审核,不把有限测试结果扩成无条件能力保证 |
| I-17 资源与服务交付 | 运营平台→获准用户及对接平台 | 目录、预览、下载、接口及任务服务;保存版本、授权和交付记录 | 公开展示按发布审批执行,实际数据交付按有效授权、订单或相应服务申请执行;国家数据基础设施接口按接入方案联调运行 | 权属、授权或使用限制不明时停止受影响交付;失败或结果未知先查状态,防止重复交付及计量;恢复前复核版本、权限、期限和文件完整性 |
| I-18 治理规则服务 | 治理管理→相关任务及审批流程 | 数据标准、质量规则、分类分级、指标及相应有效版本 | 自动校验规则经样本测试后发布,人工规则配置职责、流程及证据;按确认生效时间执行 | 未经验证或确认的规则不生效;执行失败检查规则及输入;专业判断转相应审核流程,不强行把所有制度转换成机器表达式 |
| I-19 密码与安全服务 | 密码平台及安全组件→获准应用 | 获准密码算法服务、身份与权限校验、脱敏和交付保护策略 | 按应用身份、资源权限、数据分类及设计保护要求调用,检查实际返回结果 | 必要密码能力不可用时停止受影响操作,告警并按恢复方案处理;恢复后核验密钥、授权、数据状态和调用结果;不得经人工审批绕过加密、认证或访问控制,不以明文替代受保护处理 |
| I-20 审计记录提交 | 业务与安全组件→相应审计服务 | 主体、对象、请求或任务、版本、时间、操作和结果,保留来源关联 | 在规定操作节点生成记录,按角色权限保存及汇聚;密码平台日志仅向审计员开放 | 集中写入失败时使用经验证且受保护的持久记录及补传机制;无法可靠留痕时暂停后续受影响操作。已完成的下载、外部调用或其他不可逆操作如实登记并核查影响,不能宣称已回滚;结果未知先对账确认,再恢复或补偿 |
整改任务登记问题对象、来源批次、样本或文件、处理环节、工具及规则版本、证据、影响范围、处理要求和复核条件。任务指向可识别的业务对象及处理动作,原因未明确的先安排调查和证据补充,确认后执行相应修订。
各次执行按输入、输出和前置任务形成有向无环的任务依赖关系,调度前检查缺失依赖、未完成前置条件和循环引用,检查不通过的任务不启动。任务使用固定输入及规则版本,完成后保存状态、结果和实际依赖。
整改生成新的执行任务和修订版本,分别登记问题来源、历史任务及本次输入关系。历史输入、输出、失败和评测记录保留,新任务完成后重新执行受影响的质量检查、训练评测或场景验证。复核通过后更新问题状态及成果版本,未通过时继续建立后续整改任务,不覆盖旧结果或隐去未解决问题。
治理、加工与运营服务通过版本化接口交换规则、数据和执行记录。治理服务发布经确认的数据元、分类分级标签、质量规则和适用版本;加工服务回传实际字段及对象血缘、质量检查结果和问题处理记录;通过发布审批的数据集版本封装包及登记信息提交运营服务;运营服务按有效授权回传使用计量及服务记录。
接口请求包含调用身份凭证、请求标识、业务对象、数据版本、规则版本和时间戳,接收服务核验凭证、权限、范围、版本及结构,不根据请求方自报角色直接授予权限。处理结果返回状态及必要错误信息,保留实际执行对象和结果;重复或结果未知的请求先核查业务状态,避免重复登记、交付和计量。
各次交换记录提交、接收、处理和确认状态,数据文件、元数据及登记信息完成一致性核验。异常记录关联原请求、任务及版本,由对应责任岗位处理,恢复后对账并确认结果,未完成对象保持可查询的真实状态。
异步任务采用持久化队列、幂等处理、失败重试和人工补偿机制。重复请求核对请求标识与业务状态,避免重复登记、重复交付或重复计量;重放任务保留原始请求及重放记录。运营服务不可用时,具备独立运行条件的加工与质检任务继续执行,待发布成果进入受控队列,恢复后核验授权、版本和文件校验值再补办登记。加工服务不可用时,仅对已完成发布且存储、认证和交付链路正常的数据集提供运营服务。接口恢复和人工补偿保留原请求及实际业务状态,不因修改台账抹去失败、重复或已交付的事实。
治理服务不可用时,逐项检查缓存规则的版本、有效期及授权状态。仅在规则仍有效、权限可核验且未触发撤销或风险告警的条件下继续已批准任务;无法确认权限或规则有效性的任务暂停处理,不新增发布和对外交付。恢复后核对变更记录,按血缘识别影响范围,执行补充检查或返工。共享认证、网络、存储和审计服务异常时,依据依赖关系暂停受影响业务,完成恢复验证后再开放调用。
图 3-3 数据生产、验证与发布流程
数据生产在采集、预处理、本体发布、知识终审、标注、合成增强和版本检查等环节实施质量控制,分别明确检查对象、规则版本、覆盖范围、判定条件、执行及复核人员。质量结果与实际输入、输出和处理版本关联,未通过对象进入整改和复检。
后续任务使用已有检查结果前,核验对象内容、版本、规则、授权及适用条件是否保持一致。发生转换、聚合、切分、重标、生成、规则修订或来源变更时,重新检查受影响的质量项;发现跨批次或共用规则问题时扩大核查范围。未受变化影响且证据完整的结果按确认方案引用,保留引用关系及适用范围。
正式数据集质量评测完成首轮全量评测,说明文档、数据质量和模型应用三维度指标 100% 覆盖,并按规定完成缺陷整改及复测。内部环节检查结果作为过程证据提交,不能替代正式评测或减少规定的验证范围。最终成果与实际版本及完整质量记录对应,达到要求后办理发布和交付。
采集、加工、质量检查、评测和交付任务在执行过程中形成相应记录,关联任务标识、输入输出、来源、配置、版本、执行时间、人员及处理结果。采集清单、缺项、标注复核、质量统计、异常和整改资料随实际操作保存,原始记录与后续修订分别保留。
任务完成检查核验规定产出和过程记录是否齐备、内容是否可读、版本是否一致、关键关联是否完整,以及质量和复核结果是否满足条件。检查通过后将任务转为完成;资料未写入、无法校验或缺少确认时,任务保持待补齐或待复核状态,并记录责任和处理要求。
文件、数据对象和记录分别写入时,保存各自持久化及确认状态,完成交叉核验后确认任务结果。失败或部分完成时核查已保存内容及实际业务状态,按恢复方案补传、补录或重新执行,避免重复生成和计量。补充记录标明实际补录时间、原因和证据来源,不以事后补写冒充原始同步记录。
表 3-4 数据生产质量检查与不合格处置
| 检查环节 | 检查对象与内容 | 执行与复核 | 不合格处置 | 形成记录 |
|---|---|---|---|---|
| 采集入口检查 | 检查来源和授权、数据对象与字段或文件范围、采集配置、分类分级及脱敏、格式完整性、原始标识、批次及源端对账 | 采集人员执行,平台完成适用自动校验,数据及安全责任人员按职责复核 | 保留实际接收与失败状态,未经批准的数据不进入一般加工任务;缺授权、字段、文件或质量问题分别补正,复核后恢复受影响任务,不以删除失败批次记录代替处置 | 来源及授权登记、采集批次、原始标识、实际增量位置、脱敏与入口检查、差异及补正记录 |
| 预处理质量检查 | 检查文档结构和页序、表格公式、图像及图纸区域、时序对齐与重采样、编码单位时间转换、缺失重复冲突、结构化文本化及原始来源关联 | 加工人员执行,质量人员复核,专业人员处理业务歧义和低置信内容 | 按问题定位修正解析、转换或规则,低置信及关键业务信息转人工核验;保留原件和前后结果,重新执行受影响检查,不单以程序运行成功认定内容合格 | 规范化数据、处理规则和参数、质量结果、缺项清单、人工复核、修订及复检记录 |
| 本体专业评审 | 检查类目、属性、关系、值域、单位、术语别名、企业编码映射、适用条件及版本;区分同词多义与同义别名,核验层级和关系约束 | 本体建设人员准备,相关业务及专业人员评审确认 | 冲突、缺项和依据不足的条目修订或保持待确认,未通过内容不发布;按影响范围暂停相关标注或生成任务,不扩大到无关任务;修订后重新评审 | 本体文件、术语及别名、映射、专业依据、评审意见、处理及版本记录 |
| 知识专业终审 | 检查条目与图谱事实、来源和证据位置、有效期及适用范围、本体关联、数据字典、检索结果与访问权限 | 知识建设人员自检,业务专家完成专业终审,质量人员核验终审及技术检查记录 | 缺少有效来源、事实冲突、适用错误或未终审条目保持待处理,不用于标注与合成;修订后重新审核及检索验证,保留初始资料和处理过程 | 知识条目与图谱、字典、索引、来源及证据、终审与检索权限测试记录 |
| 标注质量检查 | 检查标签完整性、规范和本体版本、业务准确性、跨标注员一致性、黄金集通过情况及自检抽检仲裁结果;按确认规则记录覆盖和统计范围 | 标注人员自检,质检人员抽检与复核,专家处理争议 | 分析问题来自人员操作、样本、规则或专业歧义,分别安排返工、补充审核、培训或规范修订;达到批次返工条件时按确认范围返工,规范本身有效时保持原规范,修订规则先评审再应用 | 标注规范及实际版本、样本结果、自检抽检、一致性和黄金集统计、争议裁决、返工与复检记录 |
| 合成与增强质量检查 | 核验真实种子、教师模型许可、生成方法、模型及提示词版本、参数、来源标识、用途占比、业务合理性、分布差异、重复与基准相似度;增强同时检查语义和标签一致性 | 生产人员自检,质检及专业人员按规则复核 | 按事实、参数、规则、分布或污染原因修复;不能仅靠降低占比处理错误内容。增强校验不通过的批次整体回退,不纳入数据集版本;基准子集禁止合成数据;重新生成或增强后重新质检 | 种子与许可、生成及增强记录、比例和分布、去重与泄漏检查、业务复核、批次回退、重新执行及复检记录 |
| 待验证版本准备检查 | 核验实际数据与用途、对应环节质检、来源授权、数据卡和字典、版本指纹、血缘、训练基准隔离及评测协议;实验任务样本范围和使用目的明确 | 任务及版本管理人员准备,质量与验证人员检查,权限责任人员核验访问 | 资料或质量未满足执行条件时暂停对应训练验证,补齐后重新检查;冻结实际待验证内容,记录状态和权限。本阶段不预先填写尚未实施的最终验证结论 | 待验证版本清单、实际规模与模态统计、数据卡、字典、质检、指纹、血缘、授权及准备检查记录 |
| 正式版本发布与交付检查 | 逐领域逐用途检查交付规模,合计预训练 615 亿 Token、指令微调 89 万条、偏好 6.6 万组、基准 0.95 万条;覆盖文本图像时序视频,多模态和近 3 年数据条数占比均不低于 40%;检查保真度、完备性、规整性、均衡性、可用性、可信性及规定正式评测与验证成果 | 版本与质量人员核验,业务和专业人员复核,按发布及验收程序确认 | 未满足规模质量、授权、报告或封装要求的不作为合格正式版本发布;按影响范围整改及复检,数据变化后更新实际验证和报告关系。正式评测三维度指标 100% 覆盖、首轮全量、综合得分不低于 85 分,高风险清零,中低风险整改完成率 100% | 正式数据、自描述封装、字典、数据卡、版本指纹、质检及验证报告、正式盖章评测报告、整改复测、来源授权、发布及交付确认 |
质量阈值和统计方法在相应任务方案中明确并确认,已明确的项目数量、质量及安全指标严格执行。
图 3-4 图纸数据加工与板材备料场景验证流程
图纸数据加工以经授权接收的 PLM 任务、原生图纸、有效工艺卡片及工序附图为输入。接收时登记任务标识、文件标识、图号、版本、批准状态、适用对象、来源路径和文件校验值,核对文件清单及关联关系。原生 CAD 文件与扫描图纸分别配置解析流程,保留图元、图层、几何结构和文字要素到原始文件位置的对应关系。工艺资料关联以有效版本、批准记录和适用范围为依据,不能仅凭名称相似或部分编码相同确认配对。
解析、关联、标注、质检、模型验证和场景验证分别记录输入版本、执行配置、处理人员、时间、结果和异常。批次规模、并发数量及解析置信度阈值通过代表性数据试运行确定,记录测试样本覆盖、误识别情况、人工复核工作量、耗时和资源占用,经技术与业务复核后纳入受控作业配置。阈值仅用于任务分流和复核安排,不能替代业务正确性检查,也不改变工艺卡片及工序附图的准确率要求。
表 3-5 图纸数据加工、验证与修订作业要求
| 作业环节 | 输入与处理要求 | 检查与判定要求 | 责任与异常处置 | 成果与交接记录 |
|---|---|---|---|---|
| 文件接收 | 根据批准的访问权限接收 PLM 任务及其图纸、工艺卡片、工序附图和关联清单;记录任务、图号、版本、文件标识、批准状态、适用范围及校验值。源系统访问遵循授权方式和经确认的作业窗口。 | 逐项检查授权、清单完整性、文件可读取性、校验值及关联关系;对需脱敏的数据检查脱敏结果和业务可用性。 | 采集人员执行,数据源责任人员协助核查。缺失、损坏或越权文件进入异常清单,不以空记录替代合格文件;连接异常按接口状态查询及重试策略恢复,防止重复入库。 | 原生文件、接收清单、授权及校验记录、批次标识和异常清单。 |
| 图纸分类解析 | DWG/DXF 保留图元、图层和标注;STP/STEP 提取几何与结构特征;扫描件进行图像处理和文字识别。提取形状、尺寸、材料、公差、技术要求,并建立要素到原始位置的对应关系。 | 检查单位、数值、符号、尺寸关联和技术要求完整性。置信度用于复核分流;对冲突、模糊、未覆盖格式或版式进行人工专业复核,不以高置信度替代正确性检查。 | 加工人员执行,工艺专业人员复核。无法可靠识别的文件隔离并登记原因;通过补充解析规则、原文件核查或人工校核处理,不以推测数值填充关键要素。 | 结构化要素、图元和图层信息、来源位置、解析配置及复核记录。 |
| 工艺资料关联 | 结合图号、零部件编号、变更版本、批准记录、生效范围及业务关联表,确认图纸与工艺卡片、工序附图、设备资料之间的一对一或一对多等实际关系。 | 校验文件版本有效性、引用对象、变更历史和适用条件。编码相等仅作为核验线索;候选关系存在冲突或多个有效对象时,由工艺人员确认。 | 加工人员提出关联结果,工艺专业人员批准。未确认关系保留待核验状态,不用于生成训练答案或工艺结果;已失效资料与现行资料区分管理。 | 带有效期和适用条件的关联表、专业确认记录、相关知识对象及关系版本。 |
| 用途划分与泄漏检查 | 按图纸家族、零部件关系、修订版本及近重复情况归组,再划分训练、开发验证和独立基准用途;衍生、合成和增强样本继承源数据用途限制。 | 检查同源及近重复样本跨用途泄漏。基准评测子集不得使用任何形式的合成数据,也不得作为合成或增强种子输入训练流程。 | 数据管理人员执行,质量人员复核。发现泄漏时暂停相关版本使用,核查已执行训练和评测的影响,重新划分并完成必要的重新训练或评测。 | 用途清单、分组依据、去重及泄漏检查记录、基准封存记录和访问授权。 |
| 标注与专业复核 | 依据有效标注规范、工艺规则、设备条件和图纸要素形成标注;记录标注人员、规范版本、时间、来源和判断依据。 | 按任务类型执行完整性、合法性、业务正确性及一致性检查;分歧经专业复核形成结论,未解决争议不得计入合格交付。 | 标注人员执行,质量人员检查,相关领域专家处理争议。按错误原因确定返工范围;执行错误采用纠正、培训和复核,规范确有错误时履行变更评审并重检受影响数据。 | 标注结果、质检记录、分歧处理结论及必要的规范变更记录。 |
| 合成、增强与候选封装 | 对允许用途的数据开展经批准的合成或增强,记录原始样本、模型、提示词、规则、参数及衍生关系;完成质量检查、去重、计量和候选版本封装。 | 检查事实一致性、适用范围和六维质量;增强校验不通过的批次整体回退。候选包按实际合格量计量,尚未完成的验证不得写为通过。 | 加工和质量人员分别执行与复核。失败结果不进入合格版本;按影响分析修订输入、加工配置或标注,再重做受影响检查。 | 候选数据体、数据字典、数据卡、质量记录、样本清单、版本指纹和血缘记录;状态标明待验证或已完成的实际阶段。 |
| 模型验证 | 使用固定候选版本、训练配置、模型版本和独立测试协议开展相应训练及评测,记录环境、参数、指标、错例和可复现运行信息。 | 核查数据隔离、评测覆盖和结果真实性;对模型输出与专业预期结果的差异逐项记录。训练指标不能替代场景验证或正式质量评测。 | 模型与评测人员执行,业务专业人员复核关键结果。资源、数据、接口或环境不足须建立整改任务,补足条件后执行验证;未执行项目不得判为合格。 | 训练及评测记录、模型版本、测试结果、错例清单和待整改事项。 |
| 板材备料场景验证 | 验证 PLM 任务及图纸接收解析、工艺卡片和工序附图生成、工艺变更自动修订、工艺规则库及设备台账维护、应急工艺通道;验证 DWG/DXF 和 STP/STEP 批量识别、按要素或图层在线预览、PDF 导出和打印,以及结果回传和工艺审核。 | 分别核验功能、输入输出关联和业务结果。全部识别通过后,智能生成的工艺卡片及工序附图内容准确率达到 100%。记录测试总量、识别状态、逐项核验结果、错误明细及计算依据。 | 场景验证人员执行,工艺专业人员核验。识别未通过的情况单独记录并修复,不能从验证记录中隐藏;内容不准确、功能缺失或环境未就绪均不得形成全部通过结论。 | 场景测试记录、生成卡片及附图、预览与导出打印证据、PLM 交互记录、专业审核记录和验证报告。 |
| 原因分析与修订 | 结合原文件、数据血缘、规则与知识版本、模型运行、接口日志、环境状态及测试用例分析错误,区分已证实原因与待验证假设。 | 核查证据能否支持原因及影响范围;共享规则、共同源数据、模型或接口变化须检查关联批次和下游版本,不能仅按当前批次划定范围。 | 相关责任人员联合分析,专业人员复核。原因未明时先安排诊断取证和必要隔离,明确负责人及完成期限;依据验证后的原因安排补采、重解析、重标注、规则修订、模型或接口修复。 | 问题单、诊断记录、原因证据、影响清单、修订任务和版本变更记录。 |
| 复测与正式发布 | 修订后完成受影响环节检查、原错例复测及必要回归测试;完成数据集正式质量评测,核对领域、用途、规模、模态、时效、血缘、安全和交付资料后发布正式版本。 | 保持有效测试判据和强制指标;测试用例或标准答案确有错误时,经专业评审修订、记录版本并重做受影响比较,不因连续失败降低验收标准。问题关闭须有通过记录,不能以待观察代替。 | 质量、评测及相应业务人员复核,授权人员批准发布。未满足条件的版本保持待整改状态;已发布版本受影响时进行受控暂停、修订及通知,保留原版本和审计记录。 | 正式数据集版本、质量评测和场景验证报告、修订及复测记录、成果交接清单和运营登记资料。 |
各加工环节完成后记录检查结果,未通过检查的输出不得作为合格数据进入后续生产或发布。对后续训练、场景验证或质量评测中发现的问题,依据样本血缘、规则和模型版本、执行记录及业务复核结果确定影响范围。涉及共享数据、共同规则、模型或接口的缺陷,同时检查关联批次及下游成果;已发布成果受影响时,采取受控暂停使用、修订和重新验证措施,并保留通知及处置记录。
成果发布前完成加工质量检查、模型验证、场景验证和正式质量评测,核对数据体、说明文档、来源及处理记录、质量报告、场景验证报告和交接清单。各类结果分别留存、相互关联,未完成或未通过的项目不得以其他环节通过结果替代。
容量计划分别核算原始数据、加工中间结果、合格数据集、索引、血缘、审计日志、模型及检查点、训练和评测临时数据、备份副本的存储需求,同时核算采集带宽、解析和质检吞吐、训练及推理吞吐、人工标注复核工时和各阶段峰值并发。四类数据集按领域及用途分别统计,预训练合计 615 亿 Token、指令微调合计 89 万条、偏好数据合计 6.6 万组、基准测试合计 0.95 万条;不同用途的计量单位分别保留,不相互折抵。
资源配置以数据清单、实测文件大小、处理耗时、模型运行记录和实施进度为依据,记录测量时间、测试数据覆盖、软硬件配置、并发条件、统计方法和适用限制。项目实施中按数据增量、有效吞吐、队列等待和资源峰值更新容量计划,核对剩余工作量与剩余有效作业时间。预计不能按计划完成时,及时调整处理配置、作业排期和合格人员或资源投入,履行必要变更手续并重新验证,不降低交付规模、质量要求或强制指标,也不自行顺延合同节点。
表 3-6 数据处理工作量与资源容量测算
| 测算对象 | 计量基础 | 计算与配置方法 | 实测验证要求 | 偏差处置 |
|---|---|---|---|---|
| 合格语料及文件容量 | 按供需计划、产品工艺设计、制造过程、产品质量分别统计预训练 276、70、105、164 亿 Token;指令微调 40、10、15、24 万条;偏好 3.2、0.8、1、1.6 万组;基准 0.4、0.1、0.2、0.25 万条。 | 预训练 Token 数由受控分词器及配置统计;按领域和文件类型实测编码后的字节数、索引大小和封装开销。预计数据体容量采用各类目标量乘以该类实测单位容量后求和,图像、视频、时序及附件单独计量,避免漏计或重复计算。 | 保存分词器版本、配置、样本范围、计量脚本、文件清单和统计结果;核验抽样覆盖、去重结果与实测单位容量的适用性。 | 数据构成或编码方式变化后重算容量并调整配置;保持各领域及用途交付量,不以汉字数、文件数或原始采集量替代合格交付量。 |
| 去重处理与索引容量 | 统计文档、片段、图像和其他样本数量、长度分布、指纹大小、候选对数量及索引开销。 | 精确重复先以校验值或标准化指纹筛查;近重复按数据类型建立候选检索与相似性核验流程。运行时间按指纹生成、索引构建、候选召回、精确核验及结果写入分别测量;索引内存与磁盘容量按实测规模及增长量配置。 | 采用经人工确认的重复和非重复样本验证误删、漏检及跨业务域重复检出情况;监测分桶倾斜、候选数量和峰值内存。 | 调整索引、分区、分批和并发方式,并重新验证覆盖及质量;跨域检查仍覆盖应检对象,不能以跨域抽样替代既定全量去重流程。 |
| 图纸解析与人工校核 | 以实际授权资源清单统计 DWG/DXF、STP/STEP、扫描图纸、工艺卡片和附图数量,按文件大小、复杂度、版式及可读取状态分组。 | 每组自动处理工作量为文件数乘以实测平均处理时间;人工工作量分别累计必核项目、低置信度项目、关系确认和异常处理的实际工时。并发配置依据 CPU、内存、存储读写和适配工具许可的实测约束确定。 | 代表性试运行覆盖各格式、复杂结构、历史版本和异常文件,记录成功率、错误类型、复核比例、人工时间、吞吐及峰值资源。 | 补充解析适配、调整调度和复核人员;资源不足时提交补充投入和排期措施,缺失资料建立补充获取任务,不能仅在数据卡列缺口后视作达标。 |
| 时序采集、存储及派生数据 | 按来源系统及测点清单登记实际记录频率、记录结构、运行时长、事件触发条件和保留要求。 | 周期型记录量按各数据流实际记录速率乘以有效采集时间后求和;事件型记录量依据实测事件频次单独估算。容量计入记录体、时间及设备标识、索引、压缩、必要副本和备份;派生窗口数据单独统计来源及容量。 | 核对源端和接收端计数、时间同步、丢失重复、异常中断及数据分辨率;验证场景需要的原始变化特征是否保留。 | 根据确认的点位、频率和业务工况调整资源。派生降采样不得替代需要保留的原始数据,不以任意切窗、重复记录或改变条目定义凑足模态与时效指标。 |
| 图像、视频和全辐射热成像容量 | 分别核算 15 台红外图像采集设备、6 台在线高温热成像设备和 21 台在线热成像设备;区分 CMOS 熔池图像、温度矩阵、普通预览图及相关元数据。 | 原始帧容量按有效采集时长、实际帧率和每帧字节数计算;编码视频按实测码率乘以时长再除以 8 换算字节数。全辐射温度矩阵、标定和测温参数、时间戳及设备信息另行累计;同一文件的容器与内容不得重复计量。 | 在正常工况、焊接起止、缺陷事件、温度变化和通信恢复条件下验证采集完整性、同步精度、数据可解码性及 SDK 原始数据获取。红外图像采集设备保持帧频不低于 30fps 的能力。 | 留存期限、触发条件、事件前后记录和派生降帧须经过业务、质量及安全评审并验证不遗漏所需事件;不能先行假定只留焊接段或炉次段。必要时增加存储及传输能力,不以丢弃必需原始帧或温度信息解决容量不足。 |
| 标注、偏好判断及专业复核工时 | 指令微调 89 万条、偏好 6.6 万组分别核算,另计其他用途所需标注、专家争议处理及整改复核。 | 按任务类别累计首次处理、复核、仲裁和预计返工工时。每类工时等于相应任务数量乘以实测单项时间;需要多名人员独立判断的任务分别累计投入。预标注节省量以真实试运行结果核算,不预设全部样本只需快速复核。 | 记录样本难度、预标注可用率、复核要求、错误率、人员有效作业时间及质量结果;不同工艺和数据类型分别测量。 | 调整人工与工具协同方式、补充合格人员并安排培训和质量复核;专家库不少于 50 人的建设要求与实际可投入工时分别落实,不能把名册人数等同于全时生产能力,也不因此下调交付任务。 |
| 训练算力与模型存储 | 按实际选用模型、参数规模、上下文长度、模态、精度、训练方式、计划训练 Token 或样本量及训练轮次建立任务清单。 | 在拟用软硬件配置上实测有效训练吞吐,阶段运行时间按计划训练工作量除以实测吞吐计算,并分别计入初始化、数据读取、验证和检查点保存时间。总资源计划按继续预训练、指令微调、奖励模型及偏好对齐的实际任务累计。模型权重、优化器状态、检查点和临时文件分别计量。 | 保存设备及数量、软件版本、并行策略、批量、序列长度、数据构成、显存峰值和稳定运行记录;多模态及长上下文任务单独验证,不能仅用短文本吞吐外推。 | 通过经验证的批量、并行和调度配置提高利用率,必要时补充符合适配与安全要求的算力;变更后复测效果及资源占用,不以跳过训练阶段或降低数据规模替代资源保障。 |
| 基准及场景评测资源 | 基准测试 0.95 万条按领域、题型、模态、模型阶段及评测轮次分别核算;另计场景功能验证、问题复测和正式质量评测工作量。 | 以固定测试协议测量每类任务的处理时间、并发效率、内存和存储占用,按各类执行次数累计资源时间;模型加载、人工评审、报告生成及异常恢复单独计入。评测环境与训练数据访问权限实施隔离。 | 固定数据和模型版本、判分配置、适用随机种子及运行条件,记录每轮实际耗时和结果;检查训练、推理和评测并发时的资源争用。 | 按进度预留可核实的评测资源和执行窗口,调整调度或补充资源并重新验证;不得假定任意一次重放成本完全相同,不因训练占用而取消评测或开放基准数据用于训练。 |
| 血缘、任务状态和审计容量 | 分别统计源文件、样本、派生关系、任务执行、规则和模型版本、状态变更及审计事件;记录一对多、多对一及重复执行关系。 | 按各记录类型的数量乘以实测记录大小计算基础容量,并分别计入索引、关系边、必要副本和备份。按峰值任务并发及单任务事件量测算写入速率,按常用追溯范围测量查询开销。 | 检查样本能否追溯至来源及全部关键处理步骤,并可查询所用工具、模型、提示词、规则、质量结果和授权信息;验证断点恢复、重复提交及批量任务下的关系完整性。 | 优化写入批次、存储分区和查询索引,补充资源并重测;保留所需样本级和处理级关系,不退化为仅有批次号或无法关联的算子日志。 |
| 存储、网络与阶段峰值资源 | 汇总原始区、加工区、合格数据区、索引、模型、检查点、日志、血缘、临时文件及备份,按保留期限和并发时间分别统计。 | 各时间窗口按同时存续的数据及运行任务计算实际占用;复制与备份按真实策略计入。网络按采集、批量传输、训练读取、评测和交付的并发流量核算;资源余量依据实测波动、故障恢复及扩容周期确定并记录批准值。 | 核对资源配置、采购与可用时间、已占用容量、可用吞吐、峰值压力、恢复耗时及项目关键节点;检查所有业务共用资源时的合计负载,避免同一资源被多个任务重复全额分配。 | 建立容量预警与处置记录,提前完成优化、扩容或排期调整;涉及设备、网络和安全变更的履行相应手续,保持合同节点、数据质量及全部交付要求。 |
影像数据采集与留存策略按设备类型、作业工况、质量分析及追溯用途配置。分别保存业务所需的原始帧、视频、全辐射测温数据及时间同步信息,保证数据能够关联到设备、工件、任务和对应工艺过程。采用事件触发留存时,验证触发条件、漏触发情形、事件前后记录范围、通信中断恢复和原始数据完整性;在验证通过并完成审批前,不以触发截取或降帧结果替代必需的原始记录。容量不足时按剩余空间、预计增量和补充资源周期提前处置,不能自行删除未达到保留条件的数据。
血缘采集随数据接收、解析、转换、标注、合成、增强、检查、训练验证及版本发布同步执行,关联源文件、样本、任务、工具、模型、提示词、规则、配置和输出版本。任务状态与血缘记录保持一致,记录持久化失败时保留实际执行状态,阻止依赖缺失证据的发布操作,并按故障记录恢复和核对。发现历史记录缺失时,依据可信原始文件、执行日志及版本清单开展补充核查,明确已确认和无法确认的关系;无法证明质量或来源的成果不计入合格交付,按影响范围安排重处理与复验。
数据集加工生产平台、数据集运营服务管理平台和数据治理平台通过受控接口协同运行。各系统分别管理其业务对象、服务身份和访问权限,建立用户及服务身份映射、数据集标识关联和版本关联机制。数据集从接收、加工、检查、验证到发布移交持续保留来源及处理记录;运营侧登记的数据集版本与加工侧正式发布版本建立可核验对应关系,不因跨系统移交丢失原始标识、版本指纹和血缘。
身份认证集成保留各系统必要的角色分离和最小权限控制。元数据、血缘及审计信息按业务用途、数据分类分级和授权范围查询,跨系统汇聚时继续执行原有访问限制。商用密码服务平台的登录、管理及密码调用审计日志仅向审计员开放,不能因统一检索或日志汇聚而扩大其他角色的读取权限。涉及权限撤销、账户停用和服务身份变更时,及时同步相关访问控制,记录生效结果与异常处置。
数据集加工生产专项智能工具链支持数据采集、数据预处理、领域本体构建、知识库构建、数据标注、数据合成、数据增强、数据质量检查、数据验证和数据集项目管理。配置思维链、长上下文、多轮对话、多模态对齐、智能标注、生成增强、质量分布分析、生成控制评测、验证归因九类工具,交付二十五个工具链功能组件。各组件通过作业标识、数据版本、规则版本和运行日志关联,记录输入、处理参数、输出及异常结果。
数据集运营服务管理平台提供数据及服务管理、订单管理、交付管理、清算管理、审计管理、平台服务与 SLA 保障、对外接口能力。数据集发布前完成版本登记、权属及授权材料审核、使用条件配置和交付方式确认;订单、授权、交付、计量、清算及审计记录关联保存。平台服务设置运行监测、故障告警、服务请求受理、恢复验证和服务报告机制。
数据治理工具管理数据元与数据标准、质量规则、元数据、数据血缘、数据分类分级和访问权限。规则发布实施版本控制和审核审批;加工任务引用确定的规则版本,处理完成后回传质量结果和血缘记录。
在采购的通用服务器上完成数据集加工生产平台的安装、配置和适配,在采购的接入连接器上完成数据集运营服务管理平台的安装、配置和适配。部署前核验处理器、操作系统、内存、存储、网络接口、数据库及依赖组件的版本与兼容性,形成部署清单和安装记录。对安装完成的服务执行启动停止、权限访问、接口调用、数据交换、异常恢复和业务流程测试,保存配置、日志和测试结果。
数据治理平台与相关加工、运营服务按照经确认的资源及网络部署方案集成,记录实际承载节点、服务地址、端口、数据存储位置和调用关系。训练、推理及评测环境实施相应访问隔离,基准数据采用独立授权和受控访问,原始业务数据及敏感资料不得因模型调用或评测上传至未经授权的外部环境。跨安全区域业务访问通过受控接口执行身份认证、权限校验和审计;数据服务、管理维护及系统内部依赖分别配置必要访问规则,不开放无关端口或越权数据库访问。
完成服务器密码机国密算法与应用接口调试,核验密钥管理、密码调用、权限分离和日志审计功能;完成采购硬件的网络连接及适配,核对链路、地址、时间同步、数据传输和异常告警。涉及现有网络和系统配置变更时,履行变更审批、备份、实施及恢复验证手续,按实际测试结果确认集成状态。
各服务通过经批准的身份映射和认证接口协同,分别设置人员及服务账号权限。加工过程数据、运营订单及清算数据、治理管理数据按业务职责分别保存;元数据、血缘和审计记录交换遵循分类分级、最小必要和原始访问权限要求。商用密码服务平台的审计日志仅向审计员开放,统一汇聚、备份或检索不改变该限制。
加工中间数据和待验证版本不得作为正式数据集对外发布。对外交付核查正式版本、发布审批、数据权属及许可、接收方授权、使用条件和交付范围,保存交付清单、版本指纹、传输结果及接收确认。目录可见范围与数据下载或使用权限分别控制;授权到期、撤销或版本暂停时,及时停止相应访问并记录处理结果。
订单、交付、计量和清算记录由运营服务关联管理,通过受控接口提供必要状态和核对信息。治理标准及规则按版本发布,加工作业保存所引用版本、适用范围和执行结果;权限策略变更及时生效,执行记录保留当时策略依据,不能以任务使用历史配置为由继续已撤销的访问。
表 3-7 平台功能与服务接口
| 系统 | 服务功能 | 输入对象 | 输出对象 | 接口与访问控制 |
|---|---|---|---|---|
| 数据集加工生产平台 | 执行数据采集、预处理、本体与知识库构建、标注、合成、增强、质量检查、验证、版本发布及数据集项目管理;按作业调度运行九类25个工具功能组件,记录输入、处理参数、输出和异常。 | 获准的源系统数据与离线资料、经专业审核的知识成果、数据标准与质量规则、标注规范、加工配置。 | 加工样本、质量检查与验证记录、算子级血缘、候选数据集与正式发布版本及版本封装包。 | 向数据集运营服务管理平台提交正式版本及登记信息,向数据治理平台回传元数据、质量结果和血缘,按授权调用密码服务完成加解密与签名。接口按服务身份、数据分类分级和授权范围校验;加工中间数据和待验证版本不对外发布。 |
| 数据集运营服务管理平台 | 提供目录与元数据、上传、下载、权限、动态更新、检索预览、版本、服务、对外接口、登记注册、确权、挂牌展示、交易合同、交易费用、全流程审计等功能模块,以及平台服务与SLA保障能力;受理服务请求,记录运行监测、故障告警、恢复验证和服务报告。 | 加工侧正式发布的数据集版本及登记信息、权属与授权材料、质量检查与验证结论。 | 对外数据集目录与数据服务、订单、合同、交付、计量、清算、审计及服务质量记录。 | 对外提供目录、服务与交易接口,按接收方身份、订单或服务授权、用途、期限和转用限制放行;目录可见范围与下载使用权限分别控制;授权到期、撤销或版本暂停时停止相应访问并留存记录。 |
| 数据治理平台 | 管理数据元与数据标准、质量规则、元数据、数据血缘、数据分类分级和访问权限策略;规则发布执行版本控制与审核审批,保留适用范围和生效记录。 | 各系统报送的元数据、作业执行记录与质量结果,以及经批准的标准、规则和分级依据。 | 经审批的标准与规则版本、分类分级结论、血缘关系、授权策略及治理执行记录。 | 按版本化接口向加工侧和运营侧下发标准与规则;元数据、血缘与审计信息按业务用途、分类分级和授权范围提供查询,跨系统汇聚不扩大原有访问权限。 |
建立应用、组件、设备和网络连接的部署清单,登记各服务实际安装位置、承载资源、软件版本、依赖关系、存储位置、接口地址、端口、服务账号和管理责任。数据集加工生产平台在采购的通用服务器上安装和适配,数据集运营服务管理平台在采购的接入连接器上安装和适配,并完成服务器密码机国密算法调试及采购硬件网络连接。部署清单与安装记录、配置文件、授权清单及联调结果关联保存。
按业务重要程度、数据变化量、备份能力及实际资源制定备份和恢复方案,明确故障检测、影响评估、停止受影响操作、状态核对、数据恢复、业务验证和恢复批准的操作步骤。恢复时间及可接受数据恢复范围分别测量和记录,不以服务进程启动成功代替业务恢复。涉及共享存储、身份服务、网络或密码服务的故障,检查全部依赖业务及已有结果的有效性;恢复后核对任务、版本、订单、交付及审计记录,确认一致后恢复相应操作。
表 3-8 系统部署、资源配置与故障恢复要求
| 系统或服务 | 部署与组件要求 | 数据输入及成果 | 资源配置依据 | 故障处置 | 恢复验证 |
|---|---|---|---|---|---|
| 数据采集服务 | 按源系统授权、接口条件及安全区域配置数据库、接口、文件、设备流和离线资料采集组件,登记实际承载位置。不同来源分别管理增量位置、文件校验值、事件序号或快照,不把所有采集组件当然部署到接入连接器。 | 接收业务系统、设备和离线资料的获准数据;输出原始文件或记录、批次清单、授权及校验记录、来源位置和采集异常。 | 按各来源实际增量、文件大小、测点频率、峰值流量、保留时间、网络条件和补采窗口核算带宽、缓存及存储。 | 连接失败先判断超时、授权、限流、源端维护或数据异常;按已确认策略重试。持久化采集位置与已落地数据核对一致后推进,不因重启跳过未落地数据;未知结果先查状态。 | 通过增量对账、重叠补采与去重核查遗漏和重复;验证时间、主键、文件及事件连续性,异常处理完毕后恢复正常任务并保存记录。 |
| 数据集加工生产平台及专项智能工具链 | 在采购的通用服务器上安装和适配加工平台,配置九类25个工具功能组件、作业调度、质量检查、版本及血缘记录能力;记录各组件实际资源和依赖。 | 接收原始数据、有效知识成果、规则及配置,输出加工样本、检查结果、候选数据集、验证记录和正式版本。 | 按各领域及用途目标量、格式复杂度、实测单位处理耗时、并发和中间结果大小核算CPU、内存、存储及必要计算资源,不把合同数据量直接等同于瞬时负载。 | 依据任务阶段和持久化状态决定重试、续作、重处理或回滚,保留失败记录;输出写入失败不得计入合格版本。增强验收不合格的批次整体回退,其他故障按实际事务边界及影响范围处理。 | 核查任务唯一标识、输入版本、已完成输出、血缘及检查记录,防止重复生成、重复计量和遗漏;修订输出重新完成适用质量检查。 |
| 知识本体、知识库及检索服务 | 在经确认的部署资源上配置本体、知识库、图谱、检索及业务标识映射服务;专业审核通过的内容方可发布,记录依赖和接口。 | 输入规范化资料、企业编码、专业确认记录和有效标准;输出本体、术语、知识条目、图谱、来源索引和映射关系。 | 按实体、属性、关系、文档片段、向量或其他索引的实际数量及大小测算存储、构建时间、查询并发和内存峰值。 | 发布失败停止该版本使用;仅在旧版本仍获授权、业务有效且与当前调用兼容时恢复其服务。检索故障时可按获准方案使用结构化查询和专业复核,但不得使用未经终审知识或虚构检索证据。 | 检查版本一致性、查询正确性、证据出处、访问权限及受影响任务;业务要求无法满足时暂停相应自动处理,修复后重检,不把人工临时结果当作原自动能力已通过验收。 |
| 行业模型训练、推理及评测服务 | 配置训练、推理和评测环境及模型接入控制;建立实际资源和访问隔离关系,基准数据独立保存并限制训练任务访问。 | 输入获准的数据、知识、模型和配置;输出模型及检查点、训练日志、各阶段评测报告、知识注入与偏好对齐等验证成果及整改记录。 | 按模型、模态、上下文、训练方式、计划工作量、实测吞吐、显存峰值和评测轮次计算资源与时间,并核算并发争用。 | 训练中断先校验检查点完整性及适用的数据、模型、优化器和运行状态,按恢复方案续训;评测保留失败记录后重跑;推理暂停受影响请求并核对已执行状态。共享设备、网络或存储故障按依赖关系逐项识别影响范围,分别核验各侧受影响的任务与已有结果,不以环境隔离直接认定其他侧未受影响。 | 核对数据及模型版本、代码、依赖、配置、随机状态和关键结果;记录恢复前后差异及原因,必要时重新执行受影响评测,不能仅凭同版本和同种子认定结果完全一致。 |
| 数据集运营服务管理平台 | 在采购的接入连接器上完成安装和适配,配置16项功能模块及订单、交付、清算、审计、服务监测和对外接口能力,记录实际组件及承载关系。 | 接收正式版本及登记、权属、授权和质量资料;形成目录、订单、合同、交付、计量、清算和服务质量记录。 | 按数据集及版本量、并发用户、接口频率、交付流量、订单与审计数据量测量容量;按真实资源验证模块扩展能力。 | 区分模块故障和共享依赖故障,核对受影响订单、交付和清算状态;外部操作结果不明时先查询或对账,防止重复交付或清算。交付方式变更须核验合同及订单约定、授权、安全措施和接收方确认,不自动转为离线交付。 | 核验目录、授权、订单、交付及清算记录的一致性,完成传输校验、接收确认和审计补充核查;按分级SLA记录故障时段、响应、恢复和影响,生成服务质量报告。 |
| 数据治理平台及治理服务 | 配置标准、质量、元数据、资产、分类分级、指标及数据服务等治理能力,记录与加工、运营和来源系统的实际集成位置。 | 接收元数据、执行及质量记录;发布经批准的标准、自动检查规则、专业审核要求、指标定义和授权策略,形成可追溯治理记录。 | 按数据元、规则、对象、关系、样本及事件量计算存储和索引,按峰值写入、查询和规则执行量验证性能。 | 规则发布失败保留原实际状态,评估旧版是否仍合法、有效和兼容后决定恢复方式;已撤销授权和失效规则不得随版本回退重新生效。备份频率与恢复范围依据经确认的数据恢复要求和演练结果配置,不预设每日备份即足够。 | 恢复后核对规则生效范围、元数据、样本关系、血缘及权限;基于可信执行记录核查缺失关系,无法确认的记录保持异常并处置,不能推定所有血缘均已补齐。 |
| 商用密码服务平台与服务器密码机 | 完成商用密码服务平台部署及采购的1台服务器密码机国密算法调试,按实际设备与软件资源验证调度能力、接口适配、密钥权限及三员管理,不虚构额外密码机或双机资源。 | 接收获准的密码调用,提供指定数据集、用户及企业关键数据、运营元数据等加解密,以及哈希、签名验签和对应审计记录;数据使用授权另由相应业务控制执行。 | 按算法、数据长度、批量规模、并发及实际加密和验签频率测量性能,核对设备参数与应用端到端耗时。 | 必要密码服务不可用时停止受影响操作,不通过人工审批改走明文、跳过验签或绕过密钥控制。审计故障时保留可持久化的真实执行证据;不能可靠记录的后续受控操作暂停。已发生的外部动作按实际状态核查,不谎报已回滚。 | 修复后核验算法调用、密钥和权限有效性、数据完整性及日志完整性,完成业务对账。审计补录保留原事件时间、证据来源和补录时间;密码平台日志仅向审计员开放。 |
| 采购硬件网络连接及适配 | 完成采购设备的安装连接、网络接口与通信适配,登记设备、端口、地址、时间同步及获准访问关系;与现有网络的变更按批准方案执行。 | 输入设备数据及系统通信请求;输出可核验的传输数据、运行状态、连接记录和告警。 | 按设备接口能力、同时采集流量、数据传输和异常补传的峰值核算链路负载,验证实际吞吐及丢包情况。 | 定位设备、链路、地址、权限、时间同步和协议异常;按批准方案恢复或切换具备条件的链路,不通过关闭访问控制或未经许可改路恢复业务。 | 核对连接、时间戳、采集连续性、补传、重复数据及告警恢复,完成相关系统联调和业务确认后恢复正常运行。 |
人员账号与服务账号分别管理,禁止共用个人账号执行系统任务。人员账号按岗位角色配置功能和数据访问范围;服务账号绑定具体应用、组件和调用用途,限定允许访问的接口、资源及操作,记录授权人、生效时间、有效期和撤销状态。账号新增、变更、停用和权限调整按审批流程执行,权限撤销及时传递至相关服务,缓存授权同步失效。
跨系统调用按接口安全方案配置可验证的调用方和服务方身份认证,校验证书或其他获准凭证的有效性、适用对象及撤销状态。凭证由受控方式保存和轮换,轮换前完成兼容及连接验证,保留操作记录;失效、来源不明或权限不足的凭证不允许继续调用。
每次数据访问分别核验身份、角色权限、业务用途、资源范围、数据分类分级、字段限制及授权期限。具有较高访问级别不代表可以访问全部同级或低级数据;仍须满足该资源的具体授权条件。接口对获准字段执行查询、脱敏、下载或处理操作,对拒绝请求记录必要的主体、资源、时间、原因及策略版本,避免在错误消息中泄露敏感数据。
对外交付及定向开放同时核对数据权属和许可、正式发布状态、接收方身份、订单或服务授权、用途、期限与转用限制。缺失必需的分类、授权或使用条件时停止该项交付,转入资料核验和审批处理;审批通过后重新执行检查,不能通过人工放行绕过必要密码、权限或审计控制。
对原始数据及文件、业务标识映射、本体和知识库、数据标准、质量及安全规则、标注规范、工具及代码、模型、提示词模板、执行参数、数据集、评测数据和判分配置实施版本管理。各对象记录唯一标识、版本号、内容校验信息、适用范围、审核状态、生效时间、修改原因及发布记录,并建立输入、执行和输出之间的关联关系。
加工作业启动时固化本次执行使用的数据和技术配置,记录任务标识及完整配置清单。运行中需要修改数据、规则或模型时,先按影响范围暂停相应任务,履行变更审核,再以可追溯的新执行记录继续处理;不得覆盖原配置后仍宣称属于同一次未变更执行。身份权限和紧急安全限制按当前有效策略校验,任务绑定历史版本不能延续已经撤销的权限或已经禁止的处理方式。
标准、知识、工具或模型变更后,依据对象依赖、样本来源、执行记录和发布关系识别受影响批次、数据集、模型及下游服务。分别确定是否需要重新解析、标注、检查、训练、评测或发布,记录评估依据、责任人员和处置结果。共享规则或共同来源存在问题时,检查相关历史版本;不能仅以批次不同认定不受影响。
正式发布包关联实际使用的版本清单和验证资料,支持按样本、任务、数据集及模型追溯;修订版本保留与原版本的差异、影响范围和复验记录。原始版本、版本审批、配置变更和验证记录按批准的保留策略保存,修订操作保留操作者、时间、原因和前后版本对应关系,不覆盖既有版本。
训练推理服务设置训练环境、推理环境、评测环境及模型接入网关。训练环境开展数据配比预实验、继续预训练、指令微调和偏好对齐,接收经批准并冻结的数据集版本,输出模型检查点、训练配置、运行日志和训练结果,不直接向业务系统开放推理接口。推理环境提供在线推理、批量生成和检索增强服务,按数据分类分级和授权范围配置内网隔离区、受控区及对应访问策略。评测环境独立保存冻结的基准评测数据、评测程序、评分规则和运行配置,对待评模型执行确定版本的评测任务。
模型接入网关统一实施身份认证、权限校验、数据分级检查、协议适配、版本路由、调用计量和审计。调用记录关联用户、任务、模型版本和数据版本。提示词及响应内容按分类分级策略脱敏、加密和限权保存,审计人员仅在授权范围内查阅;留存期限届满后按照审批流程清理。
训练环境与评测环境使用独立存储和访问凭证。基准评测数据以只读方式提供给评测作业,训练任务无权访问;训练数据制作和版本发布时实施样本交叉检查,防止评测样本及其近重复内容进入训练数据。推理受控区仅调用已批准的数据集和知识库。涉及未脱敏工艺、质量数据的任务在内网隔离区执行,逐项核验业务必要性、访问授权及输出限制,禁止将原始敏感数据转发至受控区。跨区请求经过网关校验,仅传递获准的数据字段和处理结果。
训练推理服务向运营平台提供模型版本、评测报告和数据集与模型的关联记录,向治理服务提供质量检查结果及问题归因记录,向场景验证任务提供经授权的推理和评测接口。接口采用最小权限控制,记录请求、处理结果和异常情况。
训练任务异常后,校验最近有效检查点、数据版本和环境配置,确认一致后恢复训练。评测任务失败后保留失败日志,使用登记的数据、模型、代码、依赖和参数重新执行,并核对结果差异。推理服务异常时暂停受影响的场景任务,保留排队状态和已完成结果,恢复后检查任务幂等性再继续执行。共享资源故障按依赖关系识别影响范围;既有评测报告如涉及受损数据、错误配置或失效模型版本,暂停使用并重新验证。
跨系统数据关联分别识别设计对象、实物对象、生产任务、工艺过程和质量记录。部件或物料编码用于识别设计及物料类别,实物编号或批次用于识别具体生产对象;工单记录生产任务,炉次或加工事件记录一次实际作业,检验批及检验记录反映相应质量检查对象和结果。关联时保留各对象原有编号及其业务含义,不能将工单号、炉次号或检验批号直接作为工件编号。
依据BOM、工单明细、投料或领料记录、工序流转、装炉及加工记录、报验和检验明细,建立对象之间经核实的一对一、一对多或多对多关系。每条关系记录来源系统、原始记录标识、对象类型、关系类型、适用版本或时间范围及业务确认依据。同一工单涉及多件工件、同一炉次包含多个批次、同一工件发生返工或复检时,分别保留明细和事件,不合并为唯一对应关系。
历史资料缺少实物级标识时,记录实际可确认的批次或任务粒度,并登记缺失信息及补充核查任务。不能仅凭编号相近、时间接近或相同材料自动确认实物关联,也不能把加工侧生成的记录标识当成源系统已存在的工件编号。
建立业务对象映射记录,登记来源系统、原始表或文件、原始记录标识、对象类型、业务编号、目标对象及编号、关系类型、关系基数、来源证据、适用时间、适用版本、核验状态和责任人员。原始编号按来源保存;统一物料编码、组织及人员主数据作为相应对象编码对齐的基础,关联生产和质量对象时继续核验实际业务关系。
优先采用来源系统中已建立且经核验的关联键、业务明细及有效流转记录。对历史编号、版本变更、拆分合并、返工和跨系统编码差异,结合批准记录及业务证据建立映射,不以字符串相同或多个候选中分数最高直接判定有效。自动匹配规则记录适用范围、规则版本和测试结果,疑似匹配进入专业复核。
关系状态区分已确认、待核验、冲突和失效,状态变化保留审批及证据。存在多个候选或不一致证据时,禁止未经确认选择其中一条作为训练标签或质量追溯依据。缺失关系建立问题清单,明确待补资料、责任人员、影响的数据用途及处理期限;补齐后重检关联和受影响样本。无法确认的关系保持其真实状态,相应数据仅在经过质量评估、允许缺少该关系的用途下使用,不计入要求关联完整的合格样本。
时间处理分别保存源端时间、业务事件时间、采集接收时间和加工时间,登记时区、时间单位、原始精度、来源设备及同步状态。时间格式转换使用受控规则,保留原始时间值与转换后时间;原记录时区或单位不能确认时,先进入异常核验,不能直接套用默认值。显示时间与存储时间采用明确的转换规则,避免跨日和跨时区记录被错误排序。
设备时序与视频、图像关联前,核查设备时钟、接口时间戳、触发信号和采集链路。通过可识别的同步事件或其他可验证依据测量时间偏移及变化,记录校正方法、测量区间、误差和规则版本。网络传输及队列延迟不直接当成设备时钟偏移;接收时间不能在缺少证据时替代真实作业发生时间。
按数据类型和业务用途确定对齐粒度、窗口长度、容许偏差、插值或重采样方法。连续测量、离散状态及报警事件分别处理;状态切换和缺陷事件保留原始时点,不采用不适用的插值生成虚假状态。补齐值标记方法及来源,保留缺失、异常和数据间断信息。重采样结果与原始序列建立对应关系,检查短时峰值、异常事件和工艺特征是否丢失。
工单报工、检验登记等人工记录分别保存实际业务时间与录入时间,关联时结合工件、设备、作业记录及业务确认,不按录入时间就近强配。对迟到、乱序及补传数据重新核验受影响窗口和关联结果,生成修订记录并重检已使用样本;预测类样本按预测时点限定可用信息,避免使用当时尚未发生或尚不可获得的后续结果。
工序、部件、产品、物料和质量特性等业务对象采用业务主管部门审核发布的代码和字典。字典记录代码、名称、定义、适用范围、版本、生效日期和管理责任人。采集与加工任务记录所用字典版本;对缺失值、无效代码及无法匹配的记录建立问题清单,完成业务确认后更新映射关系并重新校验。字典变更发布前开展影响分析,识别受影响的数据、加工规则和数据集版本,保留变更审批、转换处理及复核记录。
按业务场景、工艺路线及数据用途确定必须具备的对象关联清单,并在检查前固定适用范围。热处理质量分析核验工件或批次、加工事件、工艺曲线及检验结果之间的关系;焊接质量分析核验工件、实际焊接事件、工艺参数、影像和检验结果之间的关系。未经过相应工序的对象不强行配置炉次或焊道关联,适用性判定保留业务依据。
对适用对象全量统计关联状态。必要关联完整率为全部必需关系已经核实的对象数除以应建立这些关系的适用对象总数,再乘以100%;缺失、冲突和待核验对象计入应检查范围,不通过删除异常对象缩小分母。按业务域、对象类型、时间范围及来源批次分别统计,同时列示总量、已确认量、缺失量、冲突量和待核验量。
关联正确性由业务专业人员按确认的核查方案验证,覆盖自动匹配、人工确认、跨版本、返工、复检及存在冲突的记录,逐条对照源记录和关系证据。正确率按核验正确的关系数与实际核验关系总数计算,统计结果同时注明核验范围和发现的错误类型,不能用键字段非空率代替业务关联正确率。
试运行形成基线及整改清单,最终交付按确定的场景质量要求、数据集质量指标和验证结果判定。需要完整关联的样本,相关关系未核实前不计入该用途的合格交付;发现关联错误时追溯其影响的数据、模型和验证结果,修订后重新检查。数据卡记录真实缺口及限制,不能以记录缺口代替完成整改或降低验收要求。
表 3-9 业务对象关联与核验要求
| 关联对象 | 来源资料与核查对象 | 关联与核验要求 | 结果及追溯记录 | 异常处理 |
|---|---|---|---|---|
| 设计部件、BOM与生产对象 | 核查PLM的零部件、BOM、图纸和变更资料,以及生产任务与实际使用版本的对应记录。 | 区分部件类型、BOM位置、设计版本与具体实物或批次;核验BOM生效范围、工单明细和生产所用版本。一个部件编码对应多个实物时保留各实物或批次明细,不把设计编码作为唯一实物标识。 | 记录设计对象、版本、BOM关系、工单或实物标识、适用范围及来源证据;原始编号与加工侧记录标识分别保存。 | 缺少生产关联记录时建立待核查项;变更版本冲突交业务人员确认,未经核实不用于生成工艺或质量关联标签。 |
| 施工令、项目、订单与物料领用 | 从ERP、WMS及经授权的项目、订单和领料资料核查实际业务关系;登记各系统实际存在的标识和字段。 | 核验项目或施工令与订单、领料、退料、转移及批次明细,保留拆单、合单和数量分配关系;同项目或同日领料不能直接证明属于同一实物。 | 保存来源单据标识、明细行、对象关系、数量和单位、业务时间及确认依据,关联退料和调整记录。 | 缺单、数量不符、跨项目使用或编码冲突分别登记,补查业务记录后确认;不得按时间最近或名称相似强行配对。 |
| 生产工单、工序与实物或批次 | 核查MES生产工单、工序执行及经授权的报工、流转记录,结合适用的工艺和对象标识。 | 按工单明细确认产品或部件、数量及执行工序,分别识别正常加工、返工和复制作业。工单与工件、工序事件的关系可为一对多或多对多,按实际明细保存。 | 记录工单、明细行、工序、执行事件、对象、开始结束时间、版本及来源证据,关联每次修订或重新执行。 | 流转中断或实物标识缺失时保持实际可确认粒度并登记影响,不宣称已实现实物级贯通;补齐后重检相关样本及质量结论。 |
| 热处理事件、工件或批次与检验结果 | 核查热处理群控数据、获准的加工任务或装载记录,以及QMS等来源的实际检验资料。 | 按设备、实际作业事件、对象和处理时间核验过程曲线与质量结果;具备炉次记录的按炉次核验,连续或其他不以炉次组织的加工按真实事件组织,不能强造炉次号。区分返热、复处理和复检,确认结果对应的工艺阶段。 | 保存设备、事件、工件或批次、工艺参数、时序范围、检验对象及结果关系,记录时间校正和业务确认依据。 | 对象关系、工艺阶段或检测归属无法确认时,不形成已确认的工艺—质量配对样本;未关联曲线是否可用于其他用途须经质量评估和授权确认。 |
| 焊接事件、焊道、参数与影像及检验结果 | 核查实际焊接任务、工位或机器人、SCADA参数、图像视频时间戳、工艺记录和焊后检验资料。 | 依据工件或批次、设备、任务、焊道位置、打底/填充/盖面类型、作业起止及同步证据建立关系。多次焊接、返修和重复通过分别记录执行事件;不能只用工件号加焊道类型形成必然唯一的标识。 | 保留来源标识,并为加工记录建立唯一事件标识及其生成规则;关联参数窗口、影像片段、工艺条件、缺陷位置和检验结果,记录对齐误差及核验状态。 | 触发信号、时间同步或对象信息不足时标记待核验,不按时间邻近直接给影像附加缺陷标签。补采或专业核查后修订关系并重检已受影响的数据。 |
| 检验批、检验记录与生产或材料对象 | 核查QMS检验明细、报验资料、样本对象、材料或生产批次、生产任务及检验报告。 | 明确检验批与样本、检测项目、结果和适用对象之间的关系;区分抽样检验、全检、复检及报告修订。批次抽检结论与单件实测结果分别保存,不能将一个样本的数值复制为整批每件的实测值。 | 记录检验记录和报告版本、受检对象、检测项目及单位、检测时间、结果和确认依据,关联原检与复检。 | 报验关系缺失、对象冲突、报告失效或检测单位不一致时暂停相关关联判定,核查后修正;原始检验记录保留,不生成无证据的根因追溯样本。 |
| 报警事件、设备、处置和维修结果 | 核查SOS报警及处置、售后工单、备件记录、设备档案,结合适用的EAM维修资料及复查结果。 | 按设备、事件标识、时间和处置流程核验关系;识别重复报警、合并工单、一次维修涉及多个报警及再次发生的情况。报警现象、诊断原因、处置动作和复查结论分别记录,不把报警自动视作已证实故障根因。 | 记录各事件及工单原标识、对象关系、处理阶段、诊断证据、人员确认和结果;关系状态据核验结果确定,不预设调研可信度等级。 | 诊断或复查缺失时保留已知事实并登记待补资料;仅在满足相应用途条件时形成报警或状态样本,不把未确认原因用作确定的故障标签。 |
| 主数据物料编码与各业务系统物料对象 | 核查主数据管理平台的物料编码及经授权取得的ERP、WMS、SCM等系统物料资料和业务明细。 | 以有效主数据编码对齐对象,同时核验名称、规格、型号、单位、版本及生效范围;区分物料类型、库存批次和实物编号。历史编码、替代料和单位转换按批准的业务规则处理,不能仅凭代码相同认定所有属性一致。 | 保存源编码、标准编码、适用系统、关系类型、属性校核结果、转换规则及确认记录,保留历史映射有效期。 | 无主数据记录、重复编码、属性或单位冲突进入差异清单,由责任人员核查;在确认前不覆盖原值或自动合并对象,修正后重新检查受影响的采购、库存及加工数据。 |
加工生产链路上决定交付能否成立的,往往不是顺利情形下的处理能力,而是条件不具备时的处置方式:图纸受加密保护无法直接读取、扫描件缺页或遮挡、合成样本事实一致性不足、模型网关中断、基准数据疑似被训练任务触及。此类情形在长周期实施中并不罕见;处置方式若不预先约定,作业现场便会以放宽判据的方式自行消化,交付数量看似完成而质量依据已经失效。
表 3-10 选入的十项处理任务按两条标准确定:其一,该任务直接决定某一用途子集能否形成,如原生图纸解析之于产品工艺设计数据集、合成样本生成之于指令微调与人类偏好对齐子集;其二,该任务一旦失效将波及下游全部结论,如样本血缘追溯与基准评测隔离。每行的运行条件与恢复及结果判定两列是判据——前者写明该任务允许启动的前置条件,后者写明重新计入合格交付所需的证据;处理措施与异常处置两列是动作。贯穿各行的处置原则是补齐条件后重新验证,招标文件已规定的规模、质量、准确率、覆盖率与时间要求不随异常处置下调;其中基准评测数据与训练域的隔离一行判定最严,出现疑似污染即停止相关数据与结果用于发布和验收,重建基准后重新评测。
表 3-10 关键处理任务的运行条件与异常处置
| 处理任务 | 运行条件 | 处理措施 | 异常处置 | 恢复及结果判定 |
|---|---|---|---|---|
| 原生图纸解析 | 取得获准读取的图纸及有效版本,核验DWG/DXF、STP/STEP等格式、文件完整性、访问权限和可解析状态。 | 按原生图元、图层、标注及几何结构提取要素,保留尺寸、材料、公差、技术要求与原始位置的关系;扫描或仅有影像的图纸按相应图像处理流程执行。 | 加密文件通过合法授权的读取或解密方式处理,不绕过保护;格式、版式或内容异常时登记并补充适配。低置信度、冲突及关键工艺要素交专业人员复核,不把个别人工结论未经验证就自动推广为通用规则。 | 按格式和复杂度覆盖测试,核验图纸要素及工艺结果;人工复核作为质量措施,不能替代批量识别、原生格式支持及场景准确率等功能的实现和验证。 |
| 文档版面、表格及图文解析 | 核对原始文件、页码、版式、扫描质量、附件及版本状态,区分原生文档、扫描件和手写内容。 | 还原章节、阅读顺序、表格单元格、合并关系、公式和图文引用,保存来源页及位置;固定版式可使用经测试的模板,其他版式配置相应解析流程。 | 不可读、缺页、遮挡或识别冲突先核查原件,采用适合的图像处理、补充模板或人工转录与复核;无法确认的文字和数值保持异常,不猜测补齐。 | 对照原件检查内容、结构和来源定位;技术标准表格按单元格级精度验证。新模板和规则发布前检查适用范围及历史数据影响。 |
| 合成、思维链及对话样本生成 | 使用获准的真实业务种子和经审核的知识,核验教师模型许可、调用环境、用途及样本配比;基准评测子集禁止任何形式的合成数据。 | 记录源样本、模型、提示词、规则、参数和衍生关系,执行事实一致性、格式、推理步骤、答案、重复及分布检查;不合格候选拒收,合格结果按实际数量计入允许用途。 | 合成质量不足时分析种子、知识、提示词、模型及检查规则,补充真实资料和合格人员处理,修订后重新验证。必要时调整经批准的合成配比及资源安排,不自行降低子集目标量或顺延合同节点。 | 按来源及用途核验合格量、质量和覆盖。人工修订仍保留合成来源,不因专家复核就改标为真实基准样本;发布前确认基准与合成过程隔离。 |
| 规则、模型及专业质量检查 | 依据各数据类型、业务风险和用途建立检查项,区分可自动执行的规则、需要语义判断的项目及必须专业复核的项目。 | 规则检查结构、格式、取值及明确业务约束;模型辅助检查语义和复杂关系,并保留可核对依据;专业人员处理关键判断和冲突,形成逐项结果。 | 模型或规则通道故障时暂停依赖该检查的放行,安排经确认的替代检查或修复;不能仅通过规则就默认语义检查通过。采用人工检查时明确同等检查项目、覆盖范围、责任和记录,不能任意用少量抽检替代全量要求。 | 重新核验受影响检查及样本,满足各阶段规定覆盖;正式首轮全量评测及说明文档、数据质量、模型应用三维度指标100%覆盖等要求保持不变。 |
| 样本血缘与版本追溯 | 为来源、样本、任务、工具、规则、模型、提示词、质量结果和版本建立可关联标识及持久化记录。 | 在加工执行和成果发布过程中同步记录输入输出关系、变更及状态,支持按样本和模型追溯来源与处理路径,保存一对多和多对多关系。 | 记录写入失败时保留实际执行证据并停止依赖完整血缘的发布;修复后对照可信文件、任务和日志核查。无法证明来源或处理过程的结果不得计入合格交付,不退化为只有批次号的追溯。 | 检查血缘完整性、版本一致性、查询可用性及故障恢复后的缺口;必要时重处理相关数据并重新验证,不以扩大返工范围代替缺失血缘的建设。 |
| 检索增强与带依据回答 | 知识条目经专业终审,具有来源、版本、适用范围及权限,检索输入与输出均在授权范围内。 | 按对象、条款、全文和必要的语义检索组合获取证据,核查出处、有效状态和上下文后形成回答;区分当前有效资料与有明确历史查询目的的旧版资料。 | 检索不足、证据冲突或关键资料缺失时,记录问题并提供可核验的候选信息或转专业处理,不生成无依据的确定答案。修复索引、补充资料或调整查询后重新验证。 | 核验答案与证据一致、出处可定位、权限有效及场景功能完成;人工确认用于质量复核,不能把临时人工服务当成自动问答能力已经达标。模型生成样本不能经人工确认后转入基准集。 |
| 设备工况识别、异常发现与诊断 | 核验测点质量、时间同步、设备结构、机型、现场及运行工况,按真实历史资料建立正常和故障样本及其标签依据。 | 按工况开展基线分析和候选规则生成,结合机理规则台账、时序分析、历史回放、相似故障搜索和在线检测验证效果,记录适用设备、条件及效果。 | 基线不足或工况变化时补充合格样本、核查测点与规则适用性;可使用经专业确认和验证的分工况规则辅助处理,但不得将阈值检查替代必须实现的时序模型、规则编排和诊断验证。 | 使用适用历史样本及场景测试核验误报、漏报、异常发现与原因分析,并验证处置及备件建议;区分报警、异常、诊断假设及确认故障,不虚构现场标签比例或保证消除全部耦合干扰。 |
| 模型接入、授权与版本路由 | 模型和服务经过许可、安全及资源核验,接口具备身份认证、权限控制、版本登记和可审计调用条件;行业模型按私有化部署要求实施。 | 对请求执行数据分类、授权、协议及版本检查,按获准模型路由,记录任务、模型、数据和调用结果,防止敏感业务数据转发到未经授权环境。 | 模型、网关或外部依赖异常时停止受影响调用并核查实际状态;切换到经批准的模型或服务前,验证许可、部署、数据限制、功能和性能。替代资源不具备条件时保持暂停并修复,不绕开网关直连。 | 验证服务恢复、权限、日志及任务结果,对模型变更重新评测;不得以单一替代模型的可运行状态认定原要求的模型支持、多模态能力或场景效果全部通过。 |
| 独立基准评测及沙箱运行 | 基准数据独立封存,训练任务无权访问,固定题型协议、判分规则、数据和模型版本、代码、依赖、配置及适用随机种子。 | 执行同源及近重复检查,监控访问与数据流向,按模型阶段开展可追溯评测;保存输入版本、执行记录、原始结果和报告。 | 发现未授权访问或疑似训练污染时,立即停止相关数据和结果用于发布或验收,保全记录,核查泄露范围、接触模型、训练任务及衍生影响。确认污染后,隔离受影响样本和版本,重新建立满足规模、业务覆盖及独立性要求的基准并执行评测。 | 原受污染评测结果不得继续作为有效能力证明;重新验证数据隔离、基准独立性和相关模型结果,保留事件及版本历史。不能仅换版本号、重新抽取相同近重复样本或删除日志来宣称恢复独立性。 |
各技术章节在总体架构中各有确定的落点。下图给出每一段所处的层次与相邻关系;各段之间交什么、交到什么状态算完成,由第 3.0.16.1 节的接口矩阵逐条给出。
图 3-5 本卷各技术段在总体架构中的位置。跨层的技术段在其主要落点处列出,次要落点在该节正文交代。数据来源:章节划分依本投标文件目录;架构层次依招标文件 b1215;设备数量依硬件采购清单(b2150r02—b2150r06)。场景验证(T5 专业场景、T14 通用场景)跨第五层与第六层展开,不属单一层,另见图 3-2 底部。
有四段的位置需要补一句说明,因为它们在图上不止一个落点。
T7 系统集成方案跨第一层到第三层:它在第一层与第二层之间负责连通与联调,在第三层负责提供对象主键映射表与时间基准折算规则。把主键映射放在集成段而不是加工段,理由是它的工作对象是源系统之间的关系,而不是某一批数据。
T2 专项智能工具链落在第四层,但它的消费方横跨第四层与第五层:预标注、合成、去重、分布均衡类工具服务于加工,评测引擎、归因与血缘追溯类工具服务于训练评测与回流。25 个工具的分类与归属见本卷「专项智能工具链总述」节的交付清单。
T5 与 T14 场景验证跨第五层与第六层:验证作业在第五层的推理域内执行,验证结论作为挂牌说明材料进入第六层。本包只做验证不做场景建设这一边界,在两节开头各写明一次(依 b1603)。
T9 需求书逐条应答矩阵不落在任何一层:它是对本卷全部内容的索引,产出是条目与页码的对应关系,服务于评审核对而非数据流转。
本项目的指标分两类,承诺方式不同,各节按同一口径执行。
第一类是招标文件已规定数值的指标,包括:四类数据集的规模(预训练 615 亿 Token、指令微调 89 万条、强化学习偏好 6.6 万组、基准测试 0.95 万条,含逐数据集规模表给出的四个业务领域分域数值)、模态种类不少于 3 种、多模态数据条数占比不低于 40%、近 3 年内时效性数据条数占比不低于 40%、软硬件设备整体国产化比率不低于 80%、智能工具链 9 大类 25 个、数据集运营服务管理平台功能模块不少于 14 个(服务采购清单实列 16 个)、数据标注专家库入库专家不少于 50 人、参与建设的数据企业与高校院所不少于 5 家、高质量论文不少于 5 篇、发明专利申请不少于 3 项、软件著作权不少于 6 项。这一类指标按招标文件规定的数值整额承诺并整额验收,不设基线档与目标档之分,不随实测结果逐轮修订,亦不以「合计达标」替代任一分项。 其中四类数据集的分域规模,按第 3.0.13 节表 3-11 逐格承诺。
第二类是招标文件未规定数值、由我方在实施中给出的过程类与优化类指标,例如标注员间一致率、业务对象必要关联完整率、文档解析置信度阈值、数据标准覆盖范围、缺陷整改关闭进度等。这一类指标采用基线档与目标档两档承诺:基线档是我方承诺的下限,阶段验收以它为准;目标档是逐轮优化的目标值,用于过程管理与阶段评议。两档同时列出,并写明测量方法、测量时点与测量主体。首轮实测基线逐轮修订的机制只适用于第二类指标,不适用于第一类。
计量口径统一如下:规模类指标(Token 数、条数、组数)按版本封装时的统一计量规则计量,以去重、去污染、通过版本检查节点后的净交付量为准;占比类指标(多模态占比、时效占比)按数据卡字段统计,分母为该数据集的净交付条数;质量类指标(六维度)按《高质量数据集质量评测规范》(TC609-5-2025-04)的指标定义测量。
表 3-11 四类数据集按业务领域的分项净交付量承诺
| 业务领域 | 预训练数据集(亿 Token) | 指令微调数据集(万条) | 强化学习偏好数据(万组) | 基准测试数据集(万条) |
|---|---|---|---|---|
| 供需计划 | 276 | 40 | 3.2 | 0.4 |
| 产品工艺设计 | 70 | 10 | 0.8 | 0.1 |
| 制造过程 | 105 | 15 | 1 | 0.2 |
| 产品质量 | 164 | 24 | 1.6 | 0.25 |
| 合计 | 615 | 89 | 6.6 | 0.95 |
招标文件下限(b0670、b0683) | ≥600 | ≥80 | ≥6 | ≥0.9 |
表 3-11 数据来源:分域数值依招标文件逐数据集规模表(b1583r02—b1598r02 各集规模要求);下限依 b0670、b0683。
表中每一格均为我方的承诺交付量,逐格计量、逐格验收。任一格未达承诺量,不以其他格超出部分抵补,亦不以合计数达到下限为由免除该格的交付责任;当期未达的,在后续期补足并在数据卡与阶段验收记录中登记未达原因、补足计划与补足结果。
凡涉及覆盖范围与准确程度的表述,一律按趋向与逐步接近的方式写,并配基线值、验收口径与回退机制。以几处典型为例:对象主键贯通按「首期在试点部件族内达到基线值、后续期逐步接近全量贯通,未贯通部分在数据卡中列明」承诺;数据标准覆盖按「首轮覆盖四个加工业务域的核心对象、随治理实施逐步扩展至九个管理业务域」承诺;缺陷整改按「首轮全量评测后对判定为缺陷的项目逐项立单整改并复测,复测未通过的继续立单,趋向全部关闭」承诺。
带基线值、验收口径与回退机制的承诺,在建设期内的每一次抽检与阶段验收中都有明确的判定依据,招标方据此逐期核算实际进展。本方案的覆盖类与准确度类指标(均属上述第二类)一律按基线加改进的方式承诺,并在数据卡与质量报告中逐期披露实测值;属第一类的招标规定值不适用本段,按规定数值整额承诺。
表 3-12 各类指标的承诺方式
| 指标 | 指标类别 | 承诺值(第一类)或基线档(第二类) | 目标档 | 测量方法与时点 | 未达时的处置 |
|---|---|---|---|---|---|
| 四集规模及其分域量 | 第一类,招标规定值 | 615 亿 Token/89 万条/6.6 万组/0.95 万条,并按表 3-11 逐格达标 | 不设目标档,按分期计划逐期完成当期量 | 版本封装时按统一计量规则计量,分期核验 | 在后续期补足并在数据卡登记,不调整计量规则,不以合计抵补分项 |
| 多模态数据条数占比 | 第一类,招标规定值 | 不低于 40% | 不设目标档,按分集测算值组织生产 | 按数据卡模态字段统计,版本冻结时核验 | 调整后续批次的采集与加工配比补足 |
| 近 3 年内时效数据占比 | 第一类,招标规定值 | 不低于 40% | 不设目标档,按分集测算值组织生产 | 按数据产生时间统计,版本冻结时点一并登记 | 增加近期批次采集量补足 |
| 软硬件设备整体国产化比率 | 第一类,招标规定值 | 不低于 80% | 不设目标档 | 按台数与金额两个口径分别测算并取其低者,选型定稿后核验 | 调整选型并重新测算,测算表随验收提交 |
| 标注员间一致率 | 第二类,我方给值 | 按标注任务类型分别设下限,低于下限即返工 | 逐批提升并趋向稳定 | 按抽样复标计算,每批次核验 | 返工并修订标注规范,必要时重做培训与考核 |
| 业务对象必要关联完整率 | 第二类,我方给值 | 试运行形成基线值与整改清单 | 按整改计划逐期提高 | 对适用对象全量统计,按业务域、对象类型、时间范围与来源批次分列总量、已确认量、缺失量、冲突量与待核验量 | 关系未核实的样本不计入要求完整关联的用途;数据卡记录真实缺口与限制,不以记录缺口代替整改 |
| 场景验证通过判据 | 第二类,我方给值(招标已列明门槛的场景按招标门槛) | 各场景按基线档判据通过 | 按目标档判据组织优化 | 按各场景验证流程执行并留见证记录 | 按归因结果形成整改任务单,进入下一期加工 |
表 3-12 数据来源:规模与占比依招标文件 b0670、b0683、b1361;一致率与判据依 3.2.6.3.5 标注要求、3.2.6.5 各场景验证要求;承诺方式依本节统一规定。
第 3.0.2 节至第 3.0.13 节给的是技术视角的架构:有哪几层、层间传什么、数据怎么流、在哪里判定。业务架构给出同一副架构在业务上的运转方式:哪个业务角色在哪个环节出现、在那里承担什么判定或产出。业务角色与技术层次一一对位之后,甲方各业务部门在架构中的位置、以及双方的责任分界即落到具体环节,而不停留在总的分工表述。
业务角色按归属分三类。甲方侧是业务部门与数据治理组织,承担口径确认、数据源授权与成果验收;我方侧是项目组的各作业与质检岗位,承担加工执行与过程判定;双方共同参与的是口径评审组、版本评审组与专家库,这三处的判定需要业务知识与加工口径同时在场,由任何一方单独判定都不成立。
表 3-13 业务角色在各环节的责任与对应判定
| 业务角色 | 归属 | 出现在哪些环节 | 在该环节承担什么 | 对应的门与落点 |
|---|---|---|---|---|
| 业务部门(工艺、质量、生产、供销、设备等) | 甲方 | 需求确认、本体类目确认、数据源授权、成果验收 | 确认术语与编码口径、确认工序字典与工艺卡口径、书面确认分类分级结论 | 口径检查节点③;表 3-18 前置条件 |
| 数据治理组织(委员会、办公室、数据专员) | 甲方主导、我方支持 | 标准发布、规则发布、口径争议裁定、考核 | 发布数据标准与质量规则库,裁定跨部门口径争议 | 横向治理层;表 3-3 接口 I-18 |
| 数据源责任人 | 甲方 | 采集接入 | 提供连接信息与数据字典,处置连接失败与对账差异的阻塞项 | 入口检查节点①;表 3-3 接口 I-01 至 I-05 |
| 采集作业责任岗 | 项目组 | 采集接入 | 执行五类通道取数、增量识别与入口脱敏,登记批次台账 | 入口检查节点①;本卷 T12 |
| 加工作业责任岗 | 项目组 | 预处理与规范化、加工十环节 | 执行解析、规范化与各工具链算子,按算子写入血缘 | 预处理门②;本卷 T1、T2 |
| 口径评审组 | 双方共同 | 本体版本发布前 | 评审类目与关系、核对与企业既有编码的对齐情况 | 口径检查节点③ |
| 知识库终审岗与专家库 | 项目组与甲方专家 | 知识库交付前 | 核验条目出处与三元组可核性,抽审知识条目 | 终审门④ |
| 标注员与标注质检岗 | 项目组 | 标注 | 按标注规范执行标注,计算标注员间一致率并组织抽检返工 | 标注门⑤ |
| 专家库仲裁 | 甲方专家为主 | 标注争议、选型优劣判断、归因不明的整改任务单 | 对标注分歧与工程优劣作出判定,回溯评定选型偏好 | 标注门⑤;表 3-3 接口 I-15 |
| 加工质检岗 | 项目组 | 合成与增强之后 | 核验合成样本的来源标识、占比与事实一致性 | 合成增强门⑥ |
| 版本评审组 | 双方共同 | 版本冻结前 | 核验规模、模态、时效与六维质量指标,核验血缘与数据卡齐备性 | 版本版本检查节点⑦ |
| 评测与场景验证岗 | 项目组 | 训练评测、场景验证 | 组织多阶段评测与错题归因,按场景判据给出数据可用性结论 | 本卷 T13 与场景验证各节 |
| 运营岗 | 甲方主导、我方质保期内支持 | 登记、挂牌、订单、交付、清算 | 执行确权挂牌与交易撮合,对外交付经网关计量留痕 | 第六层;本卷 T3 |
| 安全与保密责任岗 | 双方各设 | 全环节 | 执行分类分级、出域控制与密码服务调用,审计日志留痕 | 纵向底座;表 3-3 接口 I-19、I-20 |
表 3-13 数据来源:判定主体一列依表 3-4 七道质量检查节点的判定主体设置;甲方侧角色依本卷「数据治理规划和实施服务 · 技术标准验证要求 · 数据标注规范建设要求」节的治理组织设计与招标文件 3.2.6.1 的能力域要求;接口编号依表 3-3;责任分界依 b1575、b1576 的移交规定与第 2.2 节的交付责任。
表 3-13 有三行需要单独交代,因为它们是实施期最容易出现责任真空的地方。口径评审组一行,评审结论须有甲方业务部门的书面确认才算通过,这一点在表 3-18 里列为前置条件;逾期未确认时按我方建议口径先行并把该批数据标注为待确认状态,确认后批量复核,待确认状态的批次在版本检查节点前须转为已确认。
专家库一行,选型优劣判断在现场没有现成记录,须由专家库按既有验收记录、售后工单与同类矿井运行反馈回溯评定,这项工作的工作量在实施计划里单列。运营岗一行,本包交付的是平台能力与数据集版本,挂牌定价与客户拓展等运营工作在质保期内由我方提供支持、由甲方主导,分工见本卷「技术创新与机制创新」节运营体系一段。
技术视图按层组织,回答「系统分几层、层间传什么」;功能视图按功能域组织,回答「平台对使用者提供哪些功能、这些功能分别服务哪个环节」。两个视图指向同一套系统:数据集加工生产平台、数据集运营服务管理平台和数据治理平台通过受控接口协同运行,各系统分别管理其业务对象、服务身份和访问权限,元数据、血缘与审计信息按分类分级和授权范围交换(各系统的服务功能与接口控制见表 3-7)。
表 3-14 功能域、所含功能模块与服务的环节
| 功能域 | 所属部分 | 包含的功能模块或工具 | 服务的环节 | 详述位置 |
|---|---|---|---|---|
| 采集接入 | 加工生产 | 五类通道接入、增量识别与水位线、入口脱敏、批次成形与台账、采集记录 | 第二层采集接入 | 本卷 T12 |
| 知识底座 | 加工生产 | 本体建模与版本管理、知识库与图谱、检索服务、主数据与对象主键映射、时间基准折算 | 第三层知识底座 | 本卷 T1 |
| 数据加工 | 加工生产 | 9 类 25 个工具链,覆盖解析、清洗、标注、合成、增强、质检等十个加工环节,共用任务骨架与血缘写入点 | 第四层加工生产 | 本卷 T2 |
| 训练与评测 | 加工生产 | 训练域、评测域、推理域及其上的统一模型接入与评测网关;评测沙箱与错题归因 | 第五层训练与评测 | 本卷 T13 |
| 治理管控 | 治理开发工具 | 数据标准管理、质量规则库、元数据管理、血缘管理、分类分级、九大能力域执行记录 | 横向贯穿六层 | 本卷 T4 |
| 运营服务 | 运营服务管理 | 16 项功能模块:目录与元数据、上传下载、检索预览、版本与动态更新、权限、确权与挂牌、登记注册、数据集服务、订单、交易合同、交易费用、交付、清算、审计、对外接口,以及平台服务与 SLA 保障能力;另按三统一要求建设接入国家数据基础设施的对接能力 | 第六层运营服务 | 本卷 T3 |
| 安全与运维 | 三部分共用 | 身份与权限、密码服务调用、脱敏与出域控制、审计日志、运维监控与 SLA 度量 | 纵向支撑六层 | 本卷 T10、T11 |
表 3-14 数据来源:运营服务模块清单依 b0804r04 实列 16 项全额交付,另增平台服务与 SLA 保障模块 1 个(b1198)为我方额外服务能力,两者合计 17 个;招标列明数量为 16 个,b0685 的不少于 14 个为下限,口径说明见第 1.2.2 节;工具链 9 类 25 个依 b0917;三域一网关依 3.2.6.2;治理工具平台依 b1336;功能域划分为我方实施口径。
功能视图与技术视图之间不是一一对应。采集接入、知识底座、数据加工、训练与评测四个功能域各自对应一个技术层次,而治理管控与安全运维两个功能域横跨全部层次,运营服务功能域则同时承担对内的版本登记与对外的交易交付两类职责。功能域这样划分,是为了让平台的建设次序能按功能域排期:公共的身份权限、元数据与血缘、审计日志先行建设,其余功能域在其上分批投产,避免各功能域各建一套底层能力(建设次序见表 3-16)。
本项目各项建设内容之间的生产逻辑为有向无环(依 b1215)。接口不固化会出现三种情形:同一事项两处重复执行且口径不同、某一事项两处互相认为由对方承担而均未执行、上游产出与下游输入对不上。接口矩阵、五条贯通主线与五条统一约定用于消除这三种情形。
矩阵按上游、交接物、交接判据、下游四列组织。交接判据规定交付物达到何种状态即算交接完成,下游据此判定是否具备开工条件。
表 3-15 技术方案卷各节的接口矩阵
| 上游节 | 交接物 | 交接判据(达到此状态即算交付) | 下游节 |
|---|---|---|---|
| T12 数据资源采集接入 | 带批次号与采集记录的原始数据,写入落地区;数据源登记台账 | 接入四要素齐备、格式合规校验通过、入口脱敏生效、批次台账登记完成 | T1 四大数据集加工生产 |
| T12 数据资源采集接入 | 增量水位线与对账结果 | 每次增量作业的水位线已更新、与源系统计数对账差异在约定范围内 | T1、T4 数据治理 |
| T7 系统集成方案 | 对象主键映射表、时间基准折算规则 | 映射关系经口径评审、可信度已登记、折算规则已在平台实现 | T1、T5、T14 场景验证 |
| T7 系统集成方案 | 平台安装与适配结论、国密加解密联调记录、硬件联网记录 | 四级测试门控通过、密码调用链可用、设备数据可取回 | T1、T10 安全方案 |
| T4 数据治理体系 | 数据标准(术语、主数据、参考数据、数据元、指标)、质量规则库、分类分级结论 | 标准经评审发布、规则在平台上可执行、分级结论已书面确认 | T1、T2 工具链、T3 运营平台 |
| T4 数据治理体系 | 元数据与血缘库、治理执行记录 | 元数据可检索、血缘可从版本回溯到算子、记录可支撑贯标评估 | T1、T3、T13 训练推理 |
| T1A 数据加工生产(一) | 规范化样本、本体版本与术语表、知识条目与图谱、检索索引 | 入口检查节点与预处理门通过、本体经口径检查节点评审、知识库经终审门 | T1B 数据加工生产(二)、T2、T5、T14 |
| T1B 数据加工生产(二) | 经质检与验证通过的批次、标注规范与一致性记录 | 标注门与合成增强门通过、质检六维度达判据、验证结论出具 | T1C 四集规模与数据卡、T13 |
| T1C 四集规模与数据卡 | 冻结封装的数据集版本:数据体、数据卡、质检与验证报告、血缘清单 | 版本检查节点通过:规模、模态、时效达承诺基线,血缘完整,数据卡字段齐备 | T3 运营平台、T13、服务方案卷质量评测节 |
| T2 专项智能工具链 | 25 个工具的可用实例、接口文档、配置与测试用例 | 单工具验收通过、公共层接口联调通过、任务状态机可追溯 | T1 各节、T13 |
| T13 训练推理技术服务 | 知识注入有效性报告、多阶段评测结论、能力增量量化、错题归因任务单 | 评测可复现(同版本同种子同结果)、增量结论有对照基准 | T1(定向回流)、T5、T14 |
| T5/T14 场景验证 | 各场景验证报告:所需数据就绪度结论、指标实测值、通过判据判定、整改任务单 | 验证流程留见证记录、判据判定有依据、未通过项已归因 | T1(下一期加工计划)、服务方案卷质量评测节 |
| 服务方案卷质量评测节 | 首轮全量评测结论、缺陷清单、复测结论、盖章评测报告与数据质量档案 | 评测依据与指标与内部门控同一套定义、缺陷逐项立单、复测结论出具 | T1(整改回流)、T3(登记材料) |
| T3 数据集运营平台 | 版本登记结论、目录与元数据条目、交付通道、SLA 监控数据 | 登记完成、目录可检索、交付通道可用、SLA 指标可度量 | T8 技术创新(运营推广)、对外服务 |
| T10 安全方案 | 密码应用落点设计、等保测评与密评结论、整改记录 | 密码服务在各环节可调用、测评与评估报告出具、整改闭环记录完整 | 全部技术节 |
| T11 非功能性技术要求 | 七组指标的承诺值、测量方法与实测记录 | 指标测量方法已确认、实测记录可复现 | T3、T7、T10 |
| T6 硬件选型与配置 | 五类 46 台设备的到货、安装、调试与标定记录 | 参数逐条响应、安装位置与时序经确认、标定结论出具 | T12(设备侧取数)、T5(热处理与焊接场景) |
| T8 技术创新与机制创新 | 专家库机制与名册、标注规范、软建设配套措施、知识产权成果 | 机制文件发布、规范经评审、成果按节奏申报与登记 | T1(标注与仲裁)、T3(运营)、T4 |
| T9 需求书逐条应答矩阵 | 第五章逐条响应结论与正文页码索引 | 每条有结论、每条指到页码、与差异表口径一致 | 资格与商务卷差异表、合稿索引页 |
表 3-15 数据来源:章节划分依本投标文件目录;交接物与判据依各节对应的招标文件要求条目;移交登记判据依 b1575、b1576。
矩阵中有三处是双向的,需要单独说明,因为单向理解会漏掉回流。其一是训练推理与加工生产之间:加工向训练交数据集版本,训练向加工交错题归因任务单。其二是场景验证与加工生产之间:加工向验证交验证用数据,验证向加工交可用性结论与整改任务单。其三是质量评测与加工生产之间:加工向评测交送检版本,评测向加工交缺陷清单。这三处双向关系就是 b1215 要求的定向回流在章节层面的体现。
各项建设内容之间不是一条单链,而是五条并行的主线。实施期的贯通性检查按主线进行:主线上任一环节断开,相关建设内容即便各自完工,该主线也不计为通过。
图 3-6 贯通全卷的五条主线及其断点检查项。数据来源:主线划分依招标文件 b1215 的生产逻辑与门控规定、b1357 错题归因要求、3.2.6.12 安全合规要求;断点检查项为我方实施期的集成检查依据。
五条主线在实施期的用法是:每个阶段验收前按主线各走一遍端到端抽查,抽查对象是真实批次而不是演示数据。主线一与主线三的抽查合并进行,办法是任取一条样本,向上追到源系统记录、向下追到它参与过的评测结论;追不通即为断点,在该阶段整改完成后方可通过阶段验收。这项检查列入项目管理措施的配置管理与质量管理一节(详见服务方案卷「项目管理措施」节)。
本项目各项建设内容在实施期统一遵守以下五条约定,避免同一事项出现两套口径。
第一条,标识与编号的约定。批次号自采集受理时生成,贯穿全程不变更;数据集版本号采用业务域、用途子集、期次三段式;模型版本号与数据集版本号在血缘库中成对登记。各节引用同一对象时用同一标识,不另造别名。
第二条,指标定义的约定。同名指标全卷只有一个定义。六维质量指标(保真度、完备性、规整性、均衡性、可用性、可信性)的定义取自评测方案,加工过程的质检门直接引用,不另行解释;规模与占比的计量规则取自四集指标节;性能与可靠性指标的定义取自非功能性技术要求节。
第三条,术语的约定。招标文件定义的 30 个简写按本节表 0-1 取义;本方案补充的术语按表 0-2 取义;同一事物不换词,数据集不在别处叫数据资产或数据资源。
第四条,绝对指标的约定。覆盖范围与准确程度一律按趋向与逐步接近的方式表述,配基线值、验收口径与回退机制,写法见第 3.0.13 节。全卷唯一的例外是基准集不向训练域开放这一条,它写成硬约束且无回退(见表 3-10 末行)。
第五条,组织层级的约定。本项目涉及三套组织:数据治理组织、运营服务组织、项目建设期的项目管理组织,三套组织各自的职责与议事规则在对应章节规定。招标文件 b1856 要求的五级组织责任体系(决策级、把关级、管理级、作业级、岗位级)是把这三套组织按责任层级归并后的统一视图,其层级划分、与三套组织的对应关系以及各级的交账产出,在「技术创新与机制创新」节给出。责任层级一律用上述五级名称指代,具体机构一律用三套组织的名称指代,两者不混用。
约定之外仍可能出现冲突,尤其是在实施期需求细化之后。我方的处置机制是三步:发现方在配置库登记冲突点,写明两处的表述与影响范围;由项目组统一裁定并指定唯一口径,裁定结论进入数据标准或方案变更记录;受影响章节同步修订,修订后重新检查引用该口径的其他章节。裁定不由任一技术段自行调和,这是为了避免两段各改一半、改完仍不一致。本投标文件在编制阶段即按此机制处置,发现的口径问题随投标文件以差异表与应答矩阵的形式如实呈现,不在正文中隐去。
实施落地按 3.2.6 总则的规定执行(b1215、b1216)。实施安排由四件事决定:建设顺序、前置条件、指标的验证方式、问题发生后的处置与恢复判定。前两件在以下各条给出,指标验证见第 3.0.13 节,异常处置与恢复判定见表 3-10。
建设周期至 2028 年 5 月。阶段划分依据三项实施约束:知识底座先于标注与合成投产;四个业务领域的数据条件不同,分批加工;外部评测与测评评估需预留整改复测期。
据此划分五个实施阶段,按交付物成形先后排列。各阶段的任务分解、资源配置、里程碑与进度控制办法在项目组织实施与保障措施相应条款详述。
表 3-16 五个实施阶段的工作重点与阶段交付物
| 阶段 | 工作重点 | 阶段交付物 | 阶段验收判据 |
|---|---|---|---|
| 第一阶段 准备与底座 | 需求细化与蓝图确认;源系统授权与接口开通;对象主键映射与时间基准统一;知识本体类目与关系定义;数据标准首轮发布;平台基础功能与工具链公共层上线 | 蓝图设计文件、数据源登记台账、主键映射表、本体首版、数据标准首批、平台基础功能与公共层 | 口径检查节点通过;首批源系统可取回样本;主键映射经评审 |
| 第二阶段 首批加工与首轮验证 | 产品工艺设计数据集首批加工(图纸与工艺卡配对样本);标注规范发布与标注队伍培训考核;质检与验证流程跑通;训练配比预实验 | 首批数据集版本、标注规范、首轮质检与验证报告、配比预实验结论 | 版本检查节点通过;标注员间一致率达下限;首轮验证结论出具 |
| 第三阶段 全面加工与场景验证 | 四集并行加工与规模推进;25 个工具链分批投产;六个专业场景与五个通用场景分批验证;治理九大能力域规划落地与实施 | 分期数据集版本、工具链验收记录、场景验证报告、治理规划与实施成果 | 分期目标量达成;场景按基线判据通过;治理执行记录可支撑贯标评估 |
| 第四阶段 外部评测与整改复测 | 首轮全量质量评测;缺陷逐项立单整改;复测;等保测评与密评;DCMM 贯标评估 | 盖章评测报告与数据质量档案、整改闭环记录、测评与评估结论 | 缺陷趋向全部关闭;测评与评估结论出具 |
| 第五阶段 运营上线与移交 | 版本登记与目录上线;确权、挂牌与交易通道启用;按三统一准备接入国家数据基础设施;成果移交与培训 | 登记与挂牌记录、交付通道、接入材料、移交清单与培训记录 | 目录可检索;交付通道可用;SLA 指标可度量;移交清单签认 |
表 3-16 数据来源:阶段划分依本方案实施安排;交付物依招标文件 3.2.6 各节要求与 3.2.8 评测实施过程(b2108 及以下);建设周期依招标文件合同条款。
图 3-7 五个阶段的并行关系与关键里程碑。相邻阶段存在重叠,但箭头所示的四处为硬性前置关系。数据来源:阶段划分依表 3-16;前置关系依 b1215 的知识底座与门控要求。
阶段之间有四处硬性前置关系,写明是为了让进度安排有约束而不是看起来紧凑。其一,知识底座未就绪不开标注——本体类目与工序字典未经口径检查节点,标注即返工。其二,首批数据集版本未通过版本检查节点不转全面加工——首批的作用是把流程跑通并暴露口径问题,跳过它会把问题放大到四集规模。其三,场景验证未出首轮结论不定下一期加工配比——配比要由验证结论决定,不由计划决定。其四,缺陷整改未复测不进运营上线——带缺陷的版本挂牌,对外服务时会被退回。
阶段之间的交接不以时间到点为准,以交接判据达成为准。下表按阶段给出交接物、交接判据、交出方与接收方,以及判据未达成时的处置。阶段交接会由双方共同召开,交接结论书面留档。
表 3-17 五个阶段的交接物、交接判据与责任方
| 阶段交接点 | 交出方 | 接收方 | 交接物 | 交接判据 | 判据未达成时的处置 |
|---|---|---|---|---|---|
| 准备与底座 → 首批加工 | 项目组知识底座与集成岗 | 项目组加工作业岗 | 源系统授权与接口开通清单、本体首版、对象主键映射表、时间基准折算规则、数据标准首批 | 授权覆盖首批加工所需的全部数据源;本体首版过口径检查节点;映射表发版且可被全层调用 | 未开通的源系统启用离线导出过渡通道,该系统所涉对象在数据卡登记为过渡来源;本体未过门的,相关批次暂不进标注 |
| 首批加工 → 分批投产 | 项目组加工作业岗与质检岗 | 项目组评测岗、版本评审组 | 首批冻结数据集版本、质检报告、血缘清单、首轮试产实测的参数标定结论 | 首批版本过版本检查节点;各环节参数完成标定并写入作业规程 | 首批未过门的,按归因定向回流整改后重新送审,分批投产计划相应顺延,不以降低门控阈值放行 |
| 分批投产 → 评测与验证 | 项目组版本评审组 | 项目组评测与场景验证岗、外部评测机构 | 按期冻结的数据集版本及其数据卡、送检批次清单 | 当期承诺量达成且分域量逐格达标;数据卡字段齐备、与版本一致 | 当期未达量的在后续期补足并登记未达原因与补足计划;数据卡不齐备的退回补齐,不先送检后补 |
| 评测与验证 → 整改复测 | 项目组评测与场景验证岗 | 项目组相应环节责任岗 | 评测报告、场景可用性结论、结构化整改任务单 | 任务单指向具体环节、批次与算子;错因归类明确 | 归因不明确的转专家库裁定;裁定后仍不明确的转入观察清单并在下一轮复验 |
| 整改复测 → 移交运营 | 项目组版本评审组 | 运营服务管理平台登记岗(甲方主导、我方支持) | 复测通过的数据集版本封装包、登记信息、质量档案 | 复测通过且原错例不再复现;登记信息字段齐备且与数据卡一致 | 登记信息字段缺失的退回补齐,不先挂牌后补;复测未通过的继续立单,不进入移交 |
表 3-17 数据来源:阶段划分依本方案实施安排;交接物与判据依各环节对应的招标文件要求条目与 b1575、b1576 的移交规定;责任方划分依表 3-13 的角色设置。
交接判据与人员职责的对应关系是:每一项交接判据都有唯一的判定主体,判定主体在表 3-13 中有明确的归属与权限;双方共同判定的三处(口径评审组、版本评审组、专家库仲裁)须双方代表同时在场,任一方缺席的判定不成立,判定结论须书面留档并进入对应环节的执行记录。
下列前置条件不在我方单方控制范围内,逐条给出影响、处置办法与责任界面。前置条件的跟踪、升级与变更程序在项目组织实施与保障措施相应条款详述。
表 3-18 前置条件、影响与我方处置
| 前置条件 | 若不具备的影响 | 我方处置 | 责任界面 |
|---|---|---|---|
| 源系统按已授权范围开放只读接口(17 套系统) | 采集接入无法开工,四集加工全线推迟 | 按系统分批推动,先开数据条件最好的 PLM、ERP、MES;未开通的系统先走离线导出通道过渡,并在台账登记过渡方式与差异 | 我方提出接口规范与范围;授权与协调由管理单位决定 |
| 源系统厂商配合提供接口文档与联调支持 | 接口形态需反复试探,集成工期延长 | 以数据库只读视图与文件导出作为不依赖厂商的替代通道;需厂商配合的部分列入变更与协调事项 | 我方负责接入实现;厂商配合由甲方协调 |
| 设备侧采集范围按场景要求分批扩展 | 制造过程与产品质量数据集的时序与影像数据不足 | 首期以试点炉型、试点产线与试点车间所需设备为准,扩展清单以现场勘察结论为准;不足部分在数据卡登记 | 我方提出扩展清单;实施范围由甲方确认 |
| 口径确认方按期给出书面结论(工序字典、部件层级、缺陷判定依据、指标定义) | 标注无依据,已标数据面临返工 | 每类口径设一次正式评审并留书面结论;逾期未确认的,按我方建议口径先行并标注为待确认,确认后批量复核 | 我方提供建议口径与评审材料;结论由口径确认方出具 |
| 数据分类分级结论书面确认 | 脱敏范围与出域控制无依据,安全合规存在缺口 | 按最严口径先行处理,待分级结论确认后放宽;不采取先宽后严的做法 | 我方提出分级建议;结论由管理单位出具 |
| 专家库人员到位(不少于 50 人) | 标注仲裁与规范评审缺少主体 | 按内部专家与社会专家两种情形准备入库条件与派工规则,先启动内部专家入库,社会专家按条件分批补充 | 我方负责机制与组织;内部专家由甲方推荐 |
| 第三方测评与认证机构档期(等保测评、密评、质量评测盖章、DCMM 贯标) | 评测与整改期被压缩到项目末段,复测时间不足 | 在第三阶段中段即启动机构对接与预评估,把正式评测排在整改期之前,留出至少一轮复测的余量 | 我方负责组织与配合;机构由具备资质方承做 |
| 现场驻场条件与安全准入 | 现场勘察、设备安装与标定无法开展 | 按甲方的安全准入要求提前办理,驻场人员按项目管理措施的现场管理一节执行 | 我方负责人员与资质;准入由甲方安排 |
表 3-18 数据来源:前置条件依本方案各节的实施依赖;17 套源系统依 b0804r02;设备侧扩展口径依本项目需求调研;测评与认证要求依 b0804r07、b0688、b1218。
表 3-18 中口径确认逾期的处置单独说明。我方不采取停工等待的做法,也不采取先标后改的做法,而是按我方建议口径先行并把该批数据标注为待确认状态,确认后批量复核。该做法的代价是复核工作量,收益是进度不被单点阻塞;代价可控,因为待确认状态的批次在版本检查节点前必须转为已确认,不会流入交付版本。
招标文件的验收分阶段进行,交付物分布在各项服务之中。下表按成果类别给出交付物总清单,用于组织阶段验收与核对交付完整性。各交付物的格式与模板见附件卷的标准规范与样例部分。
表 3-19 交付物总清单与归属章节
| 类别 | 交付物 | 归属章节(技术方案卷节号) | 对应要求 |
|---|---|---|---|
| 数据集成果 | 四个数据集的各期版本(数据体、数据卡、质检报告、验证报告、血缘清单) | T1 各节 | b0683、3.2.6.3、3.2.6.4 |
| 数据集成果 | 规模、模态与时效的计量与核验记录 | T1C 四集规模与数据卡 | b0670、b1599 |
| 平台成果 | 数据集加工生产平台(含工具链 25 个)、运营服务管理平台(招标列明 16 个模块+我方增建 1 个)、治理开发工具平台 | T1、T2、T3、T4 | b0804r03、b0804r04、b1336 |
| 平台成果 | 接口文档、部署文档、运维手册、测试用例与测试报告 | T2、T3、T11 | 3.2.3.11、3.2.4.7、3.1.2.2 |
| 治理成果 | 现状诊断报告、九大能力域规划文件、制度与流程文件、决策数据指标体系 | T4 各节 | 3.2.6.1、b1331 |
| 治理成果 | 数据标准(术语、主数据、参考数据、数据元、指标)、质量规则库、分类分级结论 | T4 各节 | 3.2.6.1.1.2.5、3.2.6.1.1.2.6 |
| 验证成果 | 十一个场景的验证报告与整改任务单 | T5、T14 | b0684、3.2.6.5 |
| 验证成果 | 知识注入有效性报告、能力增量结论、专家偏好对齐度与安全合规通过率报告 | T13 | b1343、b1353、b1356 |
| 评测成果 | 首轮全量评测报告(正式盖章)、缺陷清单、复测报告、数据质量档案 | 服务方案卷质量评测节 | b0688、3.2.8 |
| 安全成果 | 密码应用方案、等保测评报告、密评报告、整改记录 | T10 | b0804r07、3.2.6.12 |
| 集成成果 | 平台安装适配记录、国密联调记录、硬件联网与标定记录、集成测试报告 | T7、T6 | b0804r05、3.1.2.3 |
| 机制成果 | 标注规范、专家库机制与名册、软建设配套措施、项目内部管理制度不少于 7 份 | T8、服务方案卷项目管理节 | 3.2.6.8、3.2.6.9、3.2.6.10、b0804r06 |
| 知识产权成果 | 论文不少于 5 篇、发明专利不少于 3 项、软件著作权不少于 6 项 | T8 | b0687、3.2.6.13 |
| 运营成果 | 版本登记与挂牌记录、交付通道、接入国家数据基础设施材料、SLA 监控报表 | T3、T8 | b0676、3.2.4、3.2.6.6.7 |
| 服务成果 | 培训方案与培训记录、质保期内服务记录、质保期外服务承诺 | 服务方案卷售后服务节 | b0496r07 |
表 3-19 数据来源:交付物依招标文件 3.2.6 各节与 3.2.8 的要求条目;数量要求依 b0687、b0804r06。
下列风险点逐条给出触发信号与应对动作。风险登记、评估、应对执行与关闭的管理程序在项目组织实施与保障措施相应条款详述。
表 3-20 主要风险、触发信号与应对
| 风险 | 触发信号 | 应对动作 | 残留影响 |
|---|---|---|---|
| 图纸解析要素完备性不足,产品工艺设计数据集首批规模不达期 | 首批抽检中要素完备性低于预处理检查判据,或解析置信度低于阈值的比例超出预期 | 按格式与版式分组定位失败原因,补充解析适配与模板并修订规则;低置信度与关键工艺要素转专业复核,修订后重新完成适用质量检查 | 解析与复核工作量上升,需增加处理批次与人员投入;该领域分项规模按招标规定值整额完成,不与其他领域互相抵充 |
| 业务对象关联无法核实的比例偏高,制造过程与产品质量数据集关联缺口大 | 适用对象的必要关联完整率低于试运行基线,或冲突与待核验记录集中出现 | 按对象类型定位缺失证据,补查源系统明细、流转与业务确认记录后重建关联;关系未核实的样本不计入要求完整关联的用途,补齐后重检受影响样本与质量结论 | 关联核查与复检工作量上升,需增加核验批次与业务确认投入 |
| 标注员间一致率长期低于下限 | 连续两批抽样复标一致率未达下限 | 修订标注规范的粒度定义与边界案例;重做培训与考核;必要时调整标注任务拆分方式 | 标注产能下降,需增加标注批次与周期 |
| 合成样本占比触及上限而规模仍有缺口 | 某用途子集的合成占比已达上限、目标量未达成 | 增加人工撰写与改写比例;扩展采集范围与来源授权以补充真实样本;按批准的配比与资源安排调整合成通道 | 单位成本与人工投入上升,需增加采集与撰写批次 |
| 外部评测缺陷集中在同一维度 | 首轮全量评测中某一质量维度的缺陷占比显著偏高 | 按维度定位到对应环节与算子,批量整改后复测;同步修订该维度的内部门控阈值 | 整改期延长,需占用后续期产能 |
| 第三方机构档期紧张导致评测与测评排期后移 | 机构反馈的档期晚于计划节点 | 提前启动预评估与自评估,把正式评测排在整改期之前;必要时分批送评 | 项目末段并行工作增多,需加强进度管控 |
| 源系统接口迟迟不开通 | 某系统在约定时点后仍未开通且无明确时间 | 启用离线导出过渡通道;该系统所涉对象的数据在数据卡登记为过渡来源 | 该部分数据的时效性与增量能力下降 |
| 场景验证判据争议 | 验证结论与业务方判断不一致 | 由专家库仲裁并留书面结论;判据修订按变更流程处理,修订前的结论保留 | 验证周期延长,需重跑受影响用例 |
表 3-20 数据来源:风险点依本方案各节的实施依赖与现场数据条件(见表 1-2);应对动作依表 3-10 的异常处置与恢复判定和 b1215 的定向回流要求。
表 3-21 数据准备风险及处置措施
| 风险条件 | 影响对象 | 识别方法 | 处置措施 | 完成条件 |
|---|---|---|---|---|
| 图纸与工艺卡片配对不足 | 产品工艺设计样本 | 按图号、零件编号、版本核验配对记录,统计有效配对及缺项 | 补取资料,完善映射,安排人工确认与复核,重新编排生产批次 | 有效配对通过审核,相关用途子集按分域指标完成交付 |
| 跨系统对象关联冲突 | 多源业务样本 | 检查主键唯一性、映射一致性和业务链完整性 | 隔离冲突记录,开展业务核实、规则修订及回归校验 | 映射依据明确,关联结果可追溯,影响批次复核通过 |
| 选型偏好标签不足 | 供需计划偏好数据 | 核查成对候选方案、评价依据和审核结果 | 补充合法来源资料,组织专业评定,增加符合业务范围的样本构建与复核 | 供需计划偏好数据达到分项数量及质量要求,不以其他业务域替代 |
| 工序字典发生修订 | 工艺本体及标注结果 | 评估字典版本差异及受影响数据 | 审批规则变更,发布新版本,重检相关样本并保存版本映射 | 规则、工具、标注及数据卡版本一致,受影响成果通过复核 |
| 设备到货或标定延迟 | 新增采集数据及关联验证 | 跟踪采购、安装、标定和采集计划 | 调整作业顺序,协调设备资源,落实补采及验证计划;不合格设备数据隔离 | 设备标定合格,采集覆盖和相关验证任务完成 |
| 故障标签或正常基线样本不足 | 装备诊断数据 | 按设备、工况和故障类别核验覆盖 | 补充运维资料,复核标签,完善采集和评测计划,未确认标签不得冒充故障事实 | 适用范围明确,数据覆盖与验证结果满足规定要求 |
| 纸质资料数量或可读性不足 | 产品质量数据 | 清点原件,检查清晰度和字段完整性 | 补取原件,重扫、人工录入和双重核验,安排缺口补足生产 | 对应数据集分项数量及质量达标,资料来源可追溯 |
| 采样时间与业务时间错位 | 时序关联样本 | 分析设备事件、业务事件和报工时间差 | 分批确认对齐参数,保存映射规则,无法可靠对齐的样本隔离复核 | 时间关联经核验,质量标志和规则版本完整 |
| 库存统计口径不一致 | 库存与经营指标样本 | 对比组织范围、时点、单位、数量及金额定义 | 经业务确认后建立统一指标定义,保留原始口径与转换规则并开展对账 | 指标定义获得确认,结果可复算,来源及转换过程可追溯 |
各项风险处置纳入项目进度和质量管理,责任人员、完成时点及复核结论在处理记录中登记;需要变更合同约定的事项按正式变更程序执行。
招标文件有若干处未给出确定数值或存在两处表述,我方对这些处的处置口径统一如下,并在实施期按同一口径执行,不因章节不同而改变取值。
留白不处理,影响的不是文字而是交付本身:同一事项在投标阶段与实施阶段各按一种理解执行,差额在验收时即成为争议,相应的工作量与资源安排也无从提前测算。表 3-22 收入的五处,均为会直接影响交付数量、人员组织或功能范围的条目,仅属文字表述出入、不改变交付内容的不列入。各处的取值遵循同一条原则:数值类取两种理解中的较高值,范围类按服务采购清单实列的完整项数交付,构成或归属未明确的按各种可能情形分别给出可执行安排,均不以含糊表述留待事后解释。
读表时,中间一列是招标文件的原文情形,右列是我方在本投标文件中实际执行的口径,二者并列即构成一处可被逐条核对的承诺。
表 3-22 留白处的处置口径
| 留白处 | 招标文件原文情形 | 我方处置口径 |
|---|---|---|
| 服务期内集中复测次数 | 原文写「不少于 X 次(X 在实施阶段由项目蓝图设计要求定义)」 | 在方案中承诺不少于我方给出的次数,并写明最终次数随蓝图设计确认后执行,取两者较高值 |
| 数据标注专家库 50 人的构成 | 未明确为甲方内部专家或社会专家 | 按两种情形都给入库条件与派工规则,内部专家承担口径确认与仲裁,社会专家承担规范评审与争议裁决 |
| 运营服务管理平台的功能模块交付范围 | 业务范围写不少于 14 个,服务采购清单实列 16 个 | 按服务采购清单实列的 16 项功能模块全部交付,逐模块给出功能、界面与关键流程,并实现平台服务与 SLA 保障能力以承载 3.2.4.6 的服务级别要求 |
| 数据集规模的两处表述 | 项目目标与业务范围写下限(≥600 亿 Token 等),逐数据集规模表给四领域分域数值 | 逐数据集规模表的四领域分域数值即我方的交付承诺值,逐项承诺、逐项验收,不以「合计达到下限」替代任一分项;项目目标与业务范围的下限为同一承诺的底线表述,两者并存时以分域数值为准 |
| 资格条件中的设备要求 | 资格审查表列「设备要求」一项,内容指向第一章招标公告 | 按招标公告的资格要求提供对应材料,详见资格与商务卷 |
表 3-22 数据来源:留白情形依招标文件对应条目原文;处置口径依本投标文件统一安排。
据此,本投标文件各节在涉及上述事项时只出现一种取值。实施阶段蓝图设计或招标方书面确认给出更明确要求的,按正式变更程序以确认结果为准,已承诺的数量、项数与人员条件不因此下调。
本项目的交付物、交付方式与验收依据,归纳为以下六项承诺,全卷各节的具体设计均落在这六项之内。
交付对象。 本项目向招标方交付可交易、可复用、可溯源的行业高质量数据资产,以及证明这些资产可支撑业务场景的验证结论(依 b0663、b0676)。
交付范围。 本包承担数据集加工生产、数据集质量评测、数据集场景验证三类服务。交付责任的起点为原始数据写入平台落地区,终点为数据集版本移交数据集运营服务管理平台并登记完成;智能场景本身的建设不在本包范围(依 b0662、b0684)。
实施方式。 以数据治理为横向管控层、知识本体与知识库为统一知识底座、十环节加工链为纵向生产主线、七道质量检查节点与三类定向回流为控制手段;四类数据集各走专属加工路径,共享同一套知识底座与质量检查规则(依 b1215)。
交付数量与质量。 四类数据集合计交付预训练 615 亿 Token、指令微调 89 万条、强化学习偏好 6.6 万组、基准测试 0.95 万条,并按供需计划、产品工艺设计、制造过程、产品质量四个业务领域逐项达到分域承诺量;数据集覆盖文本、图像、时序、视频四种模态,多模态数据条数占比与近 3 年内时效性数据条数占比均不低于 40%;保真度、完备性、规整性、均衡性、可用性、可信性六个质量维度按《高质量数据集质量评测规范》(TC609-5-2025-04)的指标定义达到判据(依 b0670、b0683)。
验证方式。 内部七道质量检查节点与外部首轮全量评测共用同一套指标定义;十一个场景按各自基线判据给出数据可用性结论;多阶段模型评测量化数据集带来的能力增量;评测错题开展训练数据归因并形成结构化整改任务单,整改后复测(依 b1354—b1359、b0688)。
偏差处置。 每项关键处理任务均给出运行条件、处理措施、异常处置与恢复及结果判定(见表 3-10)。异常处置不降低招标文件已规定的规模、质量、准确率、覆盖率、功能、时间与许可要求,受影响的数据、模型与结论按影响范围重处理并重新验证后方可计入合格交付;基准测试数据集不向训练域开放一条无例外处置。招标文件已规定数值的指标按招标值承诺,不纳入逐轮修订。