递交截止 2026-10-20 09:30 · 生成于 2026-10-16 15:50
预览稿,非最终投标文件;各节内容以各任务 MAIN.md 为准。
招标文件对数据质量规划提出了需求梳理、质量检查、质量分析、质量提升四项内容, 并在第(5)项明确要求输出上述五份文档(b1289)(b1291)(b1293)(b1295)(b1298)(b1299)。 技术方案「数据治理(二)」一节已就这四项内容的做法与闭环逐条论述,本附件不重复论述, 只做一件事:把那一节论述的结果落成可发布的文档实体。
这样分工的理由在于,数据质量治理的成效不体现在方案写得多细,而体现在三样东西上—— 一本能约束到部门与岗位的办法、一个能被调度执行的规则库、一套能被复核的台账。 这三样东西若只有框架没有条款、只有表头没有取值域、只有流程没有时限, 项目期就会退化成「出报告、开例会、不整改」。因此本附件的每一份样章都写到条款级与字段级。
五份文档不是五份并列的成果,而是一条自上而下的链:办法定规矩,需求清单定目标, 规则库把目标翻译成可执行的检查,分析报告把检查结果变成判断,整改台账把判断变成动作, 动作的结果再回头修订需求清单与规则库。链上任一环缺失,其下游都失去依据。
表 A8-1 五份文档的定位、形态与对应招标文件单元
| 序号 | 文档名称 | 文档编号 | 形态 | 定位 | 对应单元 |
|---|---|---|---|---|---|
| 23 | 数据质量管理办法 | GHY26691-GV-06-0001-V1.0 | 制度 | 定组织、职责、流程、时限与考核,是其余四份的依据 | b1333r24 |
| 24 | 数据质量需求清单 | GHY26691-GV-06-0002-V1.0 | 台账式清单 | 逐字段登记质量诉求、实测基线、分期目标与责任部门 | b1333r25 |
| 25 | 数据质量校验规则库 | GHY26691-GV-06-0003-V1.0 | 标准+规则集 | 规则编号、元数据字段、取值域、模板参数与表达式 | b1333r26 |
| 26 | 质量分析报告 | GHY26691-GV-06-0004-V1.0 | 报告模板+样例 | 月度与季度出具,给出构成、趋势、根因与整改进展 | b1333r27 |
| 27 | 质量问题整改台账 | GHY26691-GV-06-0005-V1.0 | 台账 | 问题单全生命周期留痕,关闭率与复发率的统计底账 | b1333r28 |
文档编号沿用附件「标准规范、样例数据卡与质检/验证报告模板」确定的五段式编号口径 GHY26691-<类别码>-<域码>-<序号>-<版本号>。数据治理各域的文档取类别码 GV, 域码即治理域号,数据质量域为 06,五份文档因此同属 GV-06 号段。序号在本域内按本节清单的出场顺序连续分配,从 0001 起,不编码招标文件交付清单的行号——清单一经增补或某一行下挂多份文件,由行号推导出的编号就不再成立;与清单的对应关系写在「对应条目」一列。本节表中的清单项号一列即「对应条目」,甲方按清单点收时照该列逐项核对。
图 A8-1 五份文档的生成顺序、引用关系与修订回路。实线为正向生成,虚线为反向修订。 数据来源:招标文件第五章 3.2.6.1.1.2.6 第(1)至(5)项(b1289—b1299); 错样归因与质量问题单的分界口径见技术方案「数据治理(二)」一节。
本附件只处理业务数据的质量治理,即甲方各业务系统中数据本身的质量。 与之相邻的两类文件在别处交付,边界如下,以免同一指标在两处出现两套口径。
| 相邻对象 | 交付位置 | 与本附件的分界 |
|---|---|---|
| 数据集质检报告、数据集验证报告、数据卡模板 | 附件「标准规范、样例数据卡与质检/验证报告模板」 | 对象是数据集,指标体系按《高质量数据集质量评测规范》三维度(b1911);本附件对象是业务数据,指标体系按六大维度(b1290) |
| 数据质量规划的方法与闭环论述 | 技术方案「数据治理(二)」一节 | 那一节讲为什么这样做、怎么做;本附件给出据此产出的文档实体 |
| 数据标准、数据元、码表 | 附件「数据标准类文档样章」 | 规则库中的值域检查引用码表,码表本身在标准类文档中定义,本附件只引用不重定义 |
| 元数据血缘、数据资源目录 | 附件「数据资产与元数据类文档样章」 | 异常向上定位依赖血缘,血缘的建设口径在那一份文档,本附件只规定如何使用 |
两套指标体系并行是招标文件自身的安排,不是口径冲突:六大维度管的是源数据能不能用, 三维度管的是加工出的数据集能不能交付。两者在一个位置相接——数据集质检发现的错样, 若归因指向源数据,则按本附件《数据质量管理办法》第九章转为业务质量问题单。
本附件标注「条款」的文字为正式条款草案,项目期按此提交甲方评审,评审意见据实修改; 标注「模板」的表格,其字段名、字段顺序、必填性与取值约束为正式口径,项目期按此产出; 标注「样例」的表格为示意填写,其中数值用于说明填写粒度与数据形态, 实际数值须在首轮全量扫描完成后以实测结果替换。
凡须填入甲方真实部门名称、岗位名称、人员信息、系统账号与具体阈值之处, 一律以【待填:…】标出,不预填拟值。阈值类参数另有一条约定: 首轮全量扫描完成前不对外承诺具体达标数值,规则阈值在观察期内按实测分布标定, 标定结果报甲方数据治理工作组核定后生效。这条约定在五份样章中反复出现, 是我方在质量治理上的基本立场——目标值须先有基线,没有基线的目标不可验收。
招标文件 3.2.6.1.1.2.6 节提出四项内容要求与一项输出要求。 技术方案「数据治理(二)」一节已就四项内容的做法逐条论述, 本附件的五份样章则逐条承接其文档化落点。下表给出对照,供合稿索引与甲方点收使用。
表 A8-1A 招标文件数据质量规划要求与本附件样章的对照
| 招标文件要求 | 单元 id | 要求要点 | 本附件承接位置 |
|---|---|---|---|
| (1)数据质量需求 | b1289、b1290 | 梳理各业务域核心数据质量诉求;遵循六大维度;制定校验规则库 | 管理办法第三章(维度与指标)、第四章(需求管理);需求清单全文;规则库全文 |
| (2)数据质量检查 | b1291、b1292 | 基于规则库开展稽核;调度执行多源校验;快速定位质量异常数据 | 管理办法第六章第三十八条至第四十五条;规则库第 4.6.6 节 T06 模板、第 4.9.10 节跨域规则 |
| (3)数据质量分析 | b1293、b1294 | 制定评估方案;明确质量指标、评分与分析方法;建立常态化监控评估机制 | 管理办法第七章第四十六条至第五十三条及附表二;分析报告全文,含第 5.9.3 节计算式 |
| (4)数据质量提升 | b1295、b1296、b1297 | 设计闭环处置流程;明确上报—分派—整改—复核—归档管理要求 | 管理办法第八章第五十四条至第六十二条及附表五;整改台账全文 |
| (5)输出五份文档 | b1298、b1299 | 输出管理办法、需求清单、校验规则库、质量分析报告、质量问题整改台账 | 本附件第二至第六节,逐份出样章 |
| 治理成果交付清单第 23—27 项 | b1332、b1333r24—r28 | 五份文档各一份,形态为文档 | 表 A8-1 文档编号与形态;第八节交付节奏与版本计划 |
对照表中有一处须说明:招标文件第(1)项把「制定数据质量校验规则库」 与「梳理质量诉求」写在同一条内(b1290),而本附件把二者分成两份文档。 这样分的理由是两者的维护节奏不同——诉求按月增补、按季复核, 规则按月发小版本、按季发大版本,且规则有观察期与误报收敛这一套独立流程。 合成一份文档会使两种节奏互相牵制。两份文档之间以「需求标识—规则标识」双向引用 保持闭合,校验项见第七节表 A8-11 第 5 项。
| 项 | 内容 |
|---|---|
| 文件名称 | 《矿山装备制造领域高质量数据集建设项目数据质量管理办法》 |
| 简称 | 《数据质量管理办法》 |
| 文档编号 | GHY26691-GV-06-0001-V1.0 |
| 版本号 | V1.0 |
| 文件性质 | 甲方内部管理制度(项目期由我方起草、甲方发布) |
| 起草 | 项目组数据治理工作面 |
| 审核 | 甲方数据治理工作组 |
| 批准 | 甲方数据治理委员会【待填:甲方委员会正式名称与批准人职务】 |
| 发布日期 | 【待填:甲方发文日期】 |
| 生效日期 | 【待填:自发布之日或指定日期起】 |
| 密级 | 内部 |
| 页数 | 正文十一章七十六条,附表六份 |
| 替代文件 | 无(首次发布) |
| 修订记录 | V1.0 首次发布;后续修订按第十一章第七十四条办理 |
适用范围。 本办法适用于项目实施范围内人力资源、研发设计、生产制造、仓储物流、 财务管理、设备管理、采购管理、营销管理、质量管理共九个业务域纳入数据治理管理范围的 数据对象,覆盖的部门为刮板机研究分院、工艺研究分院、备料加工分厂、生产管理部、 热处理分厂、结构件焊接分厂、企业管理部、科研管理部、营销中心、审计法务部, 管理单位为数字化转型工作办公室(b0680)(b0681)(b1336)。
纳管对象按《数据资源目录》登记的数据对象为准,未登记的数据对象不适用本办法的 稽核与考核条款,但其纳管申请按第四章办理。
生效条件。 本办法生效须同时满足四项前置条件,任一项未满足时该部分条款暂缓执行:
| 前置条件 | 具体要求 | 未满足时的处置 |
|---|---|---|
| 组织到位 | 数据治理委员会、数据治理工作组、各业务域数据管理员已设立并明确岗位 | 第二章职责条款按既有管理架构临时对应,三个月内补齐 |
| 目录到位 | 《数据资源目录》首版发布,纳管数据对象及其责任部门已登记 | 稽核范围先限于首批纳管对象,按季度扩展 |
| 工具到位 | 数据治理开发工具平台的质量管理模块可用,规则可配置、任务可调度、异常明细可导出 | 稽核以人工取数核算方式临时执行,不计入考核 |
| 基线到位 | 首轮全量质量扫描完成,各纳管对象的六维度实测基线已形成 | 第七章评分与第十章考核条款暂缓,第六章稽核与第八章整改条款照常执行 |
第四项前置条件尤须说明。质量评分与考核如果在没有基线的情况下启动, 会出现两种后果:起点差的业务域无论怎样努力都不达标,起点好的业务域不做事也达标。 因此本办法把「基线形成」作为评分与考核条款的生效条件,而把稽核与整改条款的生效 提前到基线形成之前——先查、先改,再评、再考。
表 A8-2 《数据质量管理办法》章节结构
| 章 | 节 | 条目 | 条号范围 |
|---|---|---|---|
| 第一章 总则 | 1.1 目的与依据<br>1.2 适用范围<br>1.3 术语与定义<br>1.4 基本原则 | 1.3.1 质量维度<br>1.3.2 质量问题<br>1.3.3 已知缺口<br>1.4.1 业务主责<br>1.4.2 基线先行<br>1.4.3 可追溯 | 第一条—第六条 |
| 第二章 组织与职责 | 2.1 三层治理组织<br>2.2 岗位职责<br>2.3 协同与争议处理 | 2.2.1 数据治理委员会<br>2.2.2 数据治理工作组<br>2.2.3 数据质量管理员<br>2.2.4 业务域数据管理员<br>2.2.5 系统运维责任人<br>2.2.6 数据录入岗 | 第七条—第十四条 |
| 第三章 质量维度与指标体系 | 3.1 六大质量维度<br>3.2 三层指标<br>3.3 评级与管控动作 | 3.1.1 维度定义与判定方法<br>3.2.1 规则级通过率<br>3.2.2 对象级质量分<br>3.2.3 域级与全局质量分<br>3.3.1 五档评级 | 第十五条—第二十一条 |
| 第四章 数据质量需求管理 | 4.1 需求来源<br>4.2 需求清单的编制与维护<br>4.3 纳管与退出 | 4.1.1 场景倒推<br>4.1.2 现状扫描<br>4.1.3 错样归因<br>4.1.4 业务提报<br>4.2.1 基线与目标<br>4.3.1 纳管申请 | 第二十二条—第二十七条 |
| 第五章 校验规则管理 | 5.1 规则编号与元数据<br>5.2 规则的编制与审批<br>5.3 阈值与严重级<br>5.4 观察期与规则变更 | 5.1.1 编号规则<br>5.2.1 十类模板<br>5.2.2 表达式型规则<br>5.3.1 三档严重级<br>5.4.1 误报率收敛 | 第二十八条—第三十七条 |
| 第六章 数据质量稽核 | 6.1 三种触发方式<br>6.2 调度与执行<br>6.3 多源校验<br>6.4 异常定位与明细留存 | 6.1.1 入口校验<br>6.1.2 周期稽核<br>6.1.3 按需稽核<br>6.3.1 关联键<br>6.4.1 向下定位<br>6.4.2 向上定位 | 第三十八条—第四十五条 |
| 第七章 质量分析与评估 | 7.1 评估方案<br>7.2 四种分析方法<br>7.3 常态化监控机制<br>7.4 报告出具 | 7.1.1 维度权重<br>7.2.1 构成分析<br>7.2.2 趋势分析<br>7.2.3 根因分析<br>7.2.4 对比分析<br>7.3.1 日月季三节奏 | 第四十六条—第五十三条 |
| 第八章 质量问题闭环处置 | 8.1 五环流程<br>8.2 时限与升级<br>8.3 整改台账<br>8.4 已知缺口管理 | 8.1.1 上报<br>8.1.2 分派<br>8.1.3 整改<br>8.1.4 复核<br>8.1.5 归档<br>8.2.1 超期升级<br>8.4.1 缺口登记与复评 | 第五十四条—第六十二条 |
| 第九章 与数据集加工质检的衔接 | 9.1 两类质量问题的分界<br>9.2 错样归因的回流<br>9.3 低置信数据的使用约束 | 9.1.1 源数据问题<br>9.1.2 加工逻辑问题<br>9.3.1 降权<br>9.3.2 排除<br>9.3.3 标记留痕 | 第六十三条—第六十七条 |
| 第十章 考核、通报与培训 | 10.1 考核指标<br>10.2 通报方式<br>10.3 培训与能力建设 | 10.1.1 部门考核项<br>10.1.2 岗位考核项<br>10.2.1 月度通报<br>10.3.1 录入规范培训 | 第六十八条—第七十二条 |
| 第十一章 附则 | 11.1 文件解释<br>11.2 修订机制<br>11.3 附表<br>11.4 施行 | 11.2.1 定期修订<br>11.2.2 临时修订<br>11.3.1 附表目录 | 第七十三条—第七十六条 |
附表七份:附表一 六大质量维度判定方法与本项目实例;附表二 质量维度权重表; 附表三 校验规则十类模板;附表四 规则严重级与处置要求;附表五 质量问题处置各环节管理要求; 附表六 质量问题根因分类与治理动作表;附表七 三层治理组织在数据质量事项上的职责边界。
第一条(目的) 为规范矿山装备制造领域高质量数据集建设及场景应用项目所涉业务数据的 质量管理工作,明确质量维度、检查方法、评估口径与问题处置责任,使纳管数据达到 行业高质量数据集加工生产与场景验证所需的可用状态,制定本办法。
第二条(依据) 本办法依据《数据管理能力成熟度评估模型》(GB/T 36073)、 《信息技术 数据质量评价指标》(GB/T 36344)、《高质量数据集质量评测规范》 (TC609-5-2025-04)及本项目数据治理顶层规划制定(b1911)。 与上述标准不一致时,以标准为准;与甲方既有制度不一致时,由数据治理委员会裁定。
第三条(适用范围) 本办法适用于第 2.2 节列明的九个业务域纳管数据对象及相关部门与岗位。 纳管范围以《数据资源目录》登记为准,按季度滚动扩展。
第四条(术语) 本办法所用术语的含义如下:
(一)质量维度:描述数据质量特征的分类,本办法采用完整性、准确性、一致性、 唯一性、及时性、有效性六个维度(b1290)。
(二)校验规则:对某一数据对象的某一或若干字段,按既定方法判定其是否满足 质量要求的可执行检查逻辑,由规则标识唯一指称。
(三)质量问题:校验规则执行结果为不通过,且经数据质量管理员确认非规则误报的情形。
(四)问题单:质量问题的处置载体,自上报生成至归档关闭,全程留痕于整改台账。
(五)已知缺口:经评估确认在当前业务与采集条件下无法整改的质量问题, 包括数据在业务上确实未产生、采集通道不具备、历史数据不符合现行标准三类情形。 已知缺口登记在册、定期复评,不计入整改关闭率的分母。
(六)低置信数据:未通过告警级规则但仍进入加工链路的数据,携带质量标记, 在数据集加工与场景验证中按本办法第九章约束使用。
(七)基线:某一数据对象某一维度在首轮全量扫描中的实测值,是后续设定目标值与 核算提升幅度的起点。
第五条(基本原则之一:业务主责) 数据质量的责任主体是数据产生环节的业务部门, 不是数据治理部门,也不是信息化部门。数据治理部门负责定规则、查问题、分派、复核与通报; 数据质量的整改由产生该数据的业务部门完成。涉及系统改造的,由系统运维责任人配合实施。
第六条(基本原则之二:基线先行与可追溯) 任何质量目标须以实测基线为起点, 以相对基线的问题量下降幅度表述,不以绝对达标率表述。基线未形成前不设目标值, 不进行评分与考核。质量工作全过程留痕:规则有版本,稽核有任务记录与异常明细, 问题有处置台账,报告有出具记录,修订有变更记录。留痕的保存期限不少于项目建设期加 质保期,且不短于甲方档案管理规定的期限。
第七条(三层治理组织) 数据质量管理按决策层、管理层、执行层三层组织开展。 决策层为数据治理委员会,管理层为数据治理工作组,执行层为各业务域数据管理员、 数据质量管理员与系统运维责任人。三层组织的设立、组成与议事规则按《数据治理组织架构》 执行,本办法只规定其在数据质量事项上的职责。
第八条(数据治理委员会职责) 审定本办法及其修订;审定质量维度权重表与五档评级门限; 审定季度质量评估结论与下季度重点整改清单;裁定跨部门质量争议;审定已知缺口清单; 审定质量考核结果。委员会每季度至少听取一次质量工作汇报。
第九条(数据治理工作组职责) 组织本办法的实施;核定校验规则的新增、变更、停用与 阈值标定结果;核定各业务域的质量需求清单与分期目标;审定月度质量分析报告; 组织月度数据治理例会,确定下月重点整改清单;对超期未整改的问题单发起升级。
第十条(数据质量管理员职责) 数据质量管理员设于数字化转型工作办公室, 为本办法的日常执行岗。其职责为:编制与维护质量需求清单与校验规则库;配置与调度稽核任务; 确认稽核异常是否构成质量问题;分派问题单并跟踪时限;复核整改结果; 维护整改台账与已知缺口清单;出具月度质量分析报告;汇总季度质量评估结论。 【待填:岗位编制人数与任职人员】
第十一条(业务域数据管理员职责) 各业务域数据管理员由该域业务主管部门指定, 其职责为:提报本域质量诉求并确认质量需求清单;核对本域规则的业务合理性; 承接本域问题单并组织整改;提供根因判断依据;对本域已知缺口提出登记申请与复评意见; 组织本域数据录入岗的规范培训。 【待填:九个业务域对应的主管部门与数据管理员岗位】
第十二条(系统运维责任人职责) 各业务系统运维责任人负责:开通并维护质量稽核 所需的只读取数通道;配合入口校验在系统界面与接口层的落地;实施因质量问题需要的 系统改造;就接口缺陷类问题提供传输日志与水位线记录。
第十三条(数据录入岗职责) 按数据标准与填写指引录入数据;对本岗位产生的 阻断级问题在时限内更正;参加录入规范培训。录入岗的具体范围由各业务域数据管理员 在本域范围内明确。
第十四条(协同与争议处理) 跨部门质量问题的责任归属由数据质量管理员依据元数据血缘 与各节点输入输出校验结果初判;初判结果有异议的,由数据治理工作组在五个工作日内协调; 协调不成的报数据治理委员会裁定。争议期间问题单状态标记为「责任待定」, 时限自责任确定之日起重新计算,但阻断级问题的数据拦截措施不因争议而解除。
第十五条(六大质量维度) 本办法采用完整性、准确性、一致性、唯一性、及时性、 有效性六个质量维度(b1290)。各维度的定义、判定方法与本项目实例见附表一。 六个维度的判定不得仅停留在定义层面,每一条校验规则须明确归属一个维度, 不得归属两个及以上维度;一条数据同时违反多个维度规则时,分别记为多条质量问题。
第十六条(规则级通过率) 规则级通过率为最底层实测值。对记录级规则, 通过率等于通过检查的记录数占被检查记录数之比;对数据集合级规则(如跨系统比对、 唯一性检查、分布与连续性检查),通过率按比对项或检查项计,并在规则元数据中 注明计量单位,避免与记录级口径混算。
第十七条(对象级质量分) 数据对象在某维度的得分,等于该对象该维度下所有规则的 通过率按规则严重级加权的平均值;严重级权重取阻断级 3、告警级 2、提示级 1, 观察期内的规则不计入得分。对象总分等于六个维度得分按附表二维度权重加权之和, 满分一百分。某对象在某维度下无规则时,该维度不计入加权,权重按比例分摊至其余维度, 并在报告中注明。
第十八条(域级与全局质量分) 域级质量分等于该域各数据对象得分按业务重要度加权之和, 业务重要度分高、中、低三档,权重取 3、2、1,由业务域数据管理员提报、数据治理工作组核定。 全局质量分等于九个业务域得分按各域对数据集建设贡献度加权之和,贡献度权重由 数据治理工作组按四类数据集的取数来源构成核定,并随数据集建设进度逐季复核。
第十九条(纳管范围变化时的可比性处理) 新增纳管数据对象导致质量分下降时, 报告中须同时给出「同口径质量分」与「全口径质量分」两个数值:同口径指按上期纳管范围 重新核算的分数,全口径指按本期纳管范围核算的分数。仅报全口径会把扩大纳管范围 误读为治理退步。
第二十条(五档评级) 对象级与域级质量分按五档评级:优为九十分及以上, 良为八十分至九十分,中为七十分至八十分,需改进为六十分至七十分,差为六十分以下。 评级的用途不是排名,而是触发管控动作。
第二十一条(评级对应的管控动作) 各档评级对应的管控动作如下表,评级结果一经核定, 对应动作自动生效,不另行审批。
| 评级 | 对数据使用的管控 | 对整改的要求 | 对稽核的调整 |
|---|---|---|---|
| 优(≥90) | 正常使用 | 无强制要求 | 稽核频率可按申请下调一档 |
| 良(80—90) | 正常使用 | 问题单按常规时限处置 | 维持现有频率 |
| 中(70—80) | 正常使用,数据集加工时记录对象评级 | 纳入本季度整改清单 | 维持现有频率 |
| 需改进(60—70) | 该对象参与的数据集加工任务须附置信标记 | 纳入下季度重点整改清单,提报整改方案 | 稽核频率上调一档 |
| 差(<60) | 该对象参与的数据集加工任务须附置信标记,并由数据质量管理员逐批确认取数范围 | 纳入下季度重点整改清单,提报整改方案并明确里程碑 | 稽核频率上调一档,增设按需专项稽核 |
「附置信标记」的具体含义见第六十六条。此处须说明的是,评级为需改进或差的数据对象, 其数据并非不可用,而是须在数据集加工时明示其质量状态,由加工环节按第九章决定 降权、排除或照常使用。把低分对象一律排除会造成样本量不足,把低分对象当作正常使用 会把源数据缺陷带进数据集,两者都不可取。
第二十二条(需求来源) 数据质量需求有四个来源,四者并行,缺一会漏(b1289)。
(一)场景倒推:十一个数据集验证场景与四类数据集对数据各有要求, 把这些要求逐条翻译为对具体字段的质量诉求(b0684)。
(二)现状扫描:对已纳管数据对象逐字段统计空值率、取值分布、格式符合度与 跨系统一致率,实测结果差的字段列为候选诉求。
(三)错样归因:数据集质检与场景验证产生的错样,经归因指向源数据问题的, 转为质量诉求,详见第九章。
(四)业务提报:业务部门在日常工作中发现的质量问题,经本域数据管理员汇总提报。
第二十三条(诉求的优先级判定) 质量诉求按三条判据排序:是否为跨系统关联键、 是否为四类数据集加工的必需输入、不达标时的业务后果大小。三条判据中命中两条及以上 定为高优先级,命中一条定为中优先级,均未命中但业务提报要求处理的定为低优先级。
空值率高不等于优先级高。某些字段业务上确实不填,不构成问题;某些字段空值率只有 百分之几,但它是跨系统关联键,缺一条即断一条链,优先级反而最高。本项目中 图号与版本、施工号、物料编码与批次、工单号与工序代码、设备编码与测点标识、炉次号 六类关联键的完整性与唯一性,一律定为高优先级。
第二十四条(需求清单的编制) 数据质量需求清单按《数据质量需求清单》 (GHY26691-GV-06-0002-V1.0)的字段结构编制,每条诉求须有质量维度、现状实测值、 目标值与达成期、业务后果、优先级、责任部门、关联规则标识。
第二十五条(基线与目标值) 现状实测值由首轮全量扫描产生,是该条诉求的基线。 目标值按季度分期设定,以相对基线的问题量下降幅度表述。基线未形成的诉求, 目标值一栏填「待基线」,不填具体数值,不纳入考核。
第二十六条(清单的维护节奏) 需求清单按月增补、按季复核。按月增补的来源是 错样归因与业务提报;按季复核的内容是:实测值是否已更新、目标值与达成期是否仍合理、 优先级是否需调整、已达成的诉求是否转为常态监控、无法达成的诉求是否转为已知缺口。
第二十七条(纳管与退出) 数据对象纳入质量管理范围须由业务域数据管理员提交纳管申请, 载明数据对象、责任部门、预期用途与可取数通道,经数据治理工作组核定后登记入 《数据资源目录》并生成首批校验规则。数据对象退出管理范围须说明退出理由, 经数据治理工作组核定;退出后其历史稽核记录与问题单不删除,状态标记为「对象已退管」。
第二十八条(规则编号) 校验规则采用五段式编号:DQ-R-<业务域码>-<维度码>-<四位序号>。 业务域码与维度码的取值见《数据质量校验规则库》第 4.2 节。编号一经分配不再变更, 规则停用后其编号不回收、不复用。规则内容变更时编号不变,版本号递增。
第二十九条(规则元数据) 每条规则须登记十五项元数据:规则标识、规则名称、规则模板、 质量维度、检查对象、关联数据元、规则参数或表达式、阈值、严重级、触发方式、执行频率、 责任部门、来源、启用状态、版本。元数据不全的规则不得启用。
第三十条(十类模板) 规则按十类模板组织,见附表三。模板化的目的是使规则编写 不依赖编程能力:数据质量管理员选模板、填参数即生成规则。模板覆盖不了的逻辑 才写表达式型规则。
第三十一条(表达式型规则的审批) 表达式型规则须经两道检查方可提交: 一是由规则编制人提供表达式、预期命中样例与预期不命中样例各不少于三条; 二是由另一名数据质量管理员在样本数据上试跑并核对结果。两道检查记录随规则留档。 表达式型规则在规则库中的占比宜控制在两成以内,超过两成通常说明某类检查应当 抽象为新的模板。
第三十二条(阈值标定) 规则阈值不得凭经验直接设定,须按下列顺序确定: 有国家标准或甲方既有制度明确要求的,按要求设定;有物理或设备约束的,按约束上下限设定; 均无依据的,在观察期内按实测分布标定,取分布的合理分位点作为初始阈值, 报数据治理工作组核定。
第三十三条(三档严重级) 规则严重级分阻断、告警、提示三档,对应处置要求见附表四。 阻断级适用于关联键缺失、唯一性冲突、引用完整性缺失一类会导致下游加工错误的问题; 告警级适用于非关键字段缺失、取值分布异常一类问题;提示级适用于观察期规则与仅作记录的检查。
第三十四条(观察期) 新增规则与变更后的规则一律先进观察期。观察期内规则按提示级运行 两至四周,统计触发量与误报率。误报率高于约定水平的规则回炉修改,修改后重新进入观察期。 观察期结束并经数据治理工作组核定后,按规则元数据登记的严重级正式运行。
观察期的设置理由是:规则直接上阻断级会造成大量加工任务失败,运维成本高, 且会削弱业务部门对治理工作的配合意愿。宁可多花三周观察,不可让业务部门在 第一周就把治理工作视为阻碍。
第三十五条(误报的认定与处理) 稽核结果不通过但数据实际正确的,为误报。 误报由业务域数据管理员提出、数据质量管理员确认。确认为误报的,该次结果不生成问题单, 并在规则的误报记录中登记。同一规则在一个统计周期内误报记录达到约定条数的, 规则自动转入观察期并通知规则编制人修改。
第三十六条(规则变更) 规则的新增、参数变更、阈值变更、严重级变更、停用与启用, 一律由数据质量管理员提出、数据治理工作组核定。变更生效前须完成两件事: 一是评估变更对历史质量分可比性的影响,影响显著的在报告中单列说明; 二是通知下游——所有引用该规则的稽核任务、数据集加工任务与质量看板配置。
第三十七条(规则库的版本发布) 规则库按月发布小版本(V1.x),按季发布大版本(Vx.0)。 每个发布版本附变更清单,列明新增、变更与停用的规则标识及变更内容。 数据集加工任务在取数时记录所依据的规则库版本号,使某一批次数据的质量判定可复现。
第三十八条(三种触发方式) 质量稽核按入口校验、周期稽核、按需稽核三种方式触发 (b1291)(b1292)。
第三十九条(入口校验) 入口校验在数据汇聚与数据集加工任务读入数据时同步执行, 针对单条记录可判定的规则,包括空值检查、格式检查、值域检查、引用完整性检查。 入口校验不通过的记录按严重级处置:阻断级记录不进入加工链路,写入拦截明细; 告警级记录带质量标记进入,标记内容为规则标识与实测值。
第四十条(周期稽核) 周期稽核按调度计划批量执行,针对需要全量或大范围数据 才能判定的规则,包括唯一性检查、跨系统比对、分布与连续性检查、时效检查。 执行频率按数据更新节奏设定,初始设定见下表,后续按第二十一条随评级调整。
| 稽核对象类别 | 执行频率 | 设定理由 |
|---|---|---|
| 工单、工序流转与报工 | T+1 | 制造执行系统按班次结算,次日核对可覆盖完整班次 |
| 设备时序数据连续性 | 每日 | 测点秒级采样,断链须当日发现,否则时序样本成段缺失 |
| 热处理炉次与检验结果配对 | T+1 | 炉次完工与检验交检通常不同日,次日核对可配对 |
| 焊接参数流与焊道配对 | T+1 | 同上 |
| 库存三方比对 | 每周 | 实物盘点非每日进行,日频比对无新信息 |
| 检验结论与工艺标注配对 | 每周 | 重要尺寸检验按交检批次产生 |
| 图纸与工艺卡配对 | 每月 | 设计与工艺出件节奏以周月计 |
| 主数据一致性(物料、设备、供应商) | 每月 | 主数据变更频率低 |
| 价格一致性 | 每月 | 按财务期间核算 |
第四十一条(按需稽核) 按需稽核由数据质量管理员或数据集加工人员手工发起, 针对特定对象做专项检查。两类场合须强制执行按需稽核:一是数据集加工批次开工前, 对本批次取数范围做一次定向稽核,结果写入该批次的取数记录; 二是质量问题整改完成后的复核。
第四十二条(稽核任务的留痕) 每次稽核执行须留存任务记录,内容包括任务标识、 所依据的规则库版本、规则清单、取数范围与时间窗、执行开始与结束时间、 被检查记录数、不通过记录数、执行结果状态。稽核任务失败时记录失败原因并重试, 连续失败达约定次数的推送告警至系统运维责任人。
第四十三条(多源校验的关联键) 多源数据校验以关联键贯通为前提。本项目的关联键 按业务对象确定:施工号关联项目与工单;图号与版本关联设计与工艺; 物料编码与批次关联库存与采购;工单号与工序代码关联制造与质检; 设备编码与测点标识关联设备与时序数据;炉次号关联热处理与检验结果。 关联键的贯通工作与主数据标准建设同步进行,关联键本身的完整性与唯一性规则 一律定为阻断级。
第四十四条(向下定位到记录) 稽核异常明细须记录规则标识、检查对象、 问题记录的业务主键、实测值与期望值、发现时间。业务人员按业务主键可直接在源系统中 找到该条记录,不需技术人员代查。异常明细支持按业务域、责任部门、规则、 严重级筛选与导出。
这一条决定整改能否由业务部门自行完成。只给出「某表某字段空值率偏高」而不给出 具体是哪几条记录,业务部门无从下手,整改就只能停留在会议上。
第四十五条(向上定位到源头) 沿元数据血缘回溯,判断问题由源系统录入产生、 接口传输产生,还是加工逻辑产生。回溯依据是加工链路上各节点的输入输出校验结果: 某节点输入已有问题,责任在上游;输入正常而输出有问题,责任在该节点的加工逻辑。 血缘的建设口径按《元数据管理办法》执行,本办法只规定其使用方式。
第四十六条(评估方案) 质量评估按三层指标开展,规则级通过率、对象级质量分、 域级与全局质量分的核算方法分别见第十六条至第十八条(b1293)。 维度权重按业务域分别设定,不采用全局统一权重,见附表二。
第四十七条(权重按域设定的理由) 不同业务域的质量短板不同。设备管理域的数据 以时序为主,及时性与准确性的影响远大于唯一性;财务管理域的数据跨系统核算, 一致性与准确性的影响大于及时性;研发设计域的图纸与工艺数据,完整性与有效性是 可检索、可借用的前提。统一权重会让各域的得分都失真。
第四十八条(构成分析) 把质量问题按维度、业务域、源系统、责任部门、规则逐项分解, 找出问题集中的位置。报告中须给出问题量排名前列的规则及其占比。 质量问题通常高度集中于少数字段,构成分析的作用是把整改资源投到这些字段上。
第四十九条(趋势分析) 按月对比质量分与问题量,区分三种情形并在报告中分别说明: 治理起效后的持续下降、整改后的反弹、因新增纳管对象带来的分数下降。 第三种情形按第十九条给出同口径与全口径两个数值。
第五十条(根因分析) 对问题量靠前的规则逐条归因,归因分类与对应治理动作见附表六。 归因结论是质量分析与质量提升之间的接口:归因为「规则不当」的,走第三十六条规则变更; 归因为「源头不可得」或「历史遗留」的,走第六十二条已知缺口登记;其余归因进入整改流程。
第五十一条(对比分析) 同类数据对象在不同部门、不同系统、不同时期之间的横向对比, 用于识别局部做法的差异。某一分厂的工单填写完整度明显高于其它分厂时, 其填写做法与管理措施须作为经验在月度例会通报并推广。
第五十二条(常态化监控机制) 质量监控评估按日、月、季三个节奏运行(b1294)。 日节奏为监控:稽核任务按调度执行,异常量与质量分在质量看板上更新, 阻断级问题即时推送至责任部门,看板最小粒度到数据对象与规则。 月节奏为分析与通报:出具《质量分析报告》,在数据治理月度例会通报,确定下月重点整改清单。 季节奏为评估与调整:做一次完整质量评估,输出域级与全局质量分, 复核维度权重、规则严重级、需求清单的目标值与达成期,评估结论提交数据治理委员会。
第五十三条(报告出具) 月度报告在次月第五个工作日前出具,季度报告在季后第十个 工作日前出具。报告按《质量分析报告》(GHY26691-GV-06-0004-V1.0)的模板编制。 报告一经出具不修改,发现数据有误的出补充说明并在下期报告中更正。
第五十四条(五环流程) 质量问题按上报、分派、整改、复核、归档五个环节闭环处置 (b1295)(b1296)(b1297)。各环节的责任角色、必填内容与时限见附表五。
第五十五条(上报) 问题单由稽核任务自动生成,或由业务人员手工提报。 自动生成的问题单按规则与检查对象聚合:同一规则、同一检查对象、同一稽核周期内的 不通过记录聚合为一个问题单,问题单中记录涉及记录数与记录主键清单。 不按记录逐条生成问题单,否则一次扫描会产生上万个问题单,台账失去可管理性。
第五十六条(分派) 分派由数据质量管理员执行,须填写责任部门、责任人与要求完成时间。 默认责任部门取规则元数据中登记的责任部门;实际责任与默认不符的,按第十四条处理。 阻断级问题在一个工作日内分派,告警级问题在三个工作日内分派。
第五十七条(整改) 整改由责任部门执行,须填写根因分类、整改措施、涉及记录数、 是否需要系统改造。阻断级问题在五个工作日内整改完毕;告警级问题按月度重点整改清单排期。 需要系统改造的问题单单独标记,整改时限按改造排期另定,不占用常规时限统计。
阻断级问题整改时限定为五个工作日,依据是这类问题多为关联键缺失或唯一性冲突, 通常由业务部门补录或更正即可完成,不需系统改造。
第五十八条(复核) 复核由数据质量管理员在整改完成后两个工作日内执行, 方式为对该问题单涉及的记录重跑对应规则。复核通过的进入归档; 复核不通过的退回责任部门,并在问题单中记录退回次数。 同一问题单退回两次以上的,提交数据治理工作组协调。
第五十九条(归档) 归档由数据质量管理员执行,须填写关闭原因、台账编号、 是否派生规则或标准修订。归档后问题单不可编辑,如需重开则新建问题单并标注关联原问题单号。
第六十条(超期升级) 问题单超出时限未完成的,按三级升级:超期三个工作日内 由数据质量管理员催办;超期三至十个工作日提交数据治理工作组;超期十个工作日以上 提交数据治理委员会,并在月度报告中单列。升级不替代整改,升级后时限继续计算。
第六十一条(复发管理) 同一规则、同一检查对象在归档后再次产生问题单的, 标记为复发,并在台账中记录原问题单号。复发率是判断整改是否触及根因的主要指标, 复发的问题单在整改时须重新做根因分析,不得沿用原归因结论。
第六十二条(已知缺口) 经评估确认在当前条件下无法整改的质量问题, 由业务域数据管理员提出、数据治理工作组核定后登记为已知缺口, 载明缺口内容、不可整改的原因、影响范围、对数据集加工的影响、复评周期。 已知缺口不计入整改关闭率的分母,按季度复评一次,条件具备后转回整改流程。
把不可得的数据算进整改任务,会让关闭率这个指标永远不达标,并在后续评审中掩盖 真正能解决的问题。本项目在首期已可预见的缺口有三类:焊接参数流与工件、焊道无对应; 故障记录与数据段无配对;纸质检测报告尚未数字化。这三类缺口的处置方式不是整改, 而是在数据集加工时据实下调相关样本的可构造量预期,并在数据卡中如实记载。
第六十三条(两类质量问题的分界) 数据集质检与场景验证产生的错样,按问题是否 存在于源数据中划分责任。源系统中的事实本身错误或缺失的,为业务数据质量问题, 按本办法处置;源系统事实正确而加工环节映射、切分、标注、生成环节处理错误的, 为加工质量问题,在数据集加工环节处置,不进本办法的整改台账。
举例说明分界位置。一条质量类样本的缺陷标签错了:若质量管理系统中的检验结论 本身就填错了,这是业务数据质量问题,责任在交检与录入环节; 若检验结论正确而加工环节把缺陷类型码映射到了错误的标签,这是加工质量问题, 责任在加工环节的映射表。两者的整改措施完全不同,混在一起处置会导致源头问题 被当作加工问题反复修补。
第六十四条(错样归因的回流) 数据集质检与场景验证的错样归因结论指向源数据问题的, 由数据集加工环节向数据质量管理员提交质量诉求或问题单,载明错样标识、 归因结论、涉及的源数据对象与字段、建议的校验规则。数据质量管理员确认后, 该诉求进入需求清单,并视情派生新规则。
这条回流通道是本项目在数据质量治理上与一般数据治理项目的主要差别。 一般项目的质量规则来自标准与经验,本项目还有一条来自数据集使用效果的反馈: 哪些字段的质量真正影响模型表现,由错样归因告诉规则库。
第六十五条(回流的节奏与记录) 错样归因按数据集加工批次汇总回流, 每批次完成质检后十个工作日内提交。回流记录须留存于两处:数据集一侧记入 该批次的质检报告归因章节,业务数据一侧记入需求清单的「诉求来源」字段, 标注为「数据集错样归因」并记录来源批次号,使同一条诉求在两边可以互查。
第六十六条(低置信数据的使用约束) 未通过告警级规则但带标记进入加工链路的数据, 以及来自评级为需改进或差的数据对象的数据,在数据集加工中按下列约束使用:
| 约束方式 | 适用情形 | 具体做法 |
|---|---|---|
| 标记留痕 | 所有低置信数据 | 在样本的加工元数据中记录触发的规则标识与实测值,并在数据卡的质量章节汇总低置信样本占比 |
| 降权 | 质量缺陷不影响样本语义正确性,但影响其代表性 | 在训练配比与采样权重中下调该子集权重,下调幅度记入加工记录 |
| 排除 | 质量缺陷导致样本语义错误或标签不可信 | 该样本不进入正式版本,转入待修样本池,源数据整改后重新加工 |
| 单列评测 | 缺陷模式明确且可枚举 | 在基准测试数据集中单列该缺陷模式的子集,用于观察模型对该类输入的表现 |
四种约束的选择由数据集加工环节按缺陷性质判定,判定结论记入该批次质检报告。 排除比例在一个批次内超过约定水平时,暂停该批次加工并提交数据治理工作组, 因为这通常说明源数据存在系统性问题而非个别错误。
第六十七条(两套指标体系的并行) 业务数据按本办法的六大维度评价(b1290); 数据集按《高质量数据集质量评测规范》的说明文档、数据质量、模型应用三维度评价(b1911)。 两套体系各管一段,不互相换算,不互相替代。在报告中同时出现时,须注明对象是 业务数据还是数据集,避免评委与甲方将两个分数混读。
第六十八条(部门考核项) 对各业务域主管部门的数据质量考核设四项指标: 域级质量分相对基线的提升幅度、问题单按期关闭率、问题单复发率、 已知缺口的复评按期完成率。四项指标的权重与具体目标值由数据治理委员会按季核定。 考核在基线形成后启动,见第 2.2 节生效条件。
第六十九条(岗位考核项) 对数据质量管理员的考核设三项:规则库误报率是否收敛、 问题单分派与复核是否按时限完成、月度报告是否按期出具。 对业务域数据管理员的考核设两项:本域问题单按期关闭率、本域录入规范培训完成情况。
第七十条(通报方式) 月度质量分析报告在数据治理月度例会通报,通报内容包括 各域质量分与排名、问题量构成、超期问题单清单、下月重点整改清单。 阻断级问题与超期十个工作日以上的问题单在通报中点名到部门。通报点名到部门,不点名到个人。
第七十一条(培训) 数据录入规范培训按业务域组织,每半年至少一轮, 内容包括本域数据标准、填写指引、常见问题示例与整改要求。 新增或修订的数据标准发布后一个月内组织专项培训。培训记录留档, 培训完成情况纳入第六十九条考核。
第七十二条(能力建设) 数据质量管理员与业务域数据管理员的能力建设按 《数据文化建设方案》执行,本办法不另行规定。项目期内我方按合同约定提供 质量治理方法、工具平台操作与规则编写的培训与陪跑,使甲方岗位人员在项目结束时 能独立承担规则维护、稽核调度与报告出具工作。
第七十三条(解释权) 本办法由甲方数据治理工作组负责解释。 执行中的疑义由数据治理工作组答复,答复记录汇总后在定期修订时并入条款。
第七十四条(修订机制) 本办法的修订分定期与临时两类。 定期修订每年一次,由数据治理工作组在年度质量评估后提出修订草案, 经数据治理委员会审定后发布。 临时修订在下列情形下启动:所依据的国家标准或行业标准发布新版; 甲方组织架构调整导致职责条款不适用;纳管范围发生重大变化; 连续两个季度评估发现某条款不可执行。临时修订的草案在情形发生后二十个工作日内提出。
修订发布后须完成三项通知:向九个业务域数据管理员发送修订说明与差异对照; 更新数据治理开发工具平台中与条款关联的流程配置与时限参数; 在下一次月度例会通报修订要点。未完成通知的修订不生效,这一条是为避免 条款改了而执行口径未改。
第七十五条(附表) 本办法附表七份,与正文具有同等效力。附表的修订 按第三十六条(规则相关)或第七十四条(其余)办理。
第七十六条(施行) 本办法自发布之日起施行,生效条件见第 2.2 节。 本办法施行前已发生的质量问题,按本办法第八章补建问题单,时限自补建之日起计算。
附表一 六大质量维度的判定方法与本项目实例
| 维度 | 判定方法 | 本项目实例 |
|---|---|---|
| 完整性 | 必填字段非空率;记录级齐备性;关联级齐备性 | 工单的工序代码、设备编码、报工时间三项齐备;热处理炉次有装炉工件清单;焊接参数流能对应到焊道标识;图纸有对应的已审核签发工艺卡片 |
| 准确性 | 与权威源比对;与物理约束比对;与业务规则比对 | 板材展开长与按中性层公式计算值的偏差在允差内;热处理实测温度不超过炉膛额定上限;物料价格与采购订单价一致;焊接电流在设备输出能力范围内 |
| 一致性 | 跨系统同一事实的取值比对;同一记录内字段间逻辑自洽 | 物料库存在企业资源计划、仓储管理、实物盘点三方数量一致;工单完工时间不早于开工时间;工艺卡片的工时定额与工时定额系统一致 |
| 唯一性 | 业务唯一键去重;近似重复识别 | 施工号唯一;同一图号同一版本不应有两条有效工艺卡片;物料编码不得一物多码;测点标识在同一设备下唯一 |
| 及时性 | 数据产生到可用的时延;更新频率符合约定 | 报工数据在班次结束后约定时限内到达;设备时序数据按秒级采样不缺段;检验记录在交检后约定时限内录入 |
| 有效性 | 格式符合;值域符合;引用完整 | 材质牌号在钢材牌号码表内;缺陷类型在缺陷类型码表内;图号符合编码规则;供应商编码在供应商主数据中存在 |
「与物理约束比对」一行对本项目的设备与工艺数据特别有效。温度不低于环境温度、 链条安全系数不为负、装炉量不超过炉膛额定装载量、焊接电流在设备输出范围内—— 这类规则不依赖外部权威源,只依赖物理与设备约束,编写成本低, 捕获的往往是录入或采集通道的硬故障。
附表二 质量维度权重表
| 业务域 | 完整性 | 准确性 | 一致性 | 唯一性 | 及时性 | 有效性 |
|---|---|---|---|---|---|---|
| 研发设计 | 0.25 | 0.20 | 0.15 | 0.15 | 0.05 | 0.20 |
| 生产制造 | 0.22 | 0.20 | 0.18 | 0.08 | 0.17 | 0.15 |
| 质量管理 | 0.22 | 0.25 | 0.18 | 0.08 | 0.12 | 0.15 |
| 仓储物流 | 0.20 | 0.15 | 0.28 | 0.12 | 0.10 | 0.15 |
| 采购管理 | 0.20 | 0.20 | 0.20 | 0.12 | 0.08 | 0.20 |
| 设备管理 | 0.18 | 0.25 | 0.12 | 0.05 | 0.25 | 0.15 |
| 营销管理 | 0.25 | 0.18 | 0.17 | 0.12 | 0.08 | 0.20 |
| 财务管理 | 0.20 | 0.25 | 0.25 | 0.10 | 0.05 | 0.15 |
| 人力资源 | 0.28 | 0.17 | 0.15 | 0.15 | 0.05 | 0.20 |
权重为我方建议值,项目期经甲方数据治理委员会核定后生效,核定结果与本表不一致时 以核定结果为准(第四十六条)。本表与技术方案「数据治理(二)」一节给出的权重口径一致。
附表三 校验规则十类模板
| 模板代码 | 模板类型 | 必填参数 | 对应维度 | 典型用途 |
|---|---|---|---|---|
| T01 | 空值检查 | 对象、字段、允许空值条件 | 完整性 | 必填字段非空 |
| T02 | 值域检查 | 对象、字段、码表标识或数值上下限 | 有效性 | 材质牌号、缺陷类型在码表内 |
| T03 | 格式检查 | 对象、字段、正则表达式或日期格式 | 有效性 | 图号格式、炉次号格式、日期格式 |
| T04 | 唯一性检查 | 对象、唯一键字段组合、有效记录筛选条件 | 唯一性 | 施工号、物料编码、图号+版本 |
| T05 | 引用完整性检查 | 对象、外键字段、被引对象与被引键 | 有效性 | 工单引用的设备编码在设备主数据中存在 |
| T06 | 跨系统比对 | 两侧对象、关联键、比对字段、容差 | 一致性 | 三方库存数量比对,容差按计量精度设定 |
| T07 | 逻辑自洽检查 | 对象、字段间约束表达式 | 一致性 | 完工时间不早于开工时间 |
| T08 | 物理约束检查 | 对象、字段、约束表达式、参照参数来源 | 准确性 | 装炉量不超过炉膛额定装载量 |
| T09 | 时效检查 | 对象、时间字段、基准时间、约定时限 | 及时性 | 报工在班次结束后约定时限内到达 |
| T10 | 分布与连续性检查 | 对象、字段、基线分布或采样周期、偏移判定方式 | 准确性、及时性 | 时序缺段、取值恒定、均值单向漂移 |
T10 对设备时序数据不可缺。测点断链、漂移与失效在固定阈值下不会报警, 但在分布与连续性检查下可以识别:采样间隔突然变长说明断链,取值长期恒定不变 说明可能卡死,均值缓慢单向偏移说明可能漂移。识别结果不直接判为设备故障, 而是标记为测点可信度下降,供设备健康诊断类样本的构造使用。
附表四 规则严重级与处置要求
| 严重级 | 判定标准 | 对数据流的影响 | 分派时限 | 整改时限 | 计分权重 |
|---|---|---|---|---|---|
| 阻断 | 关联键缺失、唯一性冲突、引用完整性缺失、阻断级物理约束越界 | 记录不进入加工链路,写入拦截明细 | 1 个工作日 | 5 个工作日 | 3 |
| 告警 | 非关键字段缺失、取值分布异常、时效超限、一致性偏差超容差 | 记录带质量标记进入 | 3 个工作日 | 按月度清单排期 | 2 |
| 提示 | 观察期规则;仅作记录的统计类检查 | 无影响 | 不分派 | 不要求 | 不计分 |
附表五 质量问题处置各环节管理要求
| 环节 | 责任角色 | 必填内容 | 时限要求 |
|---|---|---|---|
| 上报 | 稽核任务自动生成;业务人员手工提报 | 规则标识、检查对象、问题记录主键清单、实测值、期望值、严重级、涉及记录数 | 自动生成即时;手工提报随时 |
| 分派 | 数据质量管理员 | 责任部门、责任人、要求完成时间 | 阻断级 1 个工作日内;告警级 3 个工作日内 |
| 整改 | 责任部门 | 根因分类、整改措施、涉及记录数、是否需要系统改造 | 阻断级 5 个工作日内;告警级按月度清单排期;需系统改造的另定 |
| 复核 | 数据质量管理员 | 复跑规则结果、是否通过、未通过原因、退回次数 | 整改完成后 2 个工作日内 |
| 归档 | 数据质量管理员 | 关闭原因、台账编号、是否派生规则或标准修订 | 复核通过后即时 |
附表六 质量问题根因分类与治理动作
| 根因代码 | 根因分类 | 典型表现 | 治理动作 | 是否计入关闭率分母 |
|---|---|---|---|---|
| R1 | 录入不规范 | 必填字段留空、自由文本代替码值 | 界面必填校验、下拉替代文本、填写指引与培训 | 是 |
| R2 | 流程缺环 | 业务动作发生但系统中无记录 | 补流程节点、把线下动作纳入系统 | 是 |
| R3 | 接口缺陷 | 传输截断、编码转换错误、增量漏取 | 接口改造、增量水位线校正、补数机制 | 是 |
| R4 | 标准缺失 | 同一事实多口径并存 | 补数据元或指标标准、建立映射 | 是 |
| R5 | 规则不当 | 规则本身误判,误报率高 | 规则回炉修改或降级 | 否(不构成质量问题) |
| R6 | 源头不可得 | 数据在业务上确实未产生或未采集 | 评估采集可行性;不可得的登记已知缺口 | 否 |
| R7 | 历史遗留 | 历史数据不符合现行标准 | 分批清洗或仅做映射标记,不强求回改 | 否(转已知缺口或单列清洗任务) |
附表七 三层治理组织在数据质量事项上的职责边界
| 事项 | 数据治理委员会 | 数据治理工作组 | 数据质量管理员 | 业务域数据管理员 | 系统运维责任人 |
|---|---|---|---|---|---|
| 本办法及修订 | 审定 | 起草修订草案 | 承办 | 提意见 | 提意见 |
| 维度权重与评级门限 | 审定 | 提报 | 核算 | 提意见 | — |
| 质量需求清单与分期目标 | — | 核定 | 编制维护 | 提报并确认 | — |
| 校验规则新增、变更、停用 | — | 核定 | 编制并提报 | 核对业务合理性 | 提供取数通道 |
| 规则阈值标定 | — | 核定 | 标定并留档 | 提供整改承载力 | — |
| 稽核任务配置与调度 | — | — | 配置并调度 | — | 保障通道可用 |
| 异常是否构成质量问题 | — | 争议时协调 | 确认 | 提出误报 | — |
| 问题单分派 | — | 争议时协调 | 分派 | 承接 | — |
| 质量问题整改 | — | 督办 | 跟踪 | 组织实施 | 实施系统改造 |
| 复核与归档 | — | — | 执行 | 配合 | — |
| 已知缺口登记与复评 | 审定 | 核定 | 汇总 | 提出申请与复评意见 | 提供可行性判断 |
| 月度质量分析报告 | 听取季度汇报 | 审定 | 编制 | 提供归因依据 | — |
| 季度质量评估结论 | 审定 | 组织 | 汇总 | 参与 | — |
| 质量考核 | 审定结果 | 组织实施 | 提供统计 | 被考核 | — |
| 跨部门责任争议 | 裁定 | 协调 | 初判 | 提异议 | 提供日志证据 |
| 录入规范培训 | — | 督办 | 提供材料 | 组织实施 | — |
表中「初判—协调—裁定」三级是争议处理的完整路径(第十四条)。 须注意三点:初判由数据质量管理员依据元数据血缘与各节点输入输出校验结果作出, 不是凭印象指派;协调由数据治理工作组在五个工作日内完成; 争议期间问题单状态标记为「责任待定」,时限暂停,但阻断级问题的数据拦截措施不解除。 最后这一点是为防止以争议为由解除拦截,让有问题的数据流进加工链路。
图 A8-2 质量事项的责任边界与数据流向。箭头上标注传递的内容。 数据来源:本办法第二章第七条至第十四条、第五条、第六十三条; 三层组织的设立口径见《数据治理组织架构》。
本办法第二章以条文规定了三层治理组织与六类岗位的职责,图 A8-2 又画出了质量事项的责任边界与数据流向。两者分别解决「谁的职责是什么」与「问题往哪流」,还差一件:某一项具体动作,谁拟、谁审、谁批、谁执行。下表按第三章至第十章的动作逐项列明,一项动作一行。表中代码的含义是:拟指起草与填报,签指会签并对本方口径负责,审指审核并出具意见,批指批准并承担决定后果,执指按已批准的结论执行,督指事后核查执行情况,配指按要求提供材料,横线表示该方在此动作中无职责。
表 A8-14 《数据质量管理办法》职责矩阵
| 序 | 动作 | 对应条款 | 数据治理委员会 | 数据治理工作组 | 数据质量管理员 | 业务域数据管理员 | 系统运维责任人 | 数据录入岗 | 我方项目组 |
|---|---|---|---|---|---|---|---|---|---|
| 1 | 六大质量维度判定方法的确定 | 第十五条起 | 审 | 批 | 执 | 签 | 配 | — | 拟 |
| 2 | 维度权重的核定 | 第四十六条起 | 批 | 审 | 拟 | 签 | — | — | 拟 |
| 3 | 三层指标口径的确定 | 第十七条起 | 审 | 批 | 执 | 签 | — | — | 拟 |
| 4 | 五档评级门限的设定与调整 | 第二十一条 | 批 | 审 | 拟 | 签 | — | — | 配 |
| 5 | 场景倒推类质量需求的提出 | 第二十二条 | — | 审 | 配 | 签 | — | — | 拟 |
| 6 | 现状扫描的组织与执行 | 第二十三条 | — | 督 | 审 | 配 | 配 | — | 执 |
| 7 | 扫描时间窗与并发限制的确认 | 第二十三条 | — | 审 | 配 | 配 | 批 | — | 拟 |
| 8 | 错样归因结论的回流与登记 | 第六十四条 | — | 审 | 执 | 签 | — | — | 拟 |
| 9 | 业务提报类需求的受理 | 第二十五条 | — | 督 | 执 | 拟 | — | 配 | 配 |
| 10 | 质量需求清单的编制与维护 | 第二十四条 | — | 批 | 执 | 签 | 配 | — | 拟 |
| 11 | 基线的测定与目标值的核定 | 第二十四条 | 审 | 批 | 拟 | 签 | 配 | — | 执 |
| 12 | 纳管与退出的申请与审批 | 第二十七条 | — | 批 | 审 | 拟 | 配 | — | 配 |
| 13 | 规则编号与元数据的维护 | 第二十八条 | — | 督 | 批 | 配 | — | — | 执 |
| 14 | 模板型规则的编制 | 第三十一条 | — | 审 | 审 | 签 | 配 | — | 拟 |
| 15 | 表达式型规则的编制与评审 | 第三十二条 | — | 审 | 批 | 签 | 配 | — | 拟 |
| 16 | 阈值的标定 | 第三十四条 | — | 审 | 批 | 签 | 配 | — | 拟 |
| 17 | 严重级的判定 | 第三十五条 | — | 批 | 审 | 签 | — | — | 拟 |
| 18 | 观察期的设定与转正式 | 第三十六条 | — | 审 | 批 | 签 | — | — | 执 |
| 19 | 误报率收敛与规则变更 | 第三十七条 | — | 督 | 批 | 签 | 配 | — | 拟 |
| 20 | 入口校验的配置与执行 | 第三十八条 | — | 督 | 审 | 配 | 配 | — | 执 |
| 21 | 周期稽核的调度与执行 | 第三十九条 | — | 督 | 审 | 配 | 配 | — | 执 |
| 22 | 按需稽核的发起 | 第四十条 | — | 审 | 执 | 拟 | 配 | — | 拟 |
| 23 | 多源校验的关联键确认 | 第四十二条 | — | 审 | 审 | 批 | 签 | — | 拟 |
| 24 | 异常明细的留存与向下定位 | 第四十四条 | — | 督 | 审 | 配 | 配 | — | 执 |
| 25 | 向上定位至源头责任方 | 第四十五条 | — | 审 | 执 | 签 | 签 | 配 | 拟 |
| 26 | 评估方案与分析方法的确定 | 第四十六条起 | — | 批 | 执 | 签 | — | — | 拟 |
| 27 | 日月季三节奏的监控执行 | 第五十二条 | — | 督 | 执 | 配 | 配 | — | 执 |
| 28 | 质量分析报告的出具与签发 | 第五十三条 | 审 | 批 | 拟 | 签 | 配 | — | 执 |
| 29 | 质量问题的上报 | 第五十四条 | — | — | 执 | 拟 | 拟 | 拟 | 执 |
| 30 | 问题单的分派 | 第五十五条 | — | 督 | 批 | 签 | 配 | — | 配 |
| 31 | 整改的实施 | 第五十六条 | — | 督 | 审 | 执 | 执 | 执 | 配 |
| 32 | 整改结果的复核 | 第五十七条 | — | 审 | 批 | 签 | 配 | — | 执 |
| 33 | 超期升级 | 第五十九条 | 批 | 执 | 拟 | 配 | 配 | — | 配 |
| 34 | 整改台账的维护与归档 | 第六十条 | — | 督 | 批 | 签 | 配 | — | 执 |
| 35 | 已知缺口的登记与复评 | 第六十二条 | 审 | 批 | 拟 | 签 | 配 | — | 执 |
| 36 | 源数据问题与加工逻辑问题的分界判定 | 第六十三条 | — | 审 | 批 | 签 | 签 | — | 拟 |
| 37 | 低置信数据的降权、排除与标记 | 第六十五条起 | — | 审 | 签 | 批 | — | — | 执 |
| 38 | 考核指标的统计与通报 | 第六十八条起 | 批 | 执 | 拟 | 配 | 配 | 配 | 配 |
| 39 | 录入规范培训的组织与实施 | 第七十二条 | — | 批 | 审 | 签 | 配 | 配 | 执 |
| 40 | 本办法的修订与下游通知 | 第七十四条 | 批 | 执 | 拟 | 签 | 配 | — | 配 |
第 7 行把扫描时间窗与并发限制的「批」放在系统运维责任人,是本矩阵中看起来最不起眼而实际最容易被跳过的一行。全量扫描对源系统是一次真实的负载,扫描方按自己的排期推进、运维方事后才知道,是现状扫描阶段最常见的摩擦来源。把批准权明确给到运维责任人,代价是排期要迁就,好处是扫描做得成。
第 29 行是本矩阵唯一一行三方同时为「拟」的动作。质量问题的上报不设专属责任人:录入岗在录入时发现、业务管理员在使用时发现、运维责任人在系统侧发现,三方都可直接提报;我方项目组在加工时发现的问题走同一入口提报,矩阵中记「执」,是因为问题单的登记与流转由其承办,而不是另设一条上报口。四条发现路径互不重叠,把上报权收口到某一方,另外三条路径上看到的问题就只能靠口头转达。
第 37 行把「批」给到业务域数据管理员而非质量管理员,理由在于降权与排除改变的是这批数据在训练集中的实际权重,影响的是业务可用性而不只是质量分;而把「签」留给质量管理员,是因为判定低置信的依据来自质量规则的执行结果。
责任边界按下列六条划定。
其一,数据质量的业务主责在数据的产生方与业务归口部门。我方项目组负责规则的编制、稽核的执行、问题的定位与报告的出具,不承担源数据本身的整改;整改的实施方按向上定位的结论确定。
其二,源系统的改造、录入流程的调整与录入人员的管理属甲方事项。我方项目组提供问题清单、根因分析与改造建议,不承办源系统的改造实施,也不对录入环节的执行情况负责。
其三,质量目标值的核定权在甲方。我方项目组负责测定基线并提出目标建议,目标值在基线测定后由双方共同核定——以实测基线为依据的目标方具备可验收性,这一安排在本附件第 1.3 节已载明,此处作为责任边界重申一次。
其四,已知缺口的保留是甲方在评估整改成本与业务影响后作出的决定。我方项目组负责缺口的登记、影响评估与到期复评提醒,并在相关数据集的说明文档中声明缺口的影响范围,不代行保留与否的决定。
其五,稽核发现的问题在整改完成前,相关数据按本办法第九章的约束使用。我方项目组按约束执行降权、排除或标记,不以「问题已上报」为由放行不满足阈值的数据进入正式版本。
其六,本办法在项目期由我方起草、甲方发布。发布之前,质量相关事项按甲方现行规定执行;本样章的条款不作为发布前的执行依据,也不构成对甲方现行规定的替代。
本办法第十一章第三节所称附表,即本节 2.5 所列七份。下表给出七份附表的维护责任、更新触发与保存规则,作为本办法的附表目录页。保存期限一栏不直接写年限:年限取决于甲方档案管理制度与法定最低年限,二者孰长从长,本表给出的是定年限的规则。
表 A8-15 《数据质量管理办法》附表索引与保存规则
| 编号 | 附表名称 | 性质 | 维护方 | 审批方 | 更新触发 | 保存期限的确定规则 |
|---|---|---|---|---|---|---|
| 附表一 | 六大质量维度判定方法与本项目实例 | 规范性 | 我方项目组 | 数据治理工作组 | 判定方法调整、新增业务域实例 | 随本办法版本留存 |
| 附表二 | 质量维度权重表 | 规范性 | 数据质量管理员 | 数据治理委员会 | 权重核定、年度复核调整 | 随本办法版本留存;权重调整保留调整前取值,用于解释历史质量分的可比性 |
| 附表三 | 校验规则十类模板 | 规范性 | 我方项目组 | 数据质量管理员 | 模板增减、参数定义调整 | 随本办法版本留存;模板变更保留变更前的参数定义,已按旧模板生成的规则不随之失效 |
| 附表四 | 规则严重级与处置要求 | 规范性 | 数据质量管理员 | 数据治理工作组 | 严重级定义调整、处置要求变化 | 随本办法版本留存 |
| 附表五 | 质量问题处置各环节管理要求 | 规范性 | 数据质量管理员 | 数据治理工作组 | 时限调整、升级路径变化 | 随本办法版本留存;时限调整保留调整前取值,用于判断历史问题单是否超期 |
| 附表六 | 质量问题根因分类与治理动作表 | 规范性 | 我方项目组 | 数据治理工作组 | 新增根因类型、治理动作调整 | 随本办法版本留存 |
| 附表七 | 三层治理组织在数据质量事项上的职责边界 | 规范性 | 数据治理工作组 | 数据治理委员会 | 治理组织设置调整、岗位职责变化 | 随本办法版本留存;职责边界调整保留调整前的划分,用于解释历史事项的归属 |
附表二、附表三与附表五三份的保存规则都带「保留变更前取值」一句,三者的理由是同一个:它们都是把观测值换算成结论的换算尺。权重变了,历史质量分与现在的质量分不在一把尺上;时限变了,历史问题单超没超期的判断跟着变。只保留现行版本的附表,会让历史数据在不知不觉中被按新尺子重读一遍,而趋势分析恰恰是本办法第七章要求的四种分析方法之一。
本办法不是通用数据治理制度的改名版。下面逐项说明它在哪些地方按甲方的业务对象 做了专门设计,这些设计也是项目期条款评审的重点。
一是把六类关联键的完整性与唯一性固定为阻断级。 甲方的数据条件可概括为 「量不少、关联少、口径散」:生产业务数据留存完整,十年前生产了哪个矿的哪些产品 都可追溯;但选型方案以文档散存、工艺卡片与图纸的配对关系存在于人的记忆与文件目录中、 焊接参数流与工件和焊道无对应、热处理炉次与工件和材料批次无稳定关联。 在这种条件下,最先要守住的不是字段填得全不全,而是跨系统追一件事能不能追通。 因此第四十三条把施工号、图号与版本、物料编码与批次、工单号与工序代码、 设备编码与测点标识、炉次号六类关联键的完整性与唯一性规则一律定为阻断级—— 这六个键断一条,下游若干个数据集的样本就构造不出来。
二是把「与物理约束比对」写进准确性的判定方法。 甲方的工艺与设备数据缺少外部权威源 可以比对:板材展开长的正确值没有第二套系统可查,热处理实测温度也没有对照表。 但这类数据有物理约束可依:装炉量不能超过炉膛额定装载量,实测温度不能低于环境温度 也不能超过炉膛额定上限,中频电源的功率、频率、电流、电压之间有确定关系, 焊接电流不能超过设备输出能力,刮板链的链条安全系数不能为负。 附表一把这类规则列为准确性的三种判定方法之一,第三十二条把物理与设备约束 列为阈值标定的第二优先依据。这类规则编写成本低,捕获的往往是录入错误或采集通道硬故障。
三是把 63 万张图纸与工艺卡片的配对关系作为研发设计域的首要完整性对象。 甲方历史图纸约六十三万张,每一张历史上都配有一张已审核签发的工艺卡片, 天然构成成对的监督样本。这是工艺设计类数据集最有价值的来源, 也是整个项目中少有的「标签天然存在」的数据。但配对关系当前不在系统中可查, 只存在于文件目录与人的记忆里。附表一在完整性一行把「图纸有对应的已审核签发工艺卡片」 列为本项目实例,第四十条把图纸与工艺卡配对的稽核频率定为每月, 其作用在首期不是发现偶发错误,而是度量配对覆盖率本身, 作为工艺设计类数据集可构造样本量的前置判断依据。
四是把 28 道备料工序作为生产制造域工序级完整性的检查粒度。 板材备料环节共二十八道工序,工单的工序代码、设备编码、报工时间三项是工序级完整性的 必填项。制造执行系统已实现跨分厂、跨部门多工序多路线管控,下道工序须待本车间 全部工序报工完成后才能开始,这个机制使工序链在系统中是闭合的; 但报工时点相对实际作业有滞后,以报工时间推算的工序实际耗时不可靠。 因此及时性维度在生产制造域的权重取 0.17,明显高于研发设计域的 0.05(附表二), 并把工单与报工类的稽核频率定为 T+1(第四十条)。
五是把测点可信度与设备故障分开。 甲方的设备运行数据存在测点缺失与噪声, 装备远程运维平台的报警不少、故障标签很少,报警与真实故障之间缺少可核对的证据。 如果把分布与连续性检查的结果直接判为设备故障,模型学到的会是传感器故障 而不是设备故障。附表三 T10 模板的说明明确:识别结果标记为测点可信度下降, 不判为设备故障,供设备健康诊断类样本的构造使用。设备管理域的准确性与及时性权重 各取 0.25,是九个域中最高的两项。
六是三类已预见缺口不走整改。 第六十二条点明的三类缺口——焊接参数流与工件、 焊道无对应;故障记录与数据段无配对;纸质检测报告尚未数字化—— 在当前业务与采集条件下无法通过整改解决。把它们算进整改任务, 会让关闭率永远不达标。本办法的处置是登记在册、按季复评, 并在数据集加工时据实下调相关样本的可构造量预期,在数据卡中如实记载。
评审。 本办法的评审分三道。第一道是业务评审,由九个业务域数据管理员 逐章核对职责条款、时限条款与本域实际承受能力,重点核对第五十七条的整改时限 在本域是否可行。第二道是合规评审,由甲方审计法务部与企业管理部核对本办法 与甲方既有管理制度、档案管理规定是否冲突。第三道是审定,由数据治理委员会审定发布。 三道评审的意见与处理结果随文件留档。
修订节奏。 定期修订每年一次,在年度质量评估后启动;临时修订在第七十四条 列明的四种情形下启动,情形发生后二十个工作日内提出草案。
修订的下游通知。 这是本办法在修订机制上专门设置的一条约束(第七十四条): 修订发布后须完成三项通知——向九个业务域数据管理员发送修订说明与差异对照、 更新数据治理开发工具平台中与条款关联的流程配置与时限参数、在下一次月度例会通报要点。 未完成通知的修订不生效。设置这条约束的原因是制度修订最常见的失效方式不是没改, 而是文件改了、平台里的流程配置和时限参数没改、业务部门也不知道改了, 于是执行口径照旧。
图 A8-3 《数据质量管理办法》的评审与修订流程及下游通知。 数据来源:本办法第七十四条;三道评审的组织口径依招标文件实施范围部门清单(b0680)(b0681)。
| 项 | 内容 |
|---|---|
| 文件名称 | 《矿山装备制造领域高质量数据集建设项目数据质量需求清单》 |
| 文档编号 | GHY26691-GV-06-0002-V1.0 |
| 版本号 | V1.0 |
| 文件性质 | 台账式清单(项目期持续维护,按月增补、按季复核) |
| 载体 | 数据治理开发工具平台质量管理模块内的结构化清单;每季导出一版盖章纸质件归档 |
| 起草与维护 | 数据质量管理员(项目期由我方履行并向甲方岗位移交) |
| 核定 | 甲方数据治理工作组 |
| 发布日期 | 【待填:首版核定日期】 |
| 密级 | 内部 |
| 本版条目数 | 四百二十六条(首批,按九个业务域分布,见第 3.6 节) |
| 依据文件 | 《数据质量管理办法》第四章;《数据元标准》;《数据资源目录》 |
本清单适用于九个业务域已纳入《数据资源目录》的数据对象(b1336)。 清单中每一条为一项「质量诉求」,即对某一数据对象的某一字段或某一关联关系, 写明其须达到什么状态、现在是什么状态、何时达到什么状态、不达到会有什么后果。
生效条件有两条。第一条,清单中「现状实测」一列须由首轮全量质量扫描填入, 未填的条目「目标值与达成期」一栏填「待基线」,不纳入考核(《数据质量管理办法》第二十五条)。 第二条,清单中「责任部门」一列须经该部门确认,未确认的条目不得分派问题单。
本样章给出的「现状实测」数值均为示意值,用于说明填写粒度与数据形态, 项目期以首轮扫描实测结果替换。
| 章 | 节 | 条目 |
|---|---|---|
| 第一章 编制说明 | 1.1 编制依据<br>1.2 编制方法<br>1.3 字段定义与取值域<br>1.4 维护节奏 | 1.2.1 场景倒推<br>1.2.2 现状扫描<br>1.2.3 错样归因<br>1.2.4 业务提报<br>1.3.1 字段总表<br>1.3.2 取值域 |
| 第二章 优先级判定 | 2.1 三条判据<br>2.2 关联键的特别规定<br>2.3 优先级与稽核频率的对应 | 2.1.1 跨系统关联键<br>2.1.2 数据集必需输入<br>2.1.3 业务后果 |
| 第三章 分业务域清单 | 3.1 研发设计<br>3.2 生产制造<br>3.3 质量管理<br>3.4 仓储物流<br>3.5 采购管理<br>3.6 设备管理<br>3.7 营销管理<br>3.8 财务管理<br>3.9 人力资源 | 各节下设「清单条目表」「业务后果说明」「与数据集的对应关系」三项 |
| 第四章 统计汇总 | 4.1 按域统计<br>4.2 按维度统计<br>4.3 按优先级统计<br>4.4 规则派生覆盖率 | 4.4.1 未派生规则的条目清单 |
| 第五章 维护记录 | 5.1 增补记录<br>5.2 复核记录<br>5.3 转已知缺口记录 | — |
表 A8-3 《数据质量需求清单》字段总表
| 序 | 字段名 | 必填 | 数据类型 | 取值域或格式 | 说明 |
|---|---|---|---|---|---|
| 1 | 需求标识 | 是 | 字符 | DQ-N-<域码>-<三位序号> | 全局唯一,分配后不变更、不复用 |
| 2 | 业务域 | 是 | 枚举 | 人力资源/研发设计/生产制造/仓储物流/财务管理/设备管理/采购管理/营销管理/质量管理 | 九域取值,与 b1336 一致 |
| 3 | 数据对象 | 是 | 字符 | 《数据资源目录》登记的对象名称 | 系统、表或业务实体 |
| 4 | 承载系统 | 是 | 枚举 | 产品全生命周期管理/企业资源计划/制造执行/质量管理/仓储管理与物流执行/协同办公/数据采集与监控/物联网与设备数据平台/热处理群控/装备远程运维平台/工时定额/售后服务与备件管理/企业文档 | 该数据对象的承载系统 |
| 5 | 数据元标识 | 否 | 字符 | 引用《数据元标准》的数据元编号 | 关联关系类诉求可空 |
| 6 | 字段或关联关系 | 是 | 字符 | 字段名,或「A与B的配对关系」 | 诉求的具体落点 |
| 7 | 质量维度 | 是 | 枚举 | 完整性/准确性/一致性/唯一性/及时性/有效性 | 单选,不得多选 |
| 8 | 质量诉求 | 是 | 文本 | 一句话写明「该字段须达到什么状态」 | 须可被规则化,不得写「提高质量」一类无法检查的表述 |
| 9 | 诉求来源 | 是 | 枚举 | 场景倒推/现状扫描/数据集错样归因/业务提报 | 来源为错样归因的须填来源批次号 |
| 10 | 关联场景或数据集 | 否 | 字符 | 十一个验证场景名;四类数据集及其业务域子集 | 来源为场景倒推的必填 |
| 11 | 现状实测 | 否 | 数值+日期 | 实测值与扫描日期 | 首轮扫描前为空 |
| 12 | 目标值与达成期 | 否 | 文本 | 「相对基线问题量下降 X%,YYYY年Q N」 | 基线为空时填「待基线」 |
| 13 | 业务后果 | 是 | 文本 | 不达标时的具体影响 | 须写到具体作业或具体数据集,不写「影响决策」一类泛述 |
| 14 | 优先级 | 是 | 枚举 | 高/中/低 | 按第二章三条判据判定 |
| 15 | 关联规则 | 否 | 字符 | 一个或多个规则标识 | 未派生规则的条目列入第 4.4 节清单 |
| 16 | 责任部门 | 是 | 字符 | 甲方部门名称 | 须经该部门确认 |
| 17 | 状态 | 是 | 枚举 | 待基线/进行中/已达成/转已知缺口/已关闭 | 状态流转见第 3.8 节 |
| 18 | 登记日期 | 是 | 日期 | YYYY-MM-DD | — |
| 19 | 最近复核日期 | 否 | 日期 | YYYY-MM-DD | 按季复核后更新 |
字段 8「质量诉求」有一条硬要求:须可被规则化。写「工序代码须完整填写」可以派生规则, 写「提高工单数据质量」不能。清单复核时凡发现无法派生规则的诉求,退回提报人重写。 这一条是清单与规则库之间的接口约束,没有它,清单会积累一批永远无法验收的条目。
下列各表为样例,条目的字段结构、诉求写法与优先级判定为正式口径, 「现状实测」为示意值。为便于在 A4 版面排布,每域清单表取八列, 其余字段(承载系统、数据元标识、业务后果、责任部门等)在各域的说明段中述及。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-RD-001 | 图号 | 完整性 | 图文档记录的图号非空 | 现状扫描 | 非空率 99.2%(2026-11-20) | 下降至问题量基线的 10%,2027Q2 | 高 |
| DQ-N-RD-002 | 图号+版本 | 唯一性 | 同一图号同一版本不存在两条有效记录 | 场景倒推 | 冲突 1 142 组(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-RD-003 | 图号 | 有效性 | 图号符合甲方图号编码规则 | 现状扫描 | 符合率 93.7%(2026-11-20) | 下降 60%,2027Q3 | 高 |
| DQ-N-RD-004 | 图纸与工艺卡片的配对关系 | 完整性 | 每一张已签发图纸存在对应的已审核签发工艺卡片 | 场景倒推 | 配对率 61.4%(2026-11-20) | 配对率提升至 85%,2027Q4 | 高 |
| DQ-N-RD-005 | 材质牌号 | 有效性 | 材质牌号取值在钢材牌号码表内 | 现状扫描 | 符合率 88.1%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-RD-006 | 零件规格参数(长·宽·厚) | 完整性 | 板材类零件的三项规格参数齐备 | 场景倒推 | 齐备率 82.5%(2026-11-20) | 齐备率提升至 95%,2027Q3 | 高 |
| DQ-N-RD-007 | 工序代码序列 | 有效性 | 工艺路线中的工序代码在工序码表内,且备料类工序落在二十八道工序范围内 | 场景倒推 | 符合率 90.3%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-RD-008 | 展开长 | 准确性 | 展开长与按中性层公式计算值的偏差在允差内 | 场景倒推 | 偏差超限 3.8%(2026-11-20) | 下降 50%,2027Q4 | 中 |
| DQ-N-RD-009 | 物料清单层级 | 一致性 | 产品结构层级与企业资源计划物料清单层级一致 | 现状扫描 | 一致率 91.2%(2026-11-20) | 下降 60%,2027Q3 | 中 |
| DQ-N-RD-010 | 工艺卡片工时定额 | 一致性 | 工艺卡片的工时定额与工时定额系统取值一致 | 业务提报 | 一致率 86.7%(2026-11-20) | 下降 50%,2027Q4 | 中 |
| DQ-N-RD-011 | 图文档审批状态 | 有效性 | 审批状态取值在状态码表内,且已发放图纸的状态为「已签发」 | 现状扫描 | 符合率 96.4%(2026-11-20) | 下降 60%,2027Q2 | 中 |
| DQ-N-RD-012 | 选型输入参数(产量·作业制度·截深·截高·推移步距) | 完整性 | 结构化选型记录中五类接口参数齐备 | 场景倒推 | 齐备率 23.1%(2026-11-20) | 新增记录齐备率趋向 90%,2027Q4;历史记录转已知缺口 | 高 |
业务后果说明。 本域条目中影响最大的是 DQ-N-RD-004。甲方约六十三万张历史图纸, 历史上每一张都配有一张已审核签发的工艺卡片,这是工艺设计类数据集最有价值的 监督样本来源;但配对关系当前不在系统中可查,只存在于文件目录与人的记忆中。 配对率每提高一个百分点,工艺设计类数据集的可构造样本量相应增加。 DQ-N-RD-002 与 DQ-N-RD-003 是 DQ-N-RD-004 的前提:图号不唯一、不规范,配对就无法自动完成。
DQ-N-RD-012 的处置方式与其余条目不同。选型输入中的截深、截高、推移步距一类接口参数, 是矿方与刮板输送机、采煤机、液压支架、破碎机各方会商妥协后确定的, 往往只存在于交流过程中,没有规范电子留痕。因此本条的目标只对新增记录设定, 历史记录按《数据质量管理办法》第六十二条转已知缺口,不作回溯整改要求。
与数据集的对应关系。 本域条目主要支撑产品工艺设计类数据集 (预训练 70 亿 Token、指令微调 10 万条、偏好 0.8 万组、基准 0.1 万条), 以及产品智能选型、板材备料工艺智能设计两个验证场景(b0684)。 责任部门为刮板机研究分院、工艺研究分院。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-MF-001 | 施工号 | 唯一性 | 施工号在有效工单范围内唯一 | 场景倒推 | 冲突 37 组(2026-11-20) | 下降至 0,2027Q1 | 高 |
| DQ-N-MF-002 | 工单号+工序代码 | 完整性 | 工单的工序代码非空 | 现状扫描 | 非空率 97.6%(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-MF-003 | 设备编码 | 完整性 | 工单工序记录的设备编码非空 | 场景倒推 | 非空率 84.3%(2026-11-20) | 非空率提升至 95%,2027Q3 | 高 |
| DQ-N-MF-004 | 报工时间 | 完整性 | 已完工工序的报工时间非空 | 现状扫描 | 非空率 95.1%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-MF-005 | 报工时间 | 及时性 | 报工数据在班次结束后约定时限内到达 | 场景倒推 | 超时率 28.4%(2026-11-20) | 下降 50%,2027Q4 | 高 |
| DQ-N-MF-006 | 开工时间与完工时间 | 一致性 | 完工时间不早于开工时间 | 现状扫描 | 违反 612 条(2026-11-20) | 下降至 0,2027Q1 | 高 |
| DQ-N-MF-007 | 备料工序报工覆盖 | 完整性 | 板材备料环节二十八道工序中已排产工序均有报工记录 | 场景倒推 | 覆盖率 91.8%(2026-11-20) | 覆盖率提升至 98%,2027Q3 | 高 |
| DQ-N-MF-008 | 设备编码 | 有效性 | 工单引用的设备编码在设备主数据中存在 | 现状扫描 | 符合率 94.2%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-MF-009 | 实际工时与工时定额 | 一致性 | 实际工时与定额的偏差率在约定上限内 | 业务提报 | 偏差超限 19.3%(2026-11-20) | 下降 40%,2027Q4 | 中 |
| DQ-N-MF-010 | 炉次号 | 完整性 | 热处理工序记录的炉次号非空 | 场景倒推 | 非空率 76.5%(2026-11-20) | 非空率提升至 95%,2027Q3 | 高 |
| DQ-N-MF-011 | 炉次与装炉工件清单的配对关系 | 完整性 | 每一炉次存在装炉工件清单 | 场景倒推 | 配对率 68.2%(2026-11-20) | 配对率提升至 90%,2027Q4 | 高 |
| DQ-N-MF-012 | 焊接参数流与焊道的配对关系 | 完整性 | 焊接参数流能按工件标识与焊道标识对应 | 场景倒推 | 配对率 4.6%(2026-11-20) | 首期度量覆盖率;具备配对条件后设目标 | 高 |
| DQ-N-MF-013 | 工序流转顺序 | 一致性 | 工序实际流转顺序与工艺路线定义一致 | 现状扫描 | 一致率 93.4%(2026-11-20) | 下降 60%,2027Q3 | 中 |
| DQ-N-MF-014 | 工单状态 | 有效性 | 工单状态取值在状态码表内 | 现状扫描 | 符合率 99.1%(2026-11-20) | 下降 60%,2027Q2 | 低 |
| DQ-N-MF-015 | 施工号与项目的关联 | 完整性 | 工单的施工号可关联到项目记录 | 场景倒推 | 关联率 96.8%(2026-11-20) | 下降 70%,2027Q2 | 高 |
业务后果说明。 DQ-N-MF-005 的影响是系统性的而非偶发的。报工时点相对实际作业有滞后, 意味着以报工时间推算的工序实际耗时不可靠,制造过程类数据集中与节拍、工时相关的样本 会带入系统性偏差——这类偏差不会表现为个别异常值,而是整体偏移, 在数据集质检阶段很难靠统计异常检出,只能在源头治理。 因此本条的分期目标不追求短期达标,而是按季度持续下降, 并在制造过程类数据集的数据卡中注明报工时延的实测分布。
DQ-N-MF-012 当前配对率极低,甲方焊接参数流与工件、焊道无对应关系。 本条在首期的作用不是发现偶发错误,而是度量配对覆盖率本身, 作为焊接过程控制智能化场景可构造样本量的前置判断依据。 在配对条件具备前不设达标目标,按《数据质量管理办法》第六十二条按季复评。
与数据集的对应关系。 本域条目主要支撑制造过程类数据集 (预训练 105 亿 Token、指令微调 15 万条、偏好 1 万组、基准 0.2 万条), 以及板材备料工艺智能设计、热处理过程控制智能化、焊接过程控制智能化三个验证场景。 责任部门为生产管理部、备料加工分厂、热处理分厂、结构件焊接分厂。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-QM-001 | 缺陷类型 | 有效性 | 缺陷类型取值在缺陷类型码表内 | 场景倒推 | 码值化率 31.7%(2026-11-20) | 新增记录码值化率趋向 90%,2027Q4 | 高 |
| DQ-N-QM-002 | 检验记录与工艺标注重要尺寸的配对关系 | 完整性 | 工艺标注的重要尺寸均有对应检验记录 | 场景倒推 | 配对率 79.3%(2026-11-20) | 配对率提升至 95%,2027Q3 | 高 |
| DQ-N-QM-003 | 检验结论 | 完整性 | 已交检记录的检验结论非空 | 现状扫描 | 非空率 98.4%(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-QM-004 | 检验记录录入时间 | 及时性 | 检验记录在交检后约定时限内录入 | 业务提报 | 超时率 17.2%(2026-11-20) | 下降 50%,2027Q4 | 中 |
| DQ-N-QM-005 | 炉次与检验结果的配对关系 | 完整性 | 每一热处理炉次存在对应检验结论 | 场景倒推 | 配对率 72.6%(2026-11-20) | 配对率提升至 92%,2027Q4 | 高 |
| DQ-N-QM-006 | 硬度实测值 | 准确性 | 硬度实测值在该材质该热处理工艺的合理区间内 | 场景倒推 | 越界 2.1%(2026-11-20) | 下降 50%,2027Q3 | 中 |
| DQ-N-QM-007 | 硬度计量单位 | 一致性 | 同一检验项目的硬度单位口径统一(布氏/洛氏不混用) | 现状扫描 | 混用记录 4 318 条(2026-11-20) | 下降 90%,2027Q2 | 高 |
| DQ-N-QM-008 | 不合格品处置票据 | 完整性 | 不合格判定记录存在对应处置票据 | 现状扫描 | 配对率 88.5%(2026-11-20) | 配对率提升至 97%,2027Q3 | 中 |
| DQ-N-QM-009 | 交检拍照附件 | 完整性 | 关键工序检验记录附交检照片 | 场景倒推 | 附件率 54.9%(2026-11-20) | 附件率提升至 80%,2027Q4 | 中 |
| DQ-N-QM-010 | 缺陷描述与工艺参数的关联 | 完整性 | 缺陷记录可关联到对应工序的工艺参数 | 场景倒推 | 关联率 11.3%(2026-11-20) | 首期度量覆盖率;关联键贯通后设目标 | 高 |
| DQ-N-QM-011 | 检验项目编码 | 有效性 | 检验项目编码在检验项目主数据中存在 | 现状扫描 | 符合率 95.7%(2026-11-20) | 下降 70%,2027Q2 | 中 |
| DQ-N-QM-012 | 纸质检测报告 | 完整性 | 纸质无损检测报告已数字化并与工件标识关联 | 业务提报 | 数字化率 0%(2026-11-20) | 转已知缺口,按季复评 | 高 |
业务后果说明。 本域两条条目决定质量类数据集能否构造出参数—结果配对样本。 甲方质量管理系统新上线不久,缺陷描述为自由文本,未与工艺参数关联; 在这种状态下,质量类数据集缺少可用的标签来源,焊接与热处理的参数—结果配对样本 无法直接构造。DQ-N-QM-001 解决标签的可枚举性,DQ-N-QM-010 解决标签与输入的可关联性, 两条都达成后质量类数据集的监督样本才成立。两条都不设短期达标目标: 前者只对新增记录设目标,后者在关联键贯通前只度量覆盖率。
DQ-N-QM-007 看起来是小问题,实际影响很直接。布氏硬度与洛氏硬度数值范围不同、 量纲不同,混用会使同一检验项目的数值分布出现双峰;若不在源头统一, 数据集加工时按统一口径归一化会把真实差异抹平,按原值使用则模型学到的是两套标尺。 因此本条优先级定为高,目标为两个季度内下降九成。
DQ-N-QM-012 是三类已预见缺口之一。甲方纸质检测报告数量可观但尚未数字化, 数字化涉及扫描、识别、与工件标识关联三步工作,不属本包范围, 按《数据质量管理办法》第六十二条登记为已知缺口,按季复评。
与数据集的对应关系。 本域条目主要支撑产品质量类数据集 (预训练 164 亿 Token、指令微调 24 万条、偏好 1.6 万组、基准 0.25 万条), 以及热处理过程控制智能化、焊接过程控制智能化两个验证场景。 责任部门为质量管理归口部门【待填:甲方质量管理部门正式名称】、热处理分厂、结构件焊接分厂。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-WH-001 | 物料编码 | 唯一性 | 物料编码不存在一物多码 | 场景倒推 | 疑似重复 2 874 组(2026-11-20) | 下降 70%,2027Q4 | 高 |
| DQ-N-WH-002 | 库存数量(三方) | 一致性 | 企业资源计划、仓储管理、实物盘点三方库存数量一致 | 场景倒推 | 不一致项 6.8%(2026-11-20) | 下降 60%,2027Q3 | 高 |
| DQ-N-WH-003 | 批次号 | 完整性 | 出入库流水的批次号非空 | 场景倒推 | 非空率 89.4%(2026-11-20) | 非空率提升至 97%,2027Q3 | 高 |
| DQ-N-WH-004 | 批次号与供应商到货单的追溯链 | 完整性 | 材料批次可追溯到供应商与到货单 | 场景倒推 | 可追溯率 83.1%(2026-11-20) | 可追溯率提升至 95%,2027Q4 | 高 |
| DQ-N-WH-005 | 库位 | 有效性 | 库位编码在库位主数据中存在 | 现状扫描 | 符合率 97.3%(2026-11-20) | 下降 70%,2027Q2 | 中 |
| DQ-N-WH-006 | 计量单位 | 一致性 | 同一物料在各系统中的计量单位一致 | 现状扫描 | 一致率 94.6%(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-WH-007 | 出入库时间 | 及时性 | 出入库流水在作业后约定时限内入账 | 业务提报 | 超时率 11.7%(2026-11-20) | 下降 50%,2027Q4 | 中 |
| DQ-N-WH-008 | 库存物料与部件的对应关系 | 完整性 | 库存物料可对应到产品部件 | 场景倒推 | 对应率 47.2%(2026-11-20) | 对应率提升至 80%,2027Q4 | 高 |
| DQ-N-WH-009 | 安全库存与储备量 | 完整性 | 关键物料的安全库存参数非空 | 场景倒推 | 非空率 38.5%(2026-11-20) | 非空率提升至 85%,2027Q3 | 高 |
| DQ-N-WH-010 | 物料状态 | 有效性 | 物料状态取值在状态码表内 | 现状扫描 | 符合率 98.8%(2026-11-20) | 下降 60%,2027Q2 | 低 |
业务后果说明。 DQ-N-WH-002 直接对应甲方现在要靠人工对账的场合。 三方库存不一致时,库存控制智能化场景的输入不可信:按企业资源计划账面算与 按实物盘点算会得出不同的补货建议。本条的容差口径按计量精度设定, 整件物料零容差,散料按计量器具精度设定。
DQ-N-WH-009 是库存控制智能化场景的前置条件。甲方企业资源计划系统的需求运算未启用, 储备量仍由生产管理人员按经验估算,系统中的安全库存参数大面积为空。 参数不补齐,场景验证只能用历史出入库流水反推,验证结论的说服力下降。
与数据集的对应关系。 本域条目主要支撑供需计划类数据集 (预训练 276 亿 Token、指令微调 40 万条、偏好 3.2 万组、基准 0.4 万条), 以及库存控制智能化验证场景。责任部门为生产管理部、仓储归口部门 【待填:甲方仓储物流部门正式名称】。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-PU-001 | 供应商编码 | 有效性 | 采购订单引用的供应商编码在供应商主数据中存在 | 现状扫描 | 符合率 96.1%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-PU-002 | 物料编码 | 完整性 | 采购订单行的物料编码非空 | 现状扫描 | 非空率 98.7%(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-PU-003 | 采购价格 | 一致性 | 采购订单价与企业资源计划物料价格一致 | 场景倒推 | 一致率 92.4%(2026-11-20) | 下降 60%,2027Q3 | 高 |
| DQ-N-PU-004 | 交货期 | 完整性 | 采购订单行的要求交货期非空 | 场景倒推 | 非空率 90.2%(2026-11-20) | 非空率提升至 98%,2027Q3 | 高 |
| DQ-N-PU-005 | 实际到货时间 | 及时性 | 到货记录在收货后约定时限内入账 | 业务提报 | 超时率 14.6%(2026-11-20) | 下降 50%,2027Q4 | 中 |
| DQ-N-PU-006 | 材质牌号 | 有效性 | 采购物料的材质牌号在钢材牌号码表内 | 场景倒推 | 符合率 87.5%(2026-11-20) | 下降 70%,2027Q3 | 高 |
| DQ-N-PU-007 | 采购订单号 | 唯一性 | 采购订单号唯一 | 现状扫描 | 冲突 9 组(2026-11-20) | 下降至 0,2027Q1 | 中 |
| DQ-N-PU-008 | 质检结论回填 | 完整性 | 到货批次的入厂质检结论已回填 | 场景倒推 | 回填率 76.8%(2026-11-20) | 回填率提升至 93%,2027Q4 | 中 |
| DQ-N-PU-009 | 订单状态 | 有效性 | 订单状态取值在状态码表内 | 现状扫描 | 符合率 99.3%(2026-11-20) | 下降 60%,2027Q2 | 低 |
业务后果说明。 DQ-N-PU-006 与研发设计域的 DQ-N-RD-005 是同一问题在两端的表现。 材质牌号在设计端与采购端若不是同一套码值,材料批次的追溯链在这一环断开, 热处理工艺参数与材料实际牌号的配对就不可靠——同一热处理程序用于不同牌号, 结果不同,而数据集里看不出牌号差异。两条条目须同步整改,不可只改一端。
与数据集的对应关系。 本域条目支撑供需计划类数据集,并为产品质量类数据集 提供材料批次侧的输入。责任部门为采购归口部门【待填:甲方采购管理部门正式名称】。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-EQ-001 | 设备编码+测点标识 | 唯一性 | 测点标识在同一设备下唯一 | 场景倒推 | 冲突 148 组(2026-11-20) | 下降至 0,2027Q1 | 高 |
| DQ-N-EQ-002 | 时序数据采样连续性 | 及时性 | 秒级采样测点不出现超过约定时长的缺段 | 场景倒推 | 日均缺段测点数 63(2026-11-20) | 下降 60%,2027Q3 | 高 |
| DQ-N-EQ-003 | 测点取值 | 准确性 | 测点取值不长期恒定不变 | 场景倒推 | 疑似卡死测点 21 个(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-EQ-004 | 测点取值均值 | 准确性 | 测点取值均值不出现无工艺变更支持的单向漂移 | 场景倒推 | 疑似漂移测点 17 个(2026-11-20) | 下降 60%,2027Q3 | 高 |
| DQ-N-EQ-005 | 炉膛实测温度 | 准确性 | 实测温度不低于环境温度且不超过炉膛额定上限 | 场景倒推 | 越界 0.4%(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-EQ-006 | 装炉量 | 准确性 | 装炉量不超过炉膛额定装载量 | 场景倒推 | 越界 1.2%(2026-11-20) | 下降 80%,2027Q2 | 高 |
| DQ-N-EQ-007 | 中频电源功率·频率·电流·电压 | 一致性 | 四项参数之间的关系符合电气约束 | 场景倒推 | 违反 2.7%(2026-11-20) | 下降 60%,2027Q3 | 中 |
| DQ-N-EQ-008 | 测点配置表 | 完整性 | 已接入测点的量纲、量程、采样周期三项配置齐备 | 场景倒推 | 齐备率 72.4%(2026-11-20) | 齐备率提升至 95%,2027Q2 | 高 |
| DQ-N-EQ-009 | 报警事件与维修事实的配对关系 | 完整性 | 报警事件可配对到服务工单中的维修事实 | 场景倒推 | 配对率 8.9%(2026-11-20) | 首期度量覆盖率;具备配对条件后设目标 | 高 |
| DQ-N-EQ-010 | 设备编码 | 有效性 | 时序数据的设备编码在设备主数据中存在 | 现状扫描 | 符合率 93.8%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-EQ-011 | 时间戳 | 一致性 | 各采集通道时间戳对齐到统一时间基准 | 场景倒推 | 偏差超限通道 11 个(2026-11-20) | 下降至 0,2027Q2 | 高 |
| DQ-N-EQ-012 | 备件出库记录与服务工单的关联 | 完整性 | 备件出库记录可关联到服务工单 | 业务提报 | 关联率 81.3%(2026-11-20) | 关联率提升至 95%,2027Q4 | 中 |
业务后果说明。 本域的质量问题有一个特点:它们不表现为「数据缺失」, 而表现为「数据看起来正常但不可信」。测点卡死后取值仍在正常区间, 采样间隔变长后数据仍有值,均值漂移后曲线仍然平滑。这三类问题在固定阈值下不会报警, 只有分布与连续性检查能识别(《数据质量管理办法》附表三 T10)。 因此 DQ-N-EQ-002 至 DQ-N-EQ-004 三条的检查频率定为每日,发现晚一天就损失一天的时序样本。
DQ-N-EQ-011 容易被忽略但影响面很大。装备在井下连续运行,刮板输送机被液压支架推移、 被采煤机在机身上行走,三类设备的运动相互耦合,在役监测信号中含有大量来自其它设备的 耦合干扰。要把干扰与真实状态区分开,前提是各通道时间戳对齐; 时间基准不统一,信号间的因果关系就无法判断。
DQ-N-EQ-009 是三类已预见缺口之一。甲方装备远程运维平台报警不少、故障标签很少, 报警与真实故障之间缺少可核对的证据;售后服务与备件管理系统中的服务工单 与远程运维平台的事件尚未打通。本条在首期度量配对覆盖率, 作为刮板输送装备健康诊断智能化场景可构造样本量的前置判断依据。
与数据集的对应关系。 本域条目主要支撑制造过程类与产品质量类数据集的时序侧输入, 以及热处理过程控制智能化、刮板输送装备健康诊断智能化两个验证场景。 责任部门为设备管理归口部门【待填:甲方设备管理部门正式名称】、热处理分厂。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-MK-001 | 施工号与项目的对应关系 | 完整性 | 项目记录可对应到生产施工号 | 场景倒推 | 对应率 74.6%(2026-11-20) | 对应率提升至 92%,2027Q4 | 高 |
| DQ-N-MK-002 | 客户矿井工作面类型 | 完整性 | 项目记录的工作面类型非空 | 场景倒推 | 非空率 58.3%(2026-11-20) | 非空率提升至 90%,2027Q3 | 高 |
| DQ-N-MK-003 | 工作面类型 | 有效性 | 工作面类型取值在码表内(超长/常规/大采高/薄煤层) | 场景倒推 | 符合率 81.2%(2026-11-20) | 下降 70%,2027Q3 | 高 |
| DQ-N-MK-004 | 地质与煤质参数 | 完整性 | 项目记录的地质条件与煤质参数齐备 | 场景倒推 | 齐备率 34.7%(2026-11-20) | 新增记录齐备率趋向 85%,2027Q4 | 高 |
| DQ-N-MK-005 | 合同编号 | 唯一性 | 合同编号唯一 | 现状扫描 | 冲突 4 组(2026-11-20) | 下降至 0,2027Q1 | 中 |
| DQ-N-MK-006 | 合同与选型方案的关联 | 完整性 | 合同可关联到选型方案文档 | 场景倒推 | 关联率 41.5%(2026-11-20) | 关联率提升至 80%,2027Q4 | 高 |
| DQ-N-MK-007 | 客户编码 | 有效性 | 客户编码在客户主数据中存在 | 现状扫描 | 符合率 90.8%(2026-11-20) | 下降 70%,2027Q3 | 中 |
| DQ-N-MK-008 | 项目状态 | 有效性 | 项目状态取值在状态码表内 | 现状扫描 | 符合率 95.2%(2026-11-20) | 下降 60%,2027Q2 | 低 |
业务后果说明。 本域条目的共同指向是产品智能选型场景的输入条件。 装备按矿井工作面条件定制,工作面按超长、常规、大采高、薄煤层等类型分化, 不同类型对应不同的选型校核方法;选型输入中产量与作业制度类参数来自矿方生产规划, 地质与煤质类参数来自矿方地质条件报告。这些参数若在系统中大面积为空, 选型类样本就只能从历史文档中抽取,抽取质量取决于文档解析,不如结构化字段可靠。 甲方客户关系管理系统正在上线、历史数据较少,因此 DQ-N-MK-002 与 DQ-N-MK-004 两条只对新增记录设目标,历史记录按文档解析途径补充并标注来源。
与数据集的对应关系。 本域条目支撑供需计划类数据集与产品智能选型验证场景。 责任部门为营销中心。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-FI-001 | 物料价格 | 一致性 | 财务侧物料价格与企业资源计划物料价格按期间一致 | 场景倒推 | 一致率 95.3%(2026-11-20) | 下降 70%,2027Q3 | 高 |
| DQ-N-FI-002 | 成本中心编码 | 有效性 | 成本中心编码在主数据中存在 | 现状扫描 | 符合率 98.2%(2026-11-20) | 下降 70%,2027Q2 | 中 |
| DQ-N-FI-003 | 施工号与成本归集的关联 | 完整性 | 制造成本可按施工号归集 | 场景倒推 | 关联率 87.9%(2026-11-20) | 关联率提升至 96%,2027Q4 | 高 |
| DQ-N-FI-004 | 会计期间 | 一致性 | 同一笔业务的会计期间与业务发生期间匹配 | 现状扫描 | 匹配率 97.1%(2026-11-20) | 下降 60%,2027Q3 | 中 |
| DQ-N-FI-005 | 币种与金额单位 | 一致性 | 金额字段的币种与单位口径统一 | 现状扫描 | 一致率 99.4%(2026-11-20) | 下降 80%,2027Q2 | 中 |
| DQ-N-FI-006 | 工时成本率 | 完整性 | 各工序的工时成本率参数非空 | 场景倒推 | 非空率 69.2%(2026-11-20) | 非空率提升至 92%,2027Q3 | 中 |
| DQ-N-FI-007 | 凭证号 | 唯一性 | 凭证号在同一会计期间内唯一 | 现状扫描 | 冲突 0 组(2026-11-20) | 保持,常态监控 | 低 |
| DQ-N-FI-008 | 预算科目 | 有效性 | 预算科目取值在科目表内 | 现状扫描 | 符合率 99.0%(2026-11-20) | 下降 60%,2027Q2 | 低 |
业务后果说明。 本域条目中 DQ-N-FI-003 与 DQ-N-FI-006 是决策数据智能问答助手场景 的输入条件:按施工号归集成本、按工序核算工时成本,是回答「这个项目赚不赚钱、 哪道工序贵」一类问题的前提。本域其余条目多为常态合规性检查, 一致率本身已较高(甲方企业资源计划系统录入规范相对严格、数据质量较好), 分期目标以维持与小幅下降为主,不投入重点整改资源。
与数据集的对应关系。 本域条目支撑供需计划类数据集的成本侧输入与 决策数据智能问答助手验证场景。责任部门为财务归口部门 【待填:甲方财务部门正式名称】、审计法务部。
| 需求标识 | 字段或关联关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-HR-001 | 员工编号 | 唯一性 | 员工编号唯一 | 现状扫描 | 冲突 0 组(2026-11-20) | 保持,常态监控 | 中 |
| DQ-N-HR-002 | 岗位编码 | 有效性 | 岗位编码在岗位主数据中存在 | 现状扫描 | 符合率 97.6%(2026-11-20) | 下降 70%,2027Q2 | 中 |
| DQ-N-HR-003 | 操作人员资质 | 完整性 | 焊接、无损检测、热处理等特种作业岗位的资质记录非空且在有效期内 | 场景倒推 | 非空率 91.4%(2026-11-20) | 非空率提升至 99%,2027Q2 | 高 |
| DQ-N-HR-004 | 报工人员与岗位的对应 | 一致性 | 报工记录的操作人员岗位与工序要求岗位匹配 | 场景倒推 | 匹配率 88.7%(2026-11-20) | 下降 50%,2027Q4 | 中 |
| DQ-N-HR-005 | 组织机构编码 | 一致性 | 各系统的组织机构编码口径一致 | 现状扫描 | 一致率 93.2%(2026-11-20) | 下降 70%,2027Q3 | 中 |
| DQ-N-HR-006 | 个人敏感信息 | 有效性 | 对外共享与数据集加工场景中个人敏感字段已按分级要求脱敏 | 场景倒推 | 脱敏覆盖率 待基线 | 待基线 | 高 |
业务后果说明。 DQ-N-HR-003 是制造过程类数据集中工序—人员—结果关联样本的前提, 也与甲方的工艺纪律管理直接相关:特种作业岗位资质过期而仍在报工, 在数据上表现为资质记录与报工记录矛盾。本条优先级定为高,但整改量不大, 主要是补录与更新。
DQ-N-HR-006 的处置与其余条目不同。个人敏感字段的脱敏要求由《数据安全分级标准》 与《数据权限管理规范》规定,本清单只登记诉求与状态,不重复定义脱敏方法。 该条的基线须在数据分类分级完成后才能形成,故目标值填「待基线」。
与数据集的对应关系。 本域条目支撑制造过程类数据集的人员侧输入。 责任部门为人力资源归口部门【待填:甲方人力资源部门正式名称】、企业管理部。
表 A8-4 数据质量需求清单首批条目分布(样例)
| 业务域 | 高 | 中 | 低 | 小计 | 已有基线 | 待基线 | 已派生规则 |
|---|---|---|---|---|---|---|---|
| 研发设计 | 32 | 19 | 7 | 58 | 51 | 7 | 54 |
| 生产制造 | 46 | 28 | 11 | 85 | 74 | 11 | 80 |
| 质量管理 | 34 | 21 | 8 | 63 | 52 | 11 | 57 |
| 仓储物流 | 24 | 14 | 6 | 44 | 40 | 4 | 42 |
| 采购管理 | 18 | 11 | 5 | 34 | 32 | 2 | 33 |
| 设备管理 | 30 | 16 | 6 | 52 | 44 | 8 | 48 |
| 营销管理 | 14 | 9 | 4 | 27 | 20 | 7 | 24 |
| 财务管理 | 12 | 13 | 7 | 32 | 31 | 1 | 31 |
| 人力资源 | 10 | 13 | 8 | 31 | 27 | 4 | 29 |
| 合计 | 220 | 144 | 62 | 426 | 371 | 55 | 398 |
表 A8-5 按质量维度统计(样例)
| 维度 | 条目数 | 占比 | 高优先级条目数 |
|---|---|---|---|
| 完整性 | 148 | 34.7% | 92 |
| 有效性 | 96 | 22.5% | 38 |
| 一致性 | 74 | 17.4% | 40 |
| 准确性 | 58 | 13.6% | 30 |
| 及时性 | 30 | 7.0% | 12 |
| 唯一性 | 20 | 4.7% | 8 |
| 合计 | 426 | 100% | 220 |
完整性条目占三分之一以上,与甲方「量不少、关联少、口径散」的现状一致: 数据存在,但关联关系与关键字段缺失。其中九十二条定为高优先级, 多数是关联键与关联关系类条目。
第 4.4 节的未派生规则清单。 四百二十六条中二十八条尚未派生规则, 原因分三类并分别处置:一类是诉求对象当前无可取数通道(如纸质检测报告), 登记已知缺口;一类是诉求表述尚不可规则化,退回提报人重写(表 A8-3 字段 8 的约束); 一类是须先完成码表或主数据建设才能编写规则,排入标准建设计划。 清单中逐条列明未派生原因与预计派生时间,不留空白。
本清单与通用数据治理项目的质量需求清单有三处明显不同。
第一处,清单中数量最多、优先级最高的不是字段级诉求,而是「配对关系」类诉求。 DQ-N-RD-004(图纸与工艺卡片配对)、DQ-N-MF-011(炉次与装炉工件清单配对)、 DQ-N-MF-012(焊接参数流与焊道配对)、DQ-N-QM-002(检验记录与重要尺寸配对)、 DQ-N-QM-005(炉次与检验结果配对)、DQ-N-EQ-009(报警事件与维修事实配对) 六条都是配对关系。这是因为本项目要构造的是监督样本, 而监督样本的成立条件是「输入与结果能配上对」。字段填得再全,配不上对也构造不出样本。
第二处,有四条诉求在首期只度量覆盖率,不设达标目标。 DQ-N-MF-012、DQ-N-QM-010、DQ-N-EQ-009、DQ-N-QM-012 所涉的配对条件当前不具备, 整改不是靠补录能解决的。对这四条,清单的作用从「管理整改」转为 「给出可构造样本量的前置判断」——配对率乘以总量,就是该类数据集可构造的上限。 这个判断比一个达不到的目标值有用。
第三处,分期目标一律以「相对基线的问题量下降幅度」表述。 各域、各对象的起点差别极大:企业资源计划系统录入规范,一致率本就在九成五以上; 质量管理系统新上线,缺陷类型码值化率只有三成。用统一的绝对达标率, 对前者无约束力,对后者不可达。表中少数条目写了绝对目标(如「非空率提升至 95%」), 限于基线已较高且目标明确可达的情形,并在复核时逐条重评。
条目的状态流转。 每条诉求的状态按「待基线→进行中→已达成/转已知缺口→已关闭」流转。 待基线转进行中由首轮扫描填入实测值触发;进行中转已达成由连续两个统计周期 达到目标值触发;进行中转已知缺口须经业务域数据管理员提出、数据治理工作组核定; 已达成转已关闭在该诉求纳入常态监控且连续两个季度未复发后由数据质量管理员执行。
评审。 清单首版的评审分两道:业务域数据管理员逐条确认本域诉求、责任部门与业务后果; 数据治理工作组核定优先级判定与分期目标。两道评审的意见记入第五章维护记录。
修订。 按月增补、按季复核(《数据质量管理办法》第二十六条)。 按月增补的来源是错样归因与业务提报,增补条目当月进入观察,次月起正式计入统计。 按季复核的内容有五项:实测值是否已更新;目标值与达成期是否仍合理; 优先级是否需调整;已达成的诉求是否转为常态监控;无法达成的诉求是否转为已知缺口。
下游通知。 清单条目的新增、优先级变更、目标值变更与状态变更,须在变更后 三个工作日内通知三方:对应规则的编制人(可能需要新增或调整规则)、 责任部门(整改责任与时限可能变化)、数据集加工环节(可构造样本量的预期可能变化)。 第三方通知尤须坚持:清单上一条配对率目标的调整,会直接改变某类数据集的 可构造样本量预期,加工侧若不知情,会按原计划排产而在质检阶段才发现样本不足。
需求清单的「现状实测」一列由首轮全量扫描填入,这一列是整套质量治理的起点 (《数据质量管理办法》第二十五条)。但首轮扫描本身面临一个顺序问题: 正式校验规则的阈值须按实测分布标定,而实测分布须先扫描才有。 处置方式是首轮扫描不使用带阈值的正式规则,而使用一批探查型规则—— 只统计分布、不判通过与否、不生成问题单。探查型规则的清单与输出项见下表, 其定义与留档方式在《数据质量校验规则库》第 4.12 节规定。
表 A8-5A 首轮全量扫描的探查项清单(模板)
| 探查项 | 适用字段类型 | 输出项 | 对应可标定的规则模板 |
|---|---|---|---|
| 空值统计 | 全部字段 | 非空率、空值记录数、按时间分段的非空率 | T01 |
| 取值分布 | 枚举与码值类字段 | 不同取值及其频次、落在码表外的取值清单 | T02 |
| 格式符合统计 | 字符类字段 | 按候选正则的符合率、不符合样例(最多 100 条)、疑似历史形态分组 | T03 |
| 唯一键冲突统计 | 候选唯一键 | 冲突组数、冲突组内记录数分布 | T04 |
| 外键命中统计 | 外键字段 | 命中率、未命中取值清单 | T05 |
| 跨系统比对统计 | 已识别关联键 | 两侧记录数、可配对数、单边缺失数、差值分布 | T06 |
| 字段间关系统计 | 时间对、数量对 | 违反候选约束的记录数与比例 | T07 |
| 数值边界统计 | 数值类字段 | 最小值、最大值、分位点、越界于物理约束的记录数 | T08 |
| 时延分布统计 | 时间字段 | 时延的分位点分布,按班次/期间分组 | T09 |
| 采样连续性统计 | 时序字段 | 采样间隔分布、缺段次数与时长、恒值段统计、均值滑窗序列 | T10 |
探查型规则的三条约定。第一,探查型规则不进规则库正式版本, 其清单与结果随《首轮全量扫描报告》留档,该报告作为需求清单基线的来源依据。 第二,探查结果中的「不符合样例」一律只取样不取全,单项最多留一百条, 用于业务部门判断该类不符合是真问题还是历史形态;取全会使报告体量失控。 第三,探查结果须按时间分段呈现。甲方的数据质量在不同时期差别很大 (质量管理系统新上线、客户关系管理系统正在上线), 用一个全历史的平均值作为基线,会让新增数据的治理目标被历史数据拖低。
扫描范围与批次。 首轮扫描按业务域分四批进行,顺序按纳管顺序与取数通道开通进度确定: 第一批为企业资源计划与仓储管理承载的物料、库存、采购、财务类对象; 第二批为制造执行与工时定额承载的工单、工序、报工类对象; 第三批为产品全生命周期管理与质量管理承载的图纸、工艺、检验类对象; 第四批为物联网与设备数据平台、热处理群控、装备远程运维平台承载的时序与炉次类对象。
第四批单列的理由是时序数据的扫描方式与前三批完全不同:前三批按表全量扫描, 第四批须按测点与时间窗滑动统计,取数量级相差两到三个数量级, 扫描作业须排在业务低峰期并限制并发,以免影响甲方既有系统的正常运行。 扫描作业的时间窗与并发限制由项目组与各系统运维责任人逐批确认。
基线的填入与冻结。 每批扫描完成后十个工作日内,由数据质量管理员将实测值 填入需求清单的「现状实测」列,并标注扫描日期与扫描批次。 基线一经填入即冻结,后续不因重新扫描而修改;重新扫描的结果作为新的实测值追加, 原基线保留。不冻结的后果是提升幅度的计算失去固定参照, 每次扫描都会把「相对基线的下降幅度」算成另一个数。
第 3.5 节按业务域列条目,但有一类诉求不属于任何单一业务域: 跨系统关联键与跨系统配对关系。这类诉求的责任部门是两个, 整改须两个部门协同,因此在清单中单列一节,编号用 XD 域码。 《数据质量管理办法》第二十三条把六类关联键的完整性与唯一性一律定为高优先级, 本节逐条落地。
| 需求标识 | 关联键或配对关系 | 维度 | 质量诉求 | 来源 | 现状实测(示意) | 分期目标 | 优先级 |
|---|---|---|---|---|---|---|---|
| DQ-N-XD-001 | 施工号(项目↔工单↔成本) | 完整性 | 施工号在三侧均可关联 | 场景倒推 | 三侧贯通率 81.4%(2026-11-20) | 贯通率提升至 96%,2027Q3 | 高 |
| DQ-N-XD-002 | 图号+版本(设计↔工艺↔检验) | 完整性 | 图号与版本在三侧取值一致且可关联 | 场景倒推 | 三侧贯通率 67.8%(2026-11-20) | 贯通率提升至 90%,2027Q4 | 高 |
| DQ-N-XD-003 | 物料编码+批次(采购↔仓储↔热处理) | 完整性 | 物料编码与批次在三侧均可关联 | 场景倒推 | 三侧贯通率 74.2%(2026-11-20) | 贯通率提升至 93%,2027Q4 | 高 |
| DQ-N-XD-004 | 工单号+工序代码(制造↔质检↔工时) | 完整性 | 工单号与工序代码在三侧均可关联 | 场景倒推 | 三侧贯通率 86.3%(2026-11-20) | 贯通率提升至 97%,2027Q3 | 高 |
| DQ-N-XD-005 | 设备编码+测点标识(设备↔时序↔运维) | 完整性 | 设备编码与测点标识在三侧均可关联 | 场景倒推 | 三侧贯通率 79.6%(2026-11-20) | 贯通率提升至 95%,2027Q3 | 高 |
| DQ-N-XD-006 | 炉次号(热处理↔检验↔工单) | 完整性 | 炉次号在三侧均可关联 | 场景倒推 | 三侧贯通率 70.5%(2026-11-20) | 贯通率提升至 92%,2027Q4 | 高 |
| DQ-N-XD-007 | 图纸与工艺卡片的材质牌号 | 一致性 | 两侧材质牌号取值一致 | 现状扫描 | 一致率 89.7%(2026-11-20) | 下降 70%,2027Q3 | 高 |
| DQ-N-XD-008 | 工艺卡片工序与工单工序代码 | 一致性 | 两侧工序代码一致 | 场景倒推 | 一致率 91.2%(2026-11-20) | 下降 70%,2027Q2 | 高 |
| DQ-N-XD-009 | 群控工艺参数与工艺卡片要求 | 一致性 | 下发参数与卡片要求一致,不一致须有变更记录 | 场景倒推 | 一致率 76.4%(2026-11-20) | 一致率提升至 92%,2027Q4 | 高 |
| DQ-N-XD-010 | 检验重要尺寸与工艺标注尺寸 | 一致性 | 两侧尺寸标识与公差一致 | 场景倒推 | 一致率 85.1%(2026-11-20) | 下降 60%,2027Q3 | 高 |
| DQ-N-XD-011 | 统一时间基准 | 一致性 | 各系统与各采集通道时间戳对齐到统一基准 | 场景倒推 | 偏差超限通道 11 个(2026-11-20) | 下降至 0,2027Q2 | 高 |
| DQ-N-XD-012 | 组织机构与成本中心的对应 | 一致性 | 人力资源侧组织机构与财务侧成本中心对应关系唯一 | 现状扫描 | 对应率 93.8%(2026-11-20) | 下降 70%,2027Q3 | 中 |
| DQ-N-XD-013 | 处置票据与返修工单 | 完整性 | 不合格品处置票据可关联到返修工单 | 场景倒推 | 关联率 82.6%(2026-11-20) | 关联率提升至 95%,2027Q4 | 中 |
| DQ-N-XD-014 | 服务工单与在役装备台账 | 完整性 | 服务工单可关联到装备台账的设备编码 | 业务提报 | 关联率 90.4%(2026-11-20) | 关联率提升至 97%,2027Q4 | 中 |
业务后果说明。 本节十四条中前六条是六类关联键,它们的共同特征是 「断一条就断一条链」。以 DQ-N-XD-002 为例:图号与版本在设计、工艺、检验三侧 的贯通率为 67.8%,意味着约三分之一的产品,其图纸、工艺卡片与检验记录 无法自动串成一条线。这对两类数据集都有直接影响: 工艺设计类数据集的「图纸—工艺」配对样本造不出来, 产品质量类数据集的「工艺要求—检验结果」配对样本也造不出来。 六条关联键条目的整改顺序按下游依赖排定:先 XD-011(时间基准)与 XD-002(图号版本), 再 XD-004(工单工序)与 XD-006(炉次),最后 XD-001、XD-003、XD-005。
DQ-N-XD-009 的业务含义值得单独说明。热处理群控系统下发的工艺程序参数 与工艺卡片要求不一致有两种情形:现场按经验调整了参数而未回改工艺卡片, 或工艺卡片已修订而群控程序未更新。前者在业务上往往是合理的—— 老师傅按炉况与材料批次做了微调,这类调整恰恰是热处理过程控制智能化场景 最有价值的知识。因此本条的诉求不是「必须一致」, 而是「不一致须有变更记录」:有记录的不一致是可用的样本, 无记录的不一致是质量问题。这条区分写在质量诉求一栏里, 不是写在业务后果里,因为它决定规则怎么编(见规则库 DQ-R-XD-CS-0004)。
责任与整改组织。 本节条目的责任部门为两个,在清单中以「主责/协同」记录: 主责方为数据产生侧,协同方为数据使用侧。 整改由数据治理工作组召集两方协同推进,不按常规问题单单方分派 (《数据质量管理办法》第十四条)。
需求清单以结构化形式存放于平台,按季导出盖章纸质件归档(第 3.1 节)。 除纸质与电子表格形态外,另提供机器可读结构,供规则库按「来源需求」字段引用、 供分析报告按诉求统计进展、供数据集加工环节查询某字段的质量目标。 结构以 JSON 表达,一条诉求一个对象,字段与表 A8-3 一一对应。
{
"reqId": "DQ-N-XD-002",
"domain": "XD",
"dataObject": "图文档/工艺卡片/检验记录",
"hostSystems": ["产品全生命周期管理", "质量管理"],
"dataElement": "DE-RD-0007",
"fieldOrRelation": "图号+版本的三侧关联关系",
"dimension": "CP",
"requirement": "图号与版本在设计、工艺、检验三侧取值一致且可关联",
"sourceType": "场景倒推",
"relatedScenes": ["板材备料工艺智能设计"],
"relatedDatasets": ["产品工艺设计类", "产品质量类"],
"baseline": {"metric": "三侧贯通率", "value": 0.678, "scanDate": "2026-11-20",
"scanBatch": "B3", "frozen": true},
"targets": [
{"period": "2027Q2", "metric": "三侧贯通率", "value": 0.80},
{"period": "2027Q3", "metric": "三侧贯通率", "value": 0.86},
{"period": "2027Q4", "metric": "三侧贯通率", "value": 0.90}
],
"businessImpact": "约三分之一产品的图纸—工艺—检验无法自动串联,两类配对样本不可构造",
"priority": "高",
"relatedRules": ["DQ-R-XD-CS-0001", "DQ-R-RD-UQ-0002", "DQ-R-QM-CS-0006"],
"ownerDept": {"primary": "【待填:主责部门】", "secondary": "【待填:协同部门】"},
"status": "进行中",
"registeredDate": "2026-11-25",
"lastReviewDate": "2027-03-28"
}
结构中有三项约定。第一,baseline.frozen 为 true 表示基线已冻结, 后续重新扫描的结果追加为新的实测值而不覆盖(第 3.9 节)。 第二,targets 为数组而非单值,按季度分期列出,使「相对基线的下降幅度」 在各期可分别核算。第三,relatedRules 与规则库配置中的 source.refId 构成双向引用,两者的闭合由平台校验,不依赖人工核对 (本附件第七节表 A8-11 第 5 项)。
需求清单是一份活台账,条目随现状扫描、错样归因与业务提报持续增补,因此它的职责分工关心的不是「谁写这份文件」,而是「每一类字段谁说了算、条目变动谁批」。下表按清单的字段组与生命周期动作列出。代码含义与本附件 2.6 一致。
表 A8-16 《数据质量需求清单》职责矩阵
| 序 | 动作或字段组 | 数据治理工作组 | 数据质量管理员 | 业务域数据管理员 | 系统运维责任人 | 我方项目组 |
|---|---|---|---|---|---|---|
| 1 | 条目编号与对象标识的分配 | — | 批 | 配 | — | 执 |
| 2 | 数据对象与字段范围的确定 | — | 审 | 批 | 配 | 拟 |
| 3 | 质量维度与判定方法的选取 | 审 | 批 | 签 | — | 拟 |
| 4 | 业务后果一栏的填写 | — | 审 | 批 | — | 配 |
| 5 | 基线值的测定 | — | 审 | 配 | 配 | 执 |
| 6 | 目标值与达成时点的核定 | 批 | 审 | 签 | 配 | 拟 |
| 7 | 优先级的判定 | 批 | 拟 | 签 | — | 配 |
| 8 | 关联规则编号的登记与维护 | — | 批 | 配 | — | 执 |
| 9 | 源系统与责任方的指认 | — | 审 | 签 | 批 | 拟 |
| 10 | 场景倒推类条目的提出 | 审 | 配 | 签 | — | 拟 |
| 11 | 现状扫描类条目的提出 | — | 审 | 配 | 配 | 拟 |
| 12 | 错样归因类条目的提出 | — | 审 | 签 | — | 拟 |
| 13 | 业务提报类条目的提出 | — | 执 | 拟 | 配 | 配 |
| 14 | 跨域与关联键专项条目的确认 | 批 | 审 | 签 | 签 | 拟 |
| 15 | 条目纳管的审批 | 批 | 审 | 签 | 配 | 配 |
| 16 | 条目退出的审批 | 批 | 审 | 签 | 配 | 配 |
| 17 | 目标值调整的审批 | 批 | 审 | 签 | — | 配 |
| 18 | 统计汇总与达成情况的出具 | 审 | 批 | 配 | — | 拟 |
| 19 | 机器可读结构的维护与导出 | — | 审 | — | 配 | 执 |
第 4 行的「业务后果」一栏把批准权放在业务域数据管理员,是这张清单能不能用起来的关键。条目若只写「完整率偏低」,排优先级时无从比较;写成「工序代码缺失导致该工单无法进入工艺执行类样本」,优先级自己就排出来了。而这句话只有业务侧写得出来——它要回答的是这个字段缺了之后谁的活干不成。
责任边界按下列三条划定。
其一,质量目标值由甲方核定。我方项目组负责基线测定、目标建议与达成情况统计,不单方面设定目标;基线未测定的条目不填目标值,填「待测定」。
其二,源系统与责任方的指认以运维责任人的确认为准。我方项目组按数据流向提出指认建议,对同一数据经多系统流转而责任归属存在分歧的,登记为待确认并提交数据治理工作组协调,不作推定。
其三,条目的纳管与退出由甲方审批。我方项目组负责条目的提出、字段的填写与变动的记录,不自行增删条目;因扫描范围变化而失去对象的条目,提出退出申请并说明原因,在批准前保留在清单中并标注状态。
需求清单是规则库、分析报告与整改台账三者的共同上游:规则按「来源需求」字段回指本清单,报告按诉求统计进展,台账按诉求判断整改是否达标。上游的附表若归档不全,下游三份文件的追溯都会断在同一处。下表给出本清单项下各附表与配套记录的维护责任、更新触发与保存规则,作为本清单的附表目录页。保存期限一栏不直接写年限:年限取决于甲方档案管理制度与法定最低年限,二者孰长从长,本表给出的是定年限的规则。
表 A8-20 《数据质量需求清单》附表索引与保存规则
| 编号 | 附表名称 | 性质 | 维护方 | 审批方 | 更新触发 | 保存期限的确定规则 |
|---|---|---|---|---|---|---|
| 附表一 | 字段定义与取值域 | 规范性 | 我方项目组 | 数据质量管理员 | 字段增减、取值域调整 | 随本清单版本留存;取值域收缩的保留调整前取值,按旧取值域登记的诉求不随之失效 |
| 附表二 | 分业务域诉求清单 | 规范性 | 业务域数据质量联系人 | 数据治理工作组 | 诉求新增、目标值调整、诉求关闭 | 按季度导出版本归档;关闭的诉求保留在清单中并标注关闭期次,不删行 |
| 附表三 | 统计汇总表 | 资料性 | 我方项目组 | 数据质量管理员 | 随每季度导出同步生成 | 随对应季度的导出版本留存;统计口径调整的保留调整前口径说明 |
| 附表四 | 首轮全量扫描作业口径与探查项清单 | 规范性 | 我方项目组 | 数据质量管理员 | 扫描范围调整、探查项增减 | 长期留存至首轮扫描结论定版后一个完整复核周期;探查项转为正式诉求的,保留原探查项记录 |
| 附表五 | 跨域与关联键专项条目清单 | 规范性 | 我方项目组 | 数据治理工作组 | 关联键口径变更、跨域诉求新增 | 长期留存;关联键口径变更保留变更前的对应关系,供历史配对结果回读 |
| 附表六 | 机器可读清单文件 | 规范性 | 我方项目组 | 数据质量管理员 | 每次季度导出 | 每一导出版本单独留存,不以新版覆盖;被规则库或数据集加工任务引用过的版本,保留至引用方下线 |
| 附表七 | 诉求评审意见与处理表 | 规范性 | 评审组织方 | 数据治理工作组 | 每次评审 | 随该批次诉求的导出版本留存,保留每一轮而不是只留最终版 |
| 附表八 | 本清单修订记录表 | 规范性 | 我方项目组 | 数据治理工作组 | 每次版本变更 | 置于清单正文之后,与文档同寿,不可删行、不重排序号 |
附表二的「关闭的诉求不删行」与附表五的「保留变更前的对应关系」是本表中两条最容易被省掉的规则,而省掉的代价都在下游。一条诉求关闭之后,由它派生的校验规则并不会自动下线;规则还在跑,而它的来源需求在清单里查不到,这条规则就成了无主规则,年度复核时既不敢停也说不清为什么留着。关联键的口径变更同理:按旧口径配出来的成对样本仍在数据集里,判断那批样本是否可用,依据是变更前的对应关系。
附表四的保存期与其余各件不同,挂在首轮扫描的结论上而不是清单的版本上。首轮扫描是一次性作业,它的探查项清单在扫描结束后不再更新,但扫描得出的基线值会被此后每一期分析报告引用。基线被质疑时要回答当初是按什么范围、什么探查项扫出来的,依据就是这一件。
| 项 | 内容 |
|---|---|
| 文件名称 | 《矿山装备制造领域高质量数据集建设项目数据质量校验规则库》 |
| 文档编号 | GHY26691-GV-06-0003-V1.0 |
| 版本号 | V1.0 |
| 文件性质 | 标准+可执行规则集。文档部分规定编号、元数据、模板与标定方法;规则部分以结构化配置形式存放于数据治理开发工具平台质量管理模块 |
| 发布节奏 | 小版本按月(V1.x),大版本按季(Vx.0),每版附变更清单 |
| 起草与维护 | 数据质量管理员 |
| 核定 | 甲方数据治理工作组 |
| 本版规则条数 | 一千一百五十六条(首批) |
| 导出形态 | 规则清单电子表格+机器可读配置文件(JSON)+季度盖章纸质件 |
| 依据文件 | 《数据质量管理办法》第五章;《数据元标准》《参考数据标准》;《数据资源目录》 |
本规则库适用于九个业务域已纳管数据对象的质量稽核(b1336)。 规则的编写、审批、启用、变更与停用按《数据质量管理办法》第五章执行。
生效条件两条。第一条,规则十五项元数据须登记完整,元数据不全的规则不得启用 (《数据质量管理办法》第二十九条)。第二条,规则须经观察期并由数据治理工作组核定 严重级后方可按登记严重级运行(同办法第三十四条)。
本样章中给出的阈值与表达式为初始值与示例,项目期按第 4.7 节的标定方法 在观察期内据实测分布标定,标定结果报甲方核定。
| 章 | 节 | 条目 |
|---|---|---|
| 第一章 总则 | 1.1 适用范围<br>1.2 规则库的组织方式<br>1.3 与数据标准的引用关系 | 1.3.1 引用码表<br>1.3.2 引用数据元<br>1.3.3 引用主数据 |
| 第二章 规则编号 | 2.1 编号结构<br>2.2 业务域码<br>2.3 维度码<br>2.4 序号分配与回收 | 2.4.1 停用不回收<br>2.4.2 变更不改号 |
| 第三章 规则元数据 | 3.1 字段总表<br>3.2 取值域<br>3.3 必填性与校验 | 3.2.1 枚举字段取值<br>3.2.2 表达式字段格式 |
| 第四章 规则模板 | 4.1 T01 空值检查<br>4.2 T02 值域检查<br>4.3 T03 格式检查<br>4.4 T04 唯一性检查<br>4.5 T05 引用完整性检查<br>4.6 T06 跨系统比对<br>4.7 T07 逻辑自洽检查<br>4.8 T08 物理约束检查<br>4.9 T09 时效检查<br>4.10 T10 分布与连续性检查 | 各节下设「参数定义」「生成表达式」「本项目示例」三项 |
| 第五章 表达式型规则 | 5.1 适用情形<br>5.2 编写规范<br>5.3 两道检查<br>5.4 占比控制 | 5.2.1 命名与注释<br>5.3.1 样例核对 |
| 第六章 阈值标定 | 6.1 四级依据<br>6.2 分位点标定法<br>6.3 物理约束标定<br>6.4 标定记录 | 6.2.1 分位点选取<br>6.2.2 季节性处理 |
| 第七章 严重级与观察期 | 7.1 三档严重级<br>7.2 观察期流程<br>7.3 误报率收敛 | 7.3.1 误报认定<br>7.3.2 自动转观察期 |
| 第八章 分业务域规则清单 | 8.1—8.9 九个业务域 | 各节下设「规则清单表」「本域规则编写要点」两项 |
| 第九章 规则库统计 | 9.1 按域与维度统计<br>9.2 按模板统计<br>9.3 按严重级统计<br>9.4 覆盖率统计 | 9.4.1 数据元规则覆盖率<br>9.4.2 未覆盖数据元清单 |
| 第十章 版本与变更 | 10.1 版本号规则<br>10.2 变更清单格式<br>10.3 下游通知 | — |
规则编号结构为 DQ-R-<业务域码>-<维度码>-<四位序号>,各段取值如下。
| 业务域码 | 业务域 | 业务域码 | 业务域 |
|---|---|---|---|
| RD | 研发设计 | PU | 采购管理 |
| MF | 生产制造 | MK | 营销管理 |
| QM | 质量管理 | FI | 财务管理 |
| WH | 仓储物流 | HR | 人力资源 |
| EQ | 设备管理 | XD | 跨域(两个及以上业务域) |
| 维度码 | 质量维度 | 维度码 | 质量维度 |
|---|---|---|---|
| CP | 完整性 | UQ | 唯一性 |
| AC | 准确性 | TM | 及时性 |
| CS | 一致性 | VL | 有效性 |
序号四位,在同一业务域同一维度内顺序分配,自 0001 起。 编号一经分配不再变更:规则停用后编号不回收、不复用;规则内容变更时编号不变, 版本号递增(《数据质量管理办法》第二十八条)。 跨系统比对类规则的业务域码取两侧对象所属域中数据量较大的一侧, 两侧分属不同域时取 XD。
表 A8-6 校验规则元数据字段总表
| 序 | 字段名 | 必填 | 数据类型 | 取值域或格式 | 校验要求 |
|---|---|---|---|---|---|
| 1 | 规则标识 | 是 | 字符 | DQ-R-<域码>-<维度码>-<四位序号> | 全局唯一;格式校验 |
| 2 | 规则名称 | 是 | 字符(≤60) | 一句话说明检查什么 | 不得与同域同维度已有规则名称重复 |
| 3 | 规则模板 | 是 | 枚举 | T01—T10;表达式型取 EXPR | — |
| 4 | 质量维度 | 是 | 枚举 | CP/AC/CS/UQ/TM/VL | 单选;须与编号中的维度码一致 |
| 5 | 检查对象 | 是 | 字符 | 《数据资源目录》登记的对象标识 | 须为已纳管对象 |
| 6 | 检查字段 | 条件必填 | 字符 | 字段名或字段组合 | T01—T05、T07—T10 必填;T06 填两侧字段 |
| 7 | 关联数据元 | 否 | 字符 | 《数据元标准》数据元编号 | 有对应数据元的必填 |
| 8 | 规则参数 | 条件必填 | 结构化 | 按模板定义的参数集 | 模板型必填 |
| 9 | 规则表达式 | 条件必填 | 文本 | SQL 片段或布尔表达式 | 表达式型必填;模板型由参数自动生成后留存 |
| 10 | 阈值 | 是 | 结构化 | 通过门限,含指标名、比较符与取值 | 须注明标定依据(见第 4.7 节四级依据) |
| 11 | 计量单位 | 是 | 枚举 | 记录/比对项/检查项/测点/批次 | 用于区分记录级与集合级口径 |
| 12 | 严重级 | 是 | 枚举 | 阻断/告警/提示 | 观察期内一律按提示运行 |
| 13 | 触发方式 | 是 | 枚举 | 入口校验/周期稽核/按需稽核(可多选) | T06、T04、T10 不得选入口校验 |
| 14 | 执行频率 | 条件必填 | 枚举 | 实时/T+1/每日/每周/每月/每季 | 触发方式含周期稽核的必填 |
| 15 | 责任部门 | 是 | 字符 | 甲方部门名称 | 问题单分派的默认责任方 |
| 16 | 来源 | 是 | 枚举 | 标准派生/需求清单/错样归因/业务提报 | 来源为需求清单的须填需求标识 |
| 17 | 启用状态 | 是 | 枚举 | 启用/停用/观察期 | — |
| 18 | 版本 | 是 | 字符 | Vx.y | 内容变更时递增 |
| 19 | 变更记录 | 是 | 结构化 | 变更日期、变更内容、变更人、核定记录 | 每次变更追加一条 |
| 20 | 误报记录 | 否 | 结构化 | 误报日期、误报说明、确认人 | 累计达约定条数自动转观察期 |
第 11 项「计量单位」是本项目在元数据上专门增设的字段,其必要性在于: 记录级规则的通过率分母是记录数,跨系统比对的分母是比对项数, 分布与连续性检查的分母是测点数或检查窗口数。三者混算会得出没有意义的质量分。 平台在核算对象级质量分时按计量单位分组加权,不同计量单位的通过率不直接平均。
本节逐一给出十类模板的参数定义、由参数生成的表达式样式与本项目示例。 表达式以 SQL 风格书写,实际执行时由平台按数据源类型转译。
参数:对象、字段、允许空值条件(可空,布尔表达式)、阈值(非空率下限)。
生成表达式:
-- 不通过记录
SELECT <主键> FROM <对象>
WHERE <字段> IS NULL OR TRIM(CAST(<字段> AS VARCHAR)) = ''
[AND NOT (<允许空值条件>)]
-- 通过率 = 1 - 不通过记录数 / 被检查记录数
本项目示例(DQ-R-MF-CP-0003):检查工单工序记录的设备编码非空, 允许空值条件为「工序类型为外协」——外协工序无本厂设备,不应判为缺失。
SELECT 工单号, 工序代码 FROM 工单工序
WHERE (设备编码 IS NULL OR TRIM(设备编码) = '')
AND NOT (工序类型 = '外协')
「允许空值条件」这个参数不可省。省掉它,外协工序会被整批判为缺失, 误报量大到业务部门不再看告警。
参数:对象、字段、码表标识(引用《参考数据标准》)或 数值下限+数值上限、 空值是否算通过、阈值。
生成表达式(码表型):
SELECT <主键> FROM <对象> t
WHERE t.<字段> IS NOT NULL
AND NOT EXISTS (SELECT 1 FROM <码表> c
WHERE c.码值 = t.<字段> AND c.有效标志 = 'Y')
本项目示例(DQ-R-RD-VL-0005):检查零件材质牌号在钢材牌号码表内。 码表引用《参考数据标准》中的钢材牌号码表,码表本身不在本规则库定义。
参数:对象、字段、正则表达式或日期格式、阈值。
生成表达式:
SELECT <主键> FROM <对象>
WHERE <字段> IS NOT NULL AND NOT REGEXP_LIKE(<字段>, '<正则>')
本项目示例(DQ-R-RD-VL-0003):检查图号符合甲方图号编码规则。 正则表达式取自《数据元标准》中图号数据元的格式约束,本规则库引用不重定义。 【待填:甲方图号编码规则的正则表达式,须由工艺研究分院确认历史图号的例外形态】
图号格式检查有一个本项目特有的难点:甲方图号编码规则历经演变, 早期图纸的图号形态与现行规则不同。若按现行规则一刀切, 六十三万张历史图纸会有相当比例被判为格式不符,而这些图纸本身是有效的。 处置方式是在规则参数中按签发年份分段设定正则,并对无法归入任何形态的图号 单列清单由工艺研究分院逐批确认。
参数:对象、唯一键字段组合、有效记录筛选条件、阈值(冲突组数上限)。 计量单位取「比对项」,分母为唯一键取值的不同组合数。
生成表达式:
SELECT <唯一键字段组合>, COUNT(*) AS 冲突条数
FROM <对象> WHERE <有效记录筛选条件>
GROUP BY <唯一键字段组合> HAVING COUNT(*) > 1
本项目示例(DQ-R-RD-UQ-0002):检查同一图号同一版本不存在两条有效工艺卡片记录。 有效记录筛选条件为「审批状态 = '已签发' AND 作废标志 = 'N'」。 筛选条件不可省:历史上同一图号同一版本可能有已作废的旧记录, 不排除作废记录会把正常的版本迭代判为冲突。
参数:对象、外键字段、被引对象、被引键、被引有效性条件、阈值。
生成表达式:
SELECT a.<主键> FROM <对象> a
WHERE a.<外键字段> IS NOT NULL
AND NOT EXISTS (SELECT 1 FROM <被引对象> b
WHERE b.<被引键> = a.<外键字段> AND <被引有效性条件>)
本项目示例(DQ-R-MF-VL-0008):检查工单引用的设备编码在设备主数据中存在且处于在用状态。 被引有效性条件为「设备状态 IN ('在用','检修')」——已报废设备不应出现在新工单中, 但检修中的设备可以。
参数:左侧对象、右侧对象、关联键、比对字段(左右各一)、容差类型 (绝对值/相对值/零容差)、容差值、比对范围筛选条件、阈值。 计量单位取「比对项」。
生成表达式:
SELECT l.<关联键>, l.<左字段> AS 左值, r.<右字段> AS 右值
FROM <左侧对象> l JOIN <右侧对象> r ON l.<关联键> = r.<关联键>
WHERE <比对范围筛选条件>
AND ABS(l.<左字段> - r.<右字段>) > <容差值> -- 绝对值容差
-- 相对值容差:ABS(l.x - r.x) / NULLIF(ABS(l.x),0) > <容差值>
UNION ALL
-- 单边缺失:左有右无、右有左无,分别计入不通过
SELECT l.<关联键>, l.<左字段>, NULL FROM <左侧对象> l
WHERE NOT EXISTS (SELECT 1 FROM <右侧对象> r WHERE r.<关联键> = l.<关联键>)
本项目示例(DQ-R-WH-CS-0002):库存三方比对。 左右两两比对共三组(企业资源计划与仓储管理、仓储管理与实物盘点、 企业资源计划与实物盘点),关联键为「物料编码+库位+批次」, 容差按计量精度设定:整件物料零容差,散料按计量器具精度设定。
单边缺失必须计入不通过,这是跨系统比对最容易写漏的一段。只比对两边都有的记录, 会把「一方根本没有这条库存」这种更严重的问题漏掉——而这恰恰是三方账实不符中 最常见的形态。
图 A8-3A 校验规则的元数据结构与十类规则模板的归属。数据来源:本节表 A8-6 校验规则元数据字段总表、4.6 各小节的模板定义。
参数:对象、约束表达式(同一记录内字段间的布尔条件)、适用筛选条件、阈值。
生成表达式:
SELECT <主键> FROM <对象>
WHERE <适用筛选条件> AND NOT (<约束表达式>)
本项目示例(DQ-R-MF-CS-0006):工单工序的完工时间不早于开工时间。
SELECT 工单号, 工序代码 FROM 工单工序
WHERE 开工时间 IS NOT NULL AND 完工时间 IS NOT NULL
AND NOT (完工时间 >= 开工时间)
另一例(DQ-R-QM-CS-0007):同一检验项目的硬度单位口径统一。 约束表达式为「检验项目 = '硬度' 时,计量单位 IN ('HBW') 或 IN ('HRC') 之一在该项目下恒定」, 此例因涉及跨记录判断,实际按表达式型规则编写,不走 T07 模板。
参数:对象、检查字段、约束表达式、参照参数来源(设备主数据、工艺标准或物理常量)、 阈值。
生成表达式:
SELECT t.<主键>, t.<检查字段>, p.<参照值>
FROM <对象> t JOIN <参照参数来源> p ON <参照关联条件>
WHERE NOT (<约束表达式>)
本项目示例(DQ-R-EQ-AC-0006):装炉量不超过炉膛额定装载量。
SELECT c.炉次号, c.装炉重量, e.额定装载量
FROM 热处理炉次 c JOIN 设备主数据 e ON c.设备编码 = e.设备编码
WHERE c.装炉重量 IS NOT NULL AND e.额定装载量 IS NOT NULL
AND NOT (c.装炉重量 <= e.额定装载量 * 1.0)
另一例(DQ-R-EQ-AC-0005):炉膛实测温度不低于环境温度且不超过炉膛额定上限。 参照参数来源为设备主数据的炉膛额定温度上限与当班环境温度记录。 环境温度记录不可得时,下限取参数中设定的保守值【待填:甲方各热处理分厂的环境温度取值口径】。
物理约束类规则的参照参数必须来自主数据或标准,不得硬编码在表达式里。 硬编码的后果是设备改造或工艺标准修订后规则仍按旧值判定, 而这类变更在规则库中没有任何痕迹。
参数:对象、数据时间字段、基准时间字段或基准时间计算式、约定时限、 适用筛选条件、阈值。
生成表达式:
SELECT <主键>,
TIMESTAMPDIFF(MINUTE, <基准时间>, <数据时间字段>) AS 时延分钟
FROM <对象>
WHERE <适用筛选条件>
AND TIMESTAMPDIFF(MINUTE, <基准时间>, <数据时间字段>) > <约定时限>
本项目示例(DQ-R-MF-TM-0005):报工数据在班次结束后约定时限内到达。 基准时间为该工序所属班次的结束时间,由班次日历计算; 约定时限【待填:甲方对报工时限的管理规定,若无规定则按观察期实测分布标定】。
本规则的实测分布须按班次分别统计。甲方实行多班次作业, 夜班报工的时延分布与白班不同,用一个统一时限会把夜班整批判为超时。
参数:对象、检查字段、检查类型(缺段/恒值/漂移/分布突变)、 时间字段、分组键、检查窗口、判定参数、阈值。 计量单位取「测点」或「检查窗口」。
四种检查类型的判定方式:
| 检查类型 | 判定方式 | 判定参数 |
|---|---|---|
| 缺段 | 相邻两条记录的时间间隔超过采样周期的约定倍数 | 采样周期、倍数阈值 |
| 恒值 | 在检查窗口内取值的标准差低于约定值,且窗口长度超过约定时长 | 标准差下限、最短窗口 |
| 漂移 | 窗口内取值均值相对基线均值的偏移超过约定值,且偏移方向在连续多个窗口内一致 | 基线均值来源、偏移阈值、连续窗口数 |
| 分布突变 | 窗口内取值分布与基线分布的差异度量超过约定值 | 基线分布来源、差异度量方法、阈值 |
生成表达式(缺段型):
WITH g AS (
SELECT <分组键>, <时间字段>,
LAG(<时间字段>) OVER (PARTITION BY <分组键> ORDER BY <时间字段>) AS 前次时间
FROM <对象> WHERE <时间字段> BETWEEN <窗口起> AND <窗口止>
)
SELECT <分组键>, 前次时间, <时间字段>,
TIMESTAMPDIFF(SECOND, 前次时间, <时间字段>) AS 间隔秒
FROM g
WHERE 前次时间 IS NOT NULL
AND TIMESTAMPDIFF(SECOND, 前次时间, <时间字段>) > <采样周期秒> * <倍数阈值>
本项目示例(DQ-R-EQ-TM-0002):秒级采样测点不出现超过约定时长的缺段。 分组键为「设备编码+测点标识」,采样周期取测点配置表中登记的采样周期, 倍数阈值初始取 3,按观察期实测标定。
本模板的输出有一条硬性约定(《数据质量管理办法》附表三): 识别结果标记为测点可信度下降,不判为设备故障。恒值可能是设备停机, 也可能是传感器卡死;漂移可能是工艺调整,也可能是传感器老化。 规则不具备区分二者的信息,因此只给出可信度标记,由设备管理部门人工确认, 确认结论回填至问题单的根因分类。
阈值不得凭经验直接设定(《数据质量管理办法》第三十二条),按四级依据顺序确定。
| 级别 | 依据 | 适用情形 | 标定方式 |
|---|---|---|---|
| 一级 | 国家标准、行业标准或甲方既有管理规定 | 有明文要求的指标 | 直接取标准值,在元数据中注明标准编号与条款 |
| 二级 | 物理约束或设备能力约束 | 温度、装炉量、电流、安全系数等 | 取设备主数据或工艺标准中的额定值 |
| 三级 | 业务约定 | 时限、容差、计量精度 | 由业务域数据管理员提报,数据治理工作组核定 |
| 四级 | 实测分布 | 上述三级均无依据的 | 按第 4.7.1 节分位点标定法 |
在观察期内对规则的实测结果取分布,按下列步骤标定初始阈值。
第一步,取不少于四周的实测数据,按日或按周形成通过率序列。 第二步,剔除可识别的异常期(系统停机、数据补录、大批量历史数据导入), 剔除依据记入标定记录。第三步,取序列的下四分位点作为初始阈值的候选值。 第四步,用候选值回测观察期数据,统计会产生的问题单量; 问题单量超出责任部门可承受范围的,向下调整至可承受水平,并在标定记录中 写明「本阈值受整改承载力限制,分三期上调」及各期目标值。 第五步,标定结果报数据治理工作组核定。
第四步是这套方法的要点。阈值定得严,规则会在第一周产生几千个问题单, 业务部门处理不完,于是全部挂起,治理工作名存实亡。阈值分期上调, 每期的问题单量落在部门可处理的范围内,整改才真正发生。 分期上调的节奏与需求清单的分期目标对齐(第 3.4 节字段 12)。
部分指标有明显的业务周期:月末、季末的报工与入账量大,时延分布与平月不同; 检修期设备时序数据本应缺段。对这类指标,标定须按周期分段取分布, 并在规则参数中设定「适用筛选条件」排除检修期与盘点期。 不作处理的后果是每到月末规则集体报警,而这些报警大部分不是质量问题。
每条四级依据的规则须留存标定记录,内容包括:观察期起止、样本量、剔除的异常期及理由、 通过率分布的分位点取值、候选阈值、回测问题单量、最终阈值、分期上调计划、核定记录。 标定记录随规则留档,规则阈值变更时追加新的标定记录,旧记录不删除。
三档严重级的判定标准、影响与时限见《数据质量管理办法》附表四,本节不重复。 本节规定观察期的具体流程。
| 步骤 | 执行人 | 内容 | 时长 |
|---|---|---|---|
| 1 入观察期 | 数据质量管理员 | 规则启用状态置「观察期」,严重级按提示运行,不生成问题单 | 即时 |
| 2 运行统计 | 平台自动 | 统计触发量、触发记录的业务分布、业务域数据管理员确认的误报量 | 2—4 周 |
| 3 误报复核 | 业务域数据管理员 | 抽取触发记录核对,标注误报并说明原因 | 与步骤 2 并行 |
| 4 判定 | 数据质量管理员 | 误报率高于约定水平的回炉修改,重新入观察期;收敛的提交核定 | 3 个工作日 |
| 5 核定 | 数据治理工作组 | 核定严重级与阈值,启用状态置「启用」 | 月度例会 |
观察期不少于两周、不多于四周。少于两周取不到足够的实测分布, 多于四周会让规则库的建设节奏拖得过长——一千一百五十六条规则若每条都观察两个月, 规则库到项目后期才能全量启用。
下列各表为样例,规则标识、模板、阈值字段结构与严重级判定为正式口径, 阈值初始值按第 4.7 节在观察期内标定后替换。为便于版面排布,表取八列, 元数据其余字段(关联数据元、责任部门、计量单位、变更记录等)在平台中维护。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-RD-CP-0001 | 图文档图号非空 | T01 | 图文档·图号 | 非空率 ≥ 99.9% | 阻断 | 入口+周期·每月 | DQ-N-RD-001 |
| DQ-R-RD-UQ-0002 | 图号+版本有效记录唯一 | T04 | 工艺卡片·图号+版本 | 冲突组数 = 0 | 阻断 | 周期·每月 | DQ-N-RD-002 |
| DQ-R-RD-VL-0003 | 图号符合编码规则(按年份分段) | T03 | 图文档·图号 | 符合率 ≥ 98% | 告警 | 入口+周期·每月 | DQ-N-RD-003 |
| DQ-R-RD-CP-0004 | 已签发图纸存在对应工艺卡片 | T05 | 图文档→工艺卡片·图号+版本 | 配对率 ≥ 85% | 告警 | 周期·每月 | DQ-N-RD-004 |
| DQ-R-RD-VL-0005 | 材质牌号在钢材牌号码表内 | T02 | 零件·材质牌号 | 符合率 ≥ 98% | 告警 | 入口+周期·每月 | DQ-N-RD-005 |
| DQ-R-RD-CP-0006 | 板材零件三项规格参数齐备 | T01 | 零件·长/宽/厚 | 齐备率 ≥ 95% | 告警 | 入口·实时 | DQ-N-RD-006 |
| DQ-R-RD-VL-0007 | 工艺路线工序代码在码表内 | T02 | 工艺路线·工序代码 | 符合率 ≥ 99% | 阻断 | 入口+周期·每月 | DQ-N-RD-007 |
| DQ-R-RD-VL-0008 | 备料类工序落在二十八道工序范围内 | T02 | 工艺路线·工序代码 | 符合率 ≥ 99.5% | 阻断 | 周期·每月 | DQ-N-RD-007 |
| DQ-R-RD-AC-0009 | 展开长与中性层计算值偏差在允差内 | T08 | 零件·展开长 | 越界率 ≤ 2% | 告警 | 周期·每月 | DQ-N-RD-008 |
| DQ-R-RD-CS-0010 | 产品结构层级与物料清单层级一致 | T06 | 产品结构↔物料清单·层级 | 一致率 ≥ 97% | 告警 | 周期·每月 | DQ-N-RD-009 |
| DQ-R-RD-CS-0011 | 工艺卡片工时定额与定额系统一致 | T06 | 工艺卡片↔工时定额·定额值 | 一致率 ≥ 95%,容差 0 | 告警 | 周期·每月 | DQ-N-RD-010 |
| DQ-R-RD-VL-0012 | 图文档审批状态在码表内 | T02 | 图文档·审批状态 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-RD-011 |
| DQ-R-RD-CP-0013 | 结构化选型记录五类接口参数齐备(新增记录) | T01 | 选型记录·产量/作业制度/截深/截高/推移步距 | 齐备率 ≥ 90% | 告警 | 周期·每月 | DQ-N-RD-012 |
| DQ-R-RD-CS-0014 | 零件材质与采购物料材质口径一致 | T06 | 零件↔采购物料·材质牌号 | 一致率 ≥ 98% | 告警 | 周期·每月 | DQ-N-RD-005 |
本域规则编写要点。 三条阻断级规则(0001、0002、0007)围绕同一件事: 图号与工序代码是本域对下游的两个关键输出,它们不唯一、不规范, 工艺设计类数据集的样本就无法按图号与工序对齐。 0003 的正则按签发年份分段,原因见第 4.6.3 节。 0004 的阈值定为 85%,低于一般完整性规则,是因为六十三万张历史图纸的配对工作需要分期完成, 阈值按需求清单 DQ-N-RD-004 的分期目标逐季上调。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-MF-UQ-0001 | 施工号在有效工单范围内唯一 | T04 | 工单·施工号 | 冲突组数 = 0 | 阻断 | 周期·T+1 | DQ-N-MF-001 |
| DQ-R-MF-CP-0002 | 工单工序代码非空 | T01 | 工单工序·工序代码 | 非空率 ≥ 99.9% | 阻断 | 入口·实时 | DQ-N-MF-002 |
| DQ-R-MF-CP-0003 | 工单工序设备编码非空(外协除外) | T01 | 工单工序·设备编码 | 非空率 ≥ 95% | 告警 | 入口+周期·T+1 | DQ-N-MF-003 |
| DQ-R-MF-CP-0004 | 已完工工序报工时间非空 | T01 | 工单工序·报工时间 | 非空率 ≥ 99% | 阻断 | 周期·T+1 | DQ-N-MF-004 |
| DQ-R-MF-TM-0005 | 报工在班次结束后约定时限内到达 | T09 | 工单工序·报工时间 | 超时率 ≤ 15% | 告警 | 周期·T+1 | DQ-N-MF-005 |
| DQ-R-MF-CS-0006 | 完工时间不早于开工时间 | T07 | 工单工序·开工/完工时间 | 违反条数 = 0 | 阻断 | 入口+周期·T+1 | DQ-N-MF-006 |
| DQ-R-MF-CP-0007 | 备料二十八道工序已排产工序均有报工 | T05 | 工艺路线→工单工序·工单号+工序代码 | 覆盖率 ≥ 98% | 告警 | 周期·T+1 | DQ-N-MF-007 |
| DQ-R-MF-VL-0008 | 工单设备编码在设备主数据中存在且在用 | T05 | 工单工序→设备主数据·设备编码 | 符合率 ≥ 99% | 阻断 | 入口·实时 | DQ-N-MF-008 |
| DQ-R-MF-AC-0009 | 实际工时与定额偏差率在上限内 | T08 | 工单工序·实际工时 | 越界率 ≤ 15% | 告警 | 周期·每周 | DQ-N-MF-009 |
| DQ-R-MF-CP-0010 | 热处理工序炉次号非空 | T01 | 工单工序·炉次号 | 非空率 ≥ 95% | 阻断 | 入口+周期·T+1 | DQ-N-MF-010 |
| DQ-R-MF-CP-0011 | 炉次存在装炉工件清单 | T05 | 热处理炉次→装炉清单·炉次号 | 配对率 ≥ 90% | 阻断 | 周期·T+1 | DQ-N-MF-011 |
| DQ-R-MF-CP-0012 | 焊接参数流可对应到焊道 | T06 | 焊接参数流↔焊道·工件标识+焊道标识 | 首期仅度量覆盖率 | 提示 | 周期·T+1 | DQ-N-MF-012 |
| DQ-R-MF-CS-0013 | 工序实际流转顺序与工艺路线一致 | EXPR | 工单工序·工序序号序列 | 一致率 ≥ 97% | 告警 | 周期·每周 | DQ-N-MF-013 |
| DQ-R-MF-VL-0014 | 工单状态在码表内 | T02 | 工单·工单状态 | 符合率 ≥ 99.5% | 告警 | 入口·实时 | DQ-N-MF-014 |
| DQ-R-MF-CP-0015 | 工单施工号可关联到项目记录 | T05 | 工单→项目·施工号 | 关联率 ≥ 99% | 阻断 | 周期·T+1 | DQ-N-MF-015 |
| DQ-R-MF-TM-0016 | 设备过程参数与工单工序时间窗可对齐 | T09 | 设备时序↔工单工序·时间戳 | 对齐率 ≥ 90% | 告警 | 周期·每日 | DQ-N-MF-012 |
本域规则编写要点。 0012 的严重级定为提示而非告警,与其余配对类规则不同。 原因是焊接参数流与焊道当前配对率极低,按告警级运行会每日产生大量问题单, 但这些问题单无法整改——配对关系不存在,不是填错了。 按提示级运行,规则的产出是一个覆盖率数字,这个数字进入月度报告, 作为焊接过程控制智能化场景可构造样本量的判断依据。 待配对条件具备后再按第 4.8 节流程重新核定严重级。
0013 为表达式型规则:工序流转顺序的判断需要比较同一工单内多条记录的序号序列, 十类模板都覆盖不了。按第五章规定,本规则提交时附了命中与不命中样例各三条, 并经第二名数据质量管理员在样本数据上试跑核对。
0016 是一条容易漏掉但对数据集加工很关键的规则。设备时序数据要与工序对齐, 才能构造「这道工序当时的设备参数是什么」的样本;对齐依赖时间戳, 而时间戳对齐问题在设备管理域另有规则(DQ-R-EQ-CS-0011)。两条规则分属两域, 在月度报告中须并列查看。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-QM-VL-0001 | 缺陷类型在缺陷类型码表内(新增记录) | T02 | 检验记录·缺陷类型 | 符合率 ≥ 90% | 告警 | 入口·实时 | DQ-N-QM-001 |
| DQ-R-QM-CP-0002 | 工艺标注重要尺寸均有检验记录 | T05 | 工艺卡片→检验记录·图号+重要尺寸标识 | 配对率 ≥ 95% | 阻断 | 周期·每周 | DQ-N-QM-002 |
| DQ-R-QM-CP-0003 | 已交检记录检验结论非空 | T01 | 检验记录·检验结论 | 非空率 ≥ 99.5% | 阻断 | 入口·实时 | DQ-N-QM-003 |
| DQ-R-QM-TM-0004 | 检验记录在交检后约定时限内录入 | T09 | 检验记录·录入时间 | 超时率 ≤ 10% | 告警 | 周期·每周 | DQ-N-QM-004 |
| DQ-R-QM-CP-0005 | 热处理炉次存在对应检验结论 | T05 | 热处理炉次→检验记录·炉次号+工件标识 | 配对率 ≥ 92% | 阻断 | 周期·T+1 | DQ-N-QM-005 |
| DQ-R-QM-AC-0006 | 硬度实测值在该材质该工艺的合理区间内 | T08 | 检验记录·硬度实测值 | 越界率 ≤ 1% | 告警 | 周期·每周 | DQ-N-QM-006 |
| DQ-R-QM-CS-0007 | 同一检验项目硬度单位口径统一 | EXPR | 检验记录·计量单位 | 混用记录数 ≤ 约定值 | 阻断 | 周期·每周 | DQ-N-QM-007 |
| DQ-R-QM-CP-0008 | 不合格判定存在对应处置票据 | T05 | 检验记录→处置票据·记录标识 | 配对率 ≥ 97% | 告警 | 周期·每周 | DQ-N-QM-008 |
| DQ-R-QM-CP-0009 | 关键工序检验记录附交检照片 | T01 | 检验记录·附件标识 | 附件率 ≥ 80% | 告警 | 周期·每周 | DQ-N-QM-009 |
| DQ-R-QM-CP-0010 | 缺陷记录可关联到对应工序工艺参数 | T06 | 检验记录↔设备时序·工件标识+工序+时间窗 | 首期仅度量覆盖率 | 提示 | 周期·每周 | DQ-N-QM-010 |
| DQ-R-QM-VL-0011 | 检验项目编码在主数据中存在 | T05 | 检验记录→检验项目主数据·项目编码 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-QM-011 |
| DQ-R-QM-AC-0012 | 同一工件同一尺寸的多次检验结果不矛盾 | EXPR | 检验记录·实测值 | 矛盾组数 ≤ 约定值 | 告警 | 周期·每周 | DQ-N-QM-006 |
本域规则编写要点。 0001 的适用范围限于新增记录,历史记录的缺陷描述为自由文本, 按现行码表判定会整批不通过。处置方式是在规则参数的「适用筛选条件」中按录入日期划界, 历史记录另行通过文本抽取补充码值,抽取结果标注置信度,不计入本规则统计。
0006 的参照参数来源是材质与热处理工艺的组合区间,须由热处理分厂与质量管理部门 共同确认【待填:各材质各热处理工艺的硬度合理区间】。这张参照表不存在的话, 本规则无法运行——这是本域规则中对甲方资料依赖最强的一条。
0012 为表达式型规则,检查的是同一工件同一重要尺寸在不同检验节点的结果是否矛盾 (如中间检验合格、终检不合格而无返修记录)。这类矛盾在单条记录上看不出来, 但它直接影响质量类数据集标签的可信度。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-WH-UQ-0001 | 物料编码不存在一物多码 | EXPR | 物料主数据·名称+规格+材质相似组 | 疑似重复组数 ≤ 约定值 | 告警 | 周期·每月 | DQ-N-WH-001 |
| DQ-R-WH-CS-0002 | 库存数量三方一致 | T06 | 企业资源计划↔仓储管理↔实物盘点·库存数量 | 不一致项 ≤ 3% | 阻断 | 周期·每周 | DQ-N-WH-002 |
| DQ-R-WH-CP-0003 | 出入库流水批次号非空 | T01 | 出入库流水·批次号 | 非空率 ≥ 97% | 阻断 | 入口·实时 | DQ-N-WH-003 |
| DQ-R-WH-CP-0004 | 材料批次可追溯到供应商与到货单 | T05 | 批次→到货单·批次号 | 可追溯率 ≥ 95% | 阻断 | 周期·每周 | DQ-N-WH-004 |
| DQ-R-WH-VL-0005 | 库位编码在库位主数据中存在 | T05 | 出入库流水→库位主数据·库位编码 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-WH-005 |
| DQ-R-WH-CS-0006 | 同一物料各系统计量单位一致 | T06 | 物料主数据↔出入库流水·计量单位 | 一致率 ≥ 99% | 阻断 | 周期·每月 | DQ-N-WH-006 |
| DQ-R-WH-TM-0007 | 出入库流水在作业后约定时限内入账 | T09 | 出入库流水·入账时间 | 超时率 ≤ 8% | 告警 | 周期·每周 | DQ-N-WH-007 |
| DQ-R-WH-CP-0008 | 库存物料可对应到产品部件 | T05 | 物料主数据→部件清单·物料编码 | 对应率 ≥ 80% | 告警 | 周期·每月 | DQ-N-WH-008 |
| DQ-R-WH-CP-0009 | 关键物料安全库存参数非空 | T01 | 物料主数据·安全库存 | 非空率 ≥ 85% | 告警 | 周期·每月 | DQ-N-WH-009 |
| DQ-R-WH-VL-0010 | 物料状态在状态码表内 | T02 | 物料主数据·物料状态 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-WH-010 |
本域规则编写要点。 0002 实际展开为三条子规则(两两比对),在平台中作为一个规则组维护, 统计时按比对项合并。容差按计量精度分设:整件物料零容差,散料按计量器具精度, 长度类按图纸允差。一个统一容差会让整件物料的差错被掩盖。
0001 为表达式型规则。一物多码的识别不是精确匹配,而是按名称、规格、材质三项做 相似度分组,疑似组交由仓储与采购部门人工确认。规则只负责把疑似组找出来, 不自动判定重复——自动判定会把规格相近但确实不同的物料并掉。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-PU-VL-0001 | 供应商编码在供应商主数据中存在 | T05 | 采购订单→供应商主数据·供应商编码 | 符合率 ≥ 99% | 阻断 | 入口·实时 | DQ-N-PU-001 |
| DQ-R-PU-CP-0002 | 采购订单行物料编码非空 | T01 | 采购订单行·物料编码 | 非空率 ≥ 99.5% | 阻断 | 入口·实时 | DQ-N-PU-002 |
| DQ-R-PU-CS-0003 | 采购订单价与物料价格一致 | T06 | 采购订单行↔物料价格·单价 | 一致率 ≥ 97%,容差 0 | 告警 | 周期·每月 | DQ-N-PU-003 |
| DQ-R-PU-CP-0004 | 采购订单行要求交货期非空 | T01 | 采购订单行·要求交货期 | 非空率 ≥ 98% | 告警 | 入口·实时 | DQ-N-PU-004 |
| DQ-R-PU-TM-0005 | 到货记录在收货后约定时限内入账 | T09 | 到货单·入账时间 | 超时率 ≤ 8% | 告警 | 周期·每周 | DQ-N-PU-005 |
| DQ-R-PU-VL-0006 | 采购物料材质牌号在钢材牌号码表内 | T02 | 采购订单行·材质牌号 | 符合率 ≥ 98% | 告警 | 入口+周期·每月 | DQ-N-PU-006 |
| DQ-R-PU-UQ-0007 | 采购订单号唯一 | T04 | 采购订单·订单号 | 冲突组数 = 0 | 阻断 | 周期·每月 | DQ-N-PU-007 |
| DQ-R-PU-CP-0008 | 到货批次入厂质检结论已回填 | T05 | 到货单→入厂质检·批次号 | 回填率 ≥ 93% | 告警 | 周期·每周 | DQ-N-PU-008 |
| DQ-R-PU-VL-0009 | 订单状态在状态码表内 | T02 | 采购订单·订单状态 | 符合率 ≥ 99.5% | 告警 | 入口·实时 | DQ-N-PU-009 |
本域规则编写要点。 0006 与研发设计域的 DQ-R-RD-VL-0005、 跨域规则 DQ-R-RD-CS-0014 共用同一套钢材牌号码表。三条规则必须引用同一码表版本, 否则会出现设计端判定合规、采购端判定不合规的情形。 码表版本的引用关系在规则元数据的「关联数据元」字段中登记, 码表发版时平台按引用关系推送影响清单。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-EQ-UQ-0001 | 测点标识在同一设备下唯一 | T04 | 测点配置·设备编码+测点标识 | 冲突组数 = 0 | 阻断 | 周期·每月 | DQ-N-EQ-001 |
| DQ-R-EQ-TM-0002 | 秒级采样测点无超约定时长缺段 | T10 | 设备时序·时间戳(缺段型) | 日均缺段测点数 ≤ 约定值 | 阻断 | 周期·每日 | DQ-N-EQ-002 |
| DQ-R-EQ-AC-0003 | 测点取值不长期恒定 | T10 | 设备时序·测点值(恒值型) | 疑似卡死测点数 ≤ 约定值 | 告警 | 周期·每日 | DQ-N-EQ-003 |
| DQ-R-EQ-AC-0004 | 测点均值无无支持的单向漂移 | T10 | 设备时序·测点值(漂移型) | 疑似漂移测点数 ≤ 约定值 | 告警 | 周期·每周 | DQ-N-EQ-004 |
| DQ-R-EQ-AC-0005 | 炉膛实测温度在环境温度与额定上限之间 | T08 | 设备时序·炉膛温度 | 越界率 ≤ 0.1% | 阻断 | 周期·每日 | DQ-N-EQ-005 |
| DQ-R-EQ-AC-0006 | 装炉量不超过炉膛额定装载量 | T08 | 热处理炉次·装炉重量 | 越界率 ≤ 0.2% | 阻断 | 周期·T+1 | DQ-N-EQ-006 |
| DQ-R-EQ-AC-0007 | 中频电源四项参数符合电气约束 | T08 | 设备时序·功率/频率/电流/电压 | 违反率 ≤ 1% | 告警 | 周期·每日 | DQ-N-EQ-007 |
| DQ-R-EQ-CP-0008 | 已接入测点三项配置齐备 | T01 | 测点配置·量纲/量程/采样周期 | 齐备率 ≥ 95% | 阻断 | 周期·每月 | DQ-N-EQ-008 |
| DQ-R-EQ-CP-0009 | 报警事件可配对到服务工单维修事实 | T06 | 报警事件↔服务工单·设备编码+时间窗 | 首期仅度量覆盖率 | 提示 | 周期·每周 | DQ-N-EQ-009 |
| DQ-R-EQ-VL-0010 | 时序数据设备编码在设备主数据中存在 | T05 | 设备时序→设备主数据·设备编码 | 符合率 ≥ 99% | 阻断 | 周期·每日 | DQ-N-EQ-010 |
| DQ-R-EQ-CS-0011 | 各采集通道时间戳对齐到统一时间基准 | EXPR | 设备时序·时间戳 | 偏差超限通道数 = 0 | 阻断 | 周期·每日 | DQ-N-EQ-011 |
| DQ-R-EQ-CP-0012 | 备件出库记录可关联到服务工单 | T05 | 备件出库→服务工单·工单号 | 关联率 ≥ 95% | 告警 | 周期·每周 | DQ-N-EQ-012 |
| DQ-R-EQ-AC-0013 | 测点取值分布与基线分布无突变 | T10 | 设备时序·测点值(分布突变型) | 突变测点数 ≤ 约定值 | 告警 | 周期·每周 | DQ-N-EQ-004 |
本域规则编写要点。 四条 T10 规则(0002、0003、0004、0013)是本域规则的主体, 也是整个规则库中唯一不靠「字段填没填」判断质量的一类。它们的输出一律是 测点可信度标记,不是设备故障判定(第 4.6.10 节)。 0003 与 0004 的判定参数须按测点类型分别设定:温度测点在保温段本就恒定, 振动测点在停机期本就恒定,一套统一参数会在正常工况下大量误报。 参数按测点类型分组配置,分组依据取测点配置表中的测点类型字段。
0011 为表达式型规则,检查各采集通道时间戳相对统一时间基准的偏差。 本规则的严重级定为阻断,是本域中少见的对时序数据设阻断的规则—— 时间基准不统一,后续所有跨通道的配对与对齐都不成立,宁可拦住。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-MK-CP-0001 | 项目记录可对应到生产施工号 | T05 | 项目→工单·施工号 | 对应率 ≥ 92% | 告警 | 周期·每月 | DQ-N-MK-001 |
| DQ-R-MK-CP-0002 | 项目记录工作面类型非空(新增记录) | T01 | 项目·工作面类型 | 非空率 ≥ 90% | 告警 | 入口·实时 | DQ-N-MK-002 |
| DQ-R-MK-VL-0003 | 工作面类型在码表内 | T02 | 项目·工作面类型 | 符合率 ≥ 98% | 告警 | 入口·实时 | DQ-N-MK-003 |
| DQ-R-MK-CP-0004 | 项目记录地质与煤质参数齐备(新增记录) | T01 | 项目·地质条件/煤质参数 | 齐备率 ≥ 85% | 告警 | 周期·每月 | DQ-N-MK-004 |
| DQ-R-MK-UQ-0005 | 合同编号唯一 | T04 | 合同·合同编号 | 冲突组数 = 0 | 阻断 | 周期·每月 | DQ-N-MK-005 |
| DQ-R-MK-CP-0006 | 合同可关联到选型方案文档 | T05 | 合同→文档目录·合同编号 | 关联率 ≥ 80% | 告警 | 周期·每月 | DQ-N-MK-006 |
| DQ-R-MK-VL-0007 | 客户编码在客户主数据中存在 | T05 | 项目→客户主数据·客户编码 | 符合率 ≥ 98% | 告警 | 入口·实时 | DQ-N-MK-007 |
| DQ-R-MK-VL-0008 | 项目状态在状态码表内 | T02 | 项目·项目状态 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-MK-008 |
本域规则编写要点。 0002 与 0004 均限于新增记录。甲方客户关系管理系统正在上线、 历史数据较少,对历史记录设非空要求没有可整改的对象。 历史项目的工作面类型与地质参数通过选型方案文档解析补充,解析结果标注来源与置信度, 不计入本规则统计。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-FI-CS-0001 | 财务物料价格与企业资源计划价格按期间一致 | T06 | 财务↔企业资源计划·物料单价 | 一致率 ≥ 98%,容差 0 | 阻断 | 周期·每月 | DQ-N-FI-001 |
| DQ-R-FI-VL-0002 | 成本中心编码在主数据中存在 | T05 | 成本归集→成本中心主数据·编码 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-FI-002 |
| DQ-R-FI-CP-0003 | 制造成本可按施工号归集 | T05 | 成本归集→工单·施工号 | 关联率 ≥ 96% | 阻断 | 周期·每月 | DQ-N-FI-003 |
| DQ-R-FI-CS-0004 | 会计期间与业务发生期间匹配 | T07 | 凭证·会计期间/业务日期 | 匹配率 ≥ 98% | 告警 | 周期·每月 | DQ-N-FI-004 |
| DQ-R-FI-CS-0005 | 金额字段币种与单位口径统一 | T02 | 凭证·币种/金额单位 | 一致率 ≥ 99.5% | 阻断 | 入口·实时 | DQ-N-FI-005 |
| DQ-R-FI-CP-0006 | 各工序工时成本率参数非空 | T01 | 工序成本参数·工时成本率 | 非空率 ≥ 92% | 告警 | 周期·每月 | DQ-N-FI-006 |
| DQ-R-FI-UQ-0007 | 凭证号在同一会计期间内唯一 | T04 | 凭证·期间+凭证号 | 冲突组数 = 0 | 阻断 | 周期·每月 | DQ-N-FI-007 |
| DQ-R-FI-VL-0008 | 预算科目在科目表内 | T02 | 预算行·预算科目 | 符合率 ≥ 99.5% | 告警 | 入口·实时 | DQ-N-FI-008 |
本域规则编写要点。 本域阈值普遍高于其它域,原因是甲方企业资源计划系统录入规范 相对严格、数据质量较好,起点高,阈值低了没有约束力。 本域不投入重点整改资源,规则以常态监控为主(需求清单第 3.5.8 节)。
| 规则标识 | 规则名称 | 模板 | 检查对象·字段 | 阈值(初始) | 严重级 | 触发·频率 | 来源需求 |
|---|---|---|---|---|---|---|---|
| DQ-R-HR-UQ-0001 | 员工编号唯一 | T04 | 员工·员工编号 | 冲突组数 = 0 | 阻断 | 周期·每月 | DQ-N-HR-001 |
| DQ-R-HR-VL-0002 | 岗位编码在岗位主数据中存在 | T05 | 员工→岗位主数据·岗位编码 | 符合率 ≥ 99% | 告警 | 入口·实时 | DQ-N-HR-002 |
| DQ-R-HR-CP-0003 | 特种作业岗位资质非空且在有效期内 | T01 | 员工资质·资质编号/有效期 | 非空且有效率 ≥ 99% | 阻断 | 周期·每月 | DQ-N-HR-003 |
| DQ-R-HR-CS-0004 | 报工人员岗位与工序要求岗位匹配 | T06 | 工单工序↔员工·岗位编码 | 匹配率 ≥ 94% | 告警 | 周期·每周 | DQ-N-HR-004 |
| DQ-R-HR-CS-0005 | 各系统组织机构编码口径一致 | T06 | 多系统·组织机构编码 | 一致率 ≥ 98% | 阻断 | 周期·每月 | DQ-N-HR-005 |
| DQ-R-HR-VL-0006 | 个人敏感字段按分级要求脱敏 | EXPR | 数据集加工取数结果·敏感字段 | 待基线 | 阻断 | 入口·实时 | DQ-N-HR-006 |
本域规则编写要点。 0006 的检查对象不是源系统表,而是数据集加工环节的取数结果。 这是规则库中唯一一条检查对象位于加工链路而非源系统的规则, 放在本域是因为其判定依据来自个人信息的分级规定。 规则的具体判定方式由《数据权限管理规范》与《数据安全分级标准》规定, 本规则库只登记元数据与触发方式,不重复定义脱敏算法。 本规则严重级定为阻断,且不设观察期——脱敏不到位的数据不得进入加工链路。
业务域码取 XD 的规则,是两侧对象分属不同业务域的跨系统比对与引用完整性规则。 这类规则在表 A8-7 的分域统计中按两侧对象中数据量较大的一侧归入该域小计, 不另列一行,以免总数重复计算。但它们在编写与维护上须单独管理, 因为其责任部门是两个,整改时常需两个部门协同。
| 规则标识 | 规则名称 | 模板 | 两侧对象·关联键 | 阈值(初始) | 严重级 | 触发·频率 | 责任两侧 |
|---|---|---|---|---|---|---|---|
| DQ-R-XD-CS-0001 | 图纸与工艺卡片的材质牌号一致 | T06 | 图文档↔工艺卡片·图号+版本 | 一致率 ≥ 98% | 告警 | 周期·每月 | 刮板机研究分院/工艺研究分院 |
| DQ-R-XD-CS-0002 | 工艺卡片工序与工单工序代码一致 | T06 | 工艺卡片↔工单工序·图号+工序代码 | 一致率 ≥ 97% | 阻断 | 周期·T+1 | 工艺研究分院/生产管理部 |
| DQ-R-XD-CP-0003 | 工单物料可对应到物料主数据与库存 | T05 | 工单用料→物料主数据·物料编码 | 关联率 ≥ 99% | 阻断 | 周期·T+1 | 生产管理部/仓储归口部门 |
| DQ-R-XD-CS-0004 | 热处理炉次工艺参数与工艺卡片要求一致 | T06 | 热处理群控↔工艺卡片·炉次号+图号 | 一致率 ≥ 95% | 告警 | 周期·T+1 | 热处理分厂/工艺研究分院 |
| DQ-R-XD-CP-0005 | 材料批次可从工件追溯到到货单 | T05 | 工件→批次→到货单·批次号 | 可追溯率 ≥ 92% | 阻断 | 周期·每周 | 仓储归口部门/采购归口部门 |
| DQ-R-XD-CS-0006 | 检验重要尺寸与工艺标注尺寸一致 | T06 | 质量管理↔工艺卡片·图号+尺寸标识 | 一致率 ≥ 97% | 告警 | 周期·每周 | 质量管理归口部门/工艺研究分院 |
| DQ-R-XD-TM-0007 | 设备时序时间窗与工单工序时间窗可对齐 | T09 | 设备时序↔工单工序·设备编码+时间戳 | 对齐率 ≥ 90% | 告警 | 周期·每日 | 设备管理归口部门/生产管理部 |
| DQ-R-XD-CP-0008 | 服务工单可关联到在役装备台账 | T05 | 售后服务→装备台账·设备编码 | 关联率 ≥ 96% | 告警 | 周期·每周 | 售后归口部门/设备管理归口部门 |
| DQ-R-XD-CS-0009 | 成本归集施工号与工单施工号一致 | T06 | 财务↔工单·施工号 | 一致率 ≥ 98% | 阻断 | 周期·每月 | 财务归口部门/生产管理部 |
| DQ-R-XD-CS-0010 | 项目工作面类型与选型方案记录一致 | T06 | 项目↔选型记录·合同编号 | 一致率 ≥ 95% | 告警 | 周期·每月 | 营销中心/刮板机研究分院 |
| DQ-R-XD-CP-0011 | 不合格品处置票据可关联到返修工单 | T05 | 处置票据→工单·票据编号 | 关联率 ≥ 93% | 告警 | 周期·每周 | 质量管理归口部门/生产管理部 |
| DQ-R-XD-CS-0012 | 各系统组织机构与成本中心对应关系一致 | T06 | 人力资源↔财务·组织机构编码 | 一致率 ≥ 98% | 阻断 | 周期·每月 | 人力资源归口部门/财务归口部门 |
跨域规则的编写要点。 三条阻断级规则(0002、0003、0009)构成一条链: 工艺卡片的工序定义→工单的工序执行→成本按施工号归集。这条链贯通, 「某个产品的某道工序花了多少工时、多少钱、用了什么材料」才能从数据中直接读出, 这是制造过程类与供需计划类数据集中价值最高的一类样本。链上任一环断开, 这类样本就只能靠人工对账构造,量上不去。
0004 是本组中业务含义最具体的一条:热处理群控系统下发的工艺程序参数 (保温温度、保温时间、淬火介质温度)应与工艺卡片的要求一致。 不一致有两种情形:现场按经验调整了参数而未回改工艺卡片, 或工艺卡片已修订而群控程序未更新。两种情形的根因与整改措施不同, 在整改环节须按第 6.5 节第二种情形拆单。这条规则的价值在于, 它把「实际执行的工艺」与「规定的工艺」之间的偏差显式化—— 而热处理过程控制智能化场景要学的恰恰是实际执行的工艺。
0007 与生产制造域的 DQ-R-MF-TM-0016、设备管理域的 DQ-R-EQ-CS-0011 三条规则 针对同一件事的三个层面:时间基准是否统一(0011)、 单侧时序能否对齐到工序(MF-0016)、两侧时间窗能否互相匹配(XD-0007)。 三条规则的归属域不同、责任部门不同,但整改须同步推进; 月度报告中三条并列呈现(见分析报告第 3.4 节)。
十类模板覆盖不了的逻辑才写表达式型规则。实践中有四类情形必须用表达式: 跨记录判断(如同一工单内工序序号序列是否连续)、 跨记录聚合后比较(如同一检验项目的计量单位是否恒定)、 相似度分组(如一物多码的疑似重复识别)、 需要引用外部计算过程的判定(如按分级规定判断脱敏是否到位)。
不属上述四类而写成表达式的,退回改用模板。这条约束的理由是: 表达式型规则的维护成本显著高于模板型——参数改一个值与改一段 SQL 不是一回事, 后者需要能读懂 SQL 的人,而项目移交后甲方岗位人员的技能构成不一定支持。
| 项 | 要求 |
|---|---|
| 命名 | 规则名称须说明「检查什么」而非「怎么检查」,不得出现 SQL 关键字 |
| 注释 | 表达式首行以注释写明判定逻辑的自然语言表述、涉及的业务规则来源 |
| 结构 | 输出列固定为:业务主键、实测值、期望值(或期望描述);多出的列不采 |
| 引用 | 码表、主数据、参照参数一律按表名引用,不得内联取值列表 |
| 时间 | 时间窗一律以参数传入,不得在表达式中写死日期 |
| 性能 | 单次执行的取数量级须在规则元数据中估算并记录;超过约定量级的须加时间窗分片 |
| 禁止项 | 不得包含更新、删除、建表等非查询语句;不得跨库直连未授权数据源 |
「输出列固定」这一条是为异常明细的可用性设的。业务人员要按业务主键在源系统中 找到那条记录(《数据质量管理办法》第四十四条);输出列五花八门, 平台就无法统一渲染异常明细,业务人员拿到的是一张看不懂的结果表。
表达式型规则提交时须附两道检查的记录(《数据质量管理办法》第三十一条)。
第一道,规则编制人提供预期命中样例与预期不命中样例各不少于三条。 样例须取自真实数据(可脱敏),不得自造。自造样例只能验证表达式语法正确, 验证不了它在真实数据形态下的行为——而真实数据里的空值、 异常编码与历史形态恰恰是表达式最容易出错的地方。
第二道,由另一名数据质量管理员在样本数据上试跑,核对结果与预期是否一致。 不一致的退回修改。两道检查的记录随规则留档,格式如下。
| 检查项 | 内容 |
|---|---|
| 规则标识与版本 | DQ-R-MF-CS-0013 V1.0 |
| 预期命中样例 | 三条及以上的业务主键与命中原因 |
| 预期不命中样例 | 三条及以上的业务主键与不应命中的原因 |
| 试跑数据范围 | 样本库名称、时间窗、记录量级 |
| 试跑结果 | 实际命中数、与预期一致的条数、不一致项及原因 |
| 结论 | 通过/退回修改 |
| 试跑执行人 | 与编制人不得为同一人 |
表达式型规则在规则库中的占比宜控制在两成以内(《数据质量管理办法》第三十一条)。 超过两成时的处置不是停止编写表达式,而是回头看是否应当抽象出新模板: 若有五条以上表达式在做同一类判断(如都在做跨记录聚合后比较), 说明这一类判断应当成为第十一类模板。模板的新增由数据治理工作组核定, 新增后原有的同类表达式规则逐步改写为模板型,改写期间两种形式并存, 但不得同时启用两条判定同一件事的规则。
首批规则库中表达式型占 8.5%(表 A8-8),其中九十八条分布在 一物多码识别、工序序列连续性、计量单位恒定性、检验结果矛盾性、 时间基准偏差、脱敏到位性六类判断上。前五类各有十条以上, 已接近可抽象为模板的量级,列入第二季度规则库大版本的评估事项。
规则库除文档形态外,另以机器可读配置形态存放与交付,供平台加载执行、 供数据集加工任务记录依据版本、供第三方评测复核时重跑。 配置以 JSON 表达,一条规则一个对象,字段与表 A8-6 的元数据一一对应。
{
"ruleId": "DQ-R-EQ-AC-0006",
"ruleName": "装炉量不超过炉膛额定装载量",
"template": "T08",
"dimension": "AC",
"targetObject": "热处理炉次",
"targetFields": ["装炉重量"],
"relatedDataElement": "DE-EQ-0412",
"params": {
"constraintExpr": "c.装炉重量 <= e.额定装载量",
"referenceSource": "设备主数据",
"referenceJoin": "c.设备编码 = e.设备编码",
"referenceField": "额定装载量",
"applyFilter": "c.装炉重量 IS NOT NULL AND e.额定装载量 IS NOT NULL"
},
"threshold": {"metric": "越界率", "operator": "<=", "value": 0.002,
"calibration": "二级依据·设备额定值", "standardRef": "设备主数据额定装载量字段"},
"measureUnit": "记录",
"severity": "阻断",
"triggerModes": ["周期稽核"],
"frequency": "T+1",
"ownerDept": "【待填:甲方设备管理部门正式名称】",
"source": {"type": "需求清单", "refId": "DQ-N-EQ-006"},
"status": "启用",
"version": "V1.0",
"changeLog": [
{"date": "2027-01-18", "type": "新增", "operator": "数据质量管理员",
"approval": "2027-01 月度例会"}
],
"falsePositiveLog": []
}
配置文件的三条约定。第一,threshold.calibration 必填, 写明阈值依据的级别(第 4.7 节四级依据),仅凭实测分布标定的须另附标定记录编号。 第二,ownerDept 不得为空字符串;未确认责任部门的规则不得进入启用状态 (《数据质量管理办法》第二十九条、《数据质量需求清单》第 3.2 节)。 第三,配置文件按规则库版本整包发布,不按单条规则发布; 整包发布附清单文件与各文件的 SM3 摘要,使甲方与第三方评测机构可校验完整性。
首轮全量扫描使用探查型规则,只统计分布、不判通过与否、不生成问题单, 其作用是为正式规则的阈值标定提供实测分布(《数据质量需求清单》第 3.9 节)。 探查型规则的定义与正式规则的差别有三处,须在配置中显式区分。
| 项 | 正式规则 | 探查型规则 |
|---|---|---|
| 配置标识 | "probe": false(默认) | "probe": true |
| 阈值字段 | 必填 | 必须为空;填了阈值的探查型规则加载时报错 |
| 严重级 | 阻断/告警/提示 | 固定为「提示」,且不生成问题单 |
| 输出 | 不通过记录清单+通过率 | 分布统计项(分位点、频次表、缺段统计等) |
| 版本归属 | 进规则库正式版本 | 不进正式版本,随《首轮全量扫描报告》留档 |
| 执行频率 | 按元数据登记 | 一次性;重新扫描时另建批次 |
探查型规则的编号沿用正式规则的编号结构,但序号段从 9001 起分配, 与正式规则在序号上分段,便于在配置与日志中一眼区分。 例如 DQ-R-MF-TM-9001 为报工时延的分布探查, 其标定结果用于确定正式规则 DQ-R-MF-TM-0005 的初始阈值。
探查型规则在项目期内不止用一次。除首轮全量扫描外, 下列三种情形须重新执行相应的探查:新增纳管数据对象(为其正式规则标定阈值); 某条正式规则的误报率持续偏高而根因归为阈值不当(重新取分布标定); 业务流程或系统改造后数据形态发生变化(原分布不再适用)。 三种情形的探查结果均追加留档,不覆盖首轮基线(《数据质量需求清单》第 3.9 节)。
表 A8-7 首批规则按业务域与质量维度分布
| 业务域 | 完整性 | 准确性 | 一致性 | 唯一性 | 及时性 | 有效性 | 小计 |
|---|---|---|---|---|---|---|---|
| 研发设计 | 42 | 26 | 18 | 10 | 6 | 38 | 140 |
| 生产制造 | 76 | 52 | 40 | 16 | 22 | 64 | 270 |
| 质量管理 | 50 | 34 | 26 | 12 | 14 | 46 | 182 |
| 仓储物流 | 30 | 18 | 24 | 10 | 10 | 26 | 118 |
| 采购管理 | 26 | 16 | 14 | 8 | 6 | 22 | 92 |
| 设备管理 | 36 | 30 | 16 | 8 | 20 | 30 | 140 |
| 营销管理 | 22 | 12 | 10 | 6 | 4 | 18 | 72 |
| 财务管理 | 24 | 18 | 16 | 6 | 6 | 20 | 90 |
| 人力资源 | 16 | 8 | 8 | 4 | 2 | 14 | 52 |
| 合计 | 322 | 214 | 172 | 80 | 90 | 278 | 1156 |
规则数量与数据元数量大体成一比一的量级关系:约一千三百七十条数据元派生出 约一千一百五十六条规则,再加上跨系统比对与物理约束一类不由单字段派生的规则。 生产制造域规则最多,因为该域字段最多、时序数据与跨系统关联最密集。 本表与技术方案「数据治理(二)」一节给出的规模估算口径一致。
表 A8-8 首批规则按模板与严重级分布(样例)
| 模板 | 规则数 | 阻断 | 告警 | 提示 | 占比 |
|---|---|---|---|---|---|
| T01 空值检查 | 268 | 74 | 186 | 8 | 23.2% |
| T02 值域检查 | 96 | 38 | 50 | 8 | 8.3% |
| T03 格式检查 | 82 | 14 | 64 | 4 | 7.1% |
| T04 唯一性检查 | 80 | 52 | 26 | 2 | 6.9% |
| T05 引用完整性检查 | 174 | 62 | 106 | 6 | 15.1% |
| T06 跨系统比对 | 142 | 36 | 94 | 12 | 12.3% |
| T07 逻辑自洽检查 | 68 | 22 | 44 | 2 | 5.9% |
| T08 物理约束检查 | 56 | 20 | 34 | 2 | 4.8% |
| T09 时效检查 | 54 | 6 | 44 | 4 | 4.7% |
| T10 分布与连续性检查 | 38 | 6 | 26 | 6 | 3.3% |
| EXPR 表达式型 | 98 | 30 | 62 | 6 | 8.5% |
| 合计 | 1156 | 360 | 736 | 60 | 100% |
表达式型规则占比 8.5%,低于第五章规定的两成上限。 阻断级规则 360 条,占 31.1%,集中在关联键、唯一性与引用完整性三类检查上。 提示级 60 条中,首批进入观察期的占多数,另有六条是前述「首期仅度量覆盖率」的配对类规则。
表 A8-9 规则覆盖率统计(样例)
| 统计项 | 数值 | 说明 |
|---|---|---|
| 纳管数据元总数 | 1370 | 以《数据元标准》首批发布为准 |
| 已有至少一条规则的数据元 | 1148 | 覆盖率 83.8% |
| 未覆盖数据元 | 222 | 逐条列明原因,见本规则库第 9.4.2 节;三类原因见下段 |
| 关键数据元(高优先级需求涉及) | 316 | 已有规则 316 条,覆盖率趋向全覆盖 |
| 需求清单条目已派生规则 | 398/426 | 未派生 28 条,原因见需求清单第 4.4 节 |
未覆盖的二百二十二个数据元按三类原因处理:一类是该数据元当前无可取数通道, 登记已知缺口;一类是该数据元尚无码表或值域定义,待标准建设完成后补规则; 一类是该数据元在业务上为自由文本说明字段,无可检查的质量约束, 在清单中标注「无需规则」并说明理由。不留空白是本节的要求—— 覆盖率低不是问题,覆盖率低而说不出原因才是问题。
图 A8-4 校验规则的生命周期与状态流转。实线为正向流转,虚线为回退与修订路径。 数据来源:《数据质量管理办法》第五章第二十八条至第三十七条; 观察期流程见本文件第 4.8 节。
规则库是五份文档中与甲方业务对象贴合最紧的一份,因为规则本身就写着对象名、 字段名与参照参数。下面四处是本规则库区别于通用规则库的关键设计。
T08 物理约束检查独立成一类模板。 通用数据质量规则库通常只有空值、格式、值域、 唯一性、引用完整性与跨系统比对六类。本项目把物理约束单列为一类, 是因为甲方的工艺与设备数据缺少外部权威源可比对:板材展开长、炉膛温度、 装炉量、焊接电流、链条安全系数,都没有第二套系统可以对账。 但它们都有物理与设备能力的边界。首批五十六条 T08 规则中, 二十条定为阻断级,捕获的多是录入错误与采集通道硬故障。 这类规则的参照参数一律取自设备主数据或工艺标准,不硬编码(第 4.6.8 节)。
T10 分布与连续性检查的输出是可信度标记,不是故障判定。 甲方装备在井下连续运行, 工况恶劣、维护窗口有限、传感器易损;远程运维平台报警不少、故障标签很少。 若把测点异常直接当作设备异常,刮板输送装备健康诊断智能化场景的样本标签 会混入大量传感器故障。本规则库在 T10 模板的定义中写明输出语义, 并在设备管理域四条 T10 规则的编写要点中重申(第 4.9.6 节)。
六条「首期仅度量覆盖率」的提示级规则。 DQ-R-MF-CP-0012(焊接参数流与焊道配对)、 DQ-R-QM-CP-0010(缺陷与工艺参数关联)、DQ-R-EQ-CP-0009(报警与维修事实配对) 及相关规则,其检查对象的配对条件当前不具备。按告警级运行只会每日产生 无法整改的问题单;按提示级运行,规则的产出变成一个可用于判断数据集可构造样本量的数字。 这个安排在规则库中是显式的,不是默认行为——每条这类规则在元数据的 「阈值」字段中写明「首期仅度量覆盖率」,并在变更记录中写明重新核定严重级的触发条件。
按历史形态分段的格式与值域规则。 甲方六十三万张历史图纸的图号形态历经演变, 质量管理系统的缺陷描述历史上为自由文本。对这两类对象, 规则在参数中按年份或录入日期分段设定正则与码表,并对无法归入任何形态的记录 单列清单由业务部门逐批确认(第 4.6.3 节、第 4.9.3 节)。 一刀切按现行规则判定,会把大量有效的历史数据判为不合格, 而这些数据恰恰是预训练与工艺设计类数据集的主要来源。
规则的评审。 单条规则的评审按《数据质量管理办法》第三十一条与第三十四条执行: 模板型规则由数据质量管理员编写、业务域数据管理员核对业务合理性; 表达式型规则另加两道检查(样例核对与第二人试跑); 全部规则经观察期后由数据治理工作组在月度例会核定严重级与阈值。
规则库的版本发布。 小版本按月发布(V1.x),大版本按季发布(Vx.0)。 每个发布版本附变更清单,列明新增、变更、停用的规则标识及变更内容。 变更清单的格式固定为七列:规则标识、变更类型、变更前、变更后、变更原因、 对历史可比性的影响、核定记录。
下游通知。 规则库发版后须通知四处:所有引用该规则的稽核任务配置; 数据集加工任务(加工任务在取数时记录所依据的规则库版本号); 质量看板配置;相关需求清单条目的「关联规则」字段。 通知未完成的发版不生效(《数据质量管理办法》第三十六条、第三十七条)。
可复现性。 数据集加工任务在取数时记录所依据的规则库版本号, 使某一批次数据的质量判定可以复现。这一条对第三方评测尤其重要: 评测机构若对某批次数据的质量判定有疑问,可按记录的版本号取回当时的规则集重跑, 而不是用当前版本的规则去判断半年前加工的数据。
规则库的动作围绕一条规则的一生展开:编制、定阈值、定严重级、进观察期、转正式、调参、停用。每一步的判断依据不同,承办方因而不同——阈值靠数据分布,严重级靠业务后果,停用靠误报统计。下表逐项列明。代码含义与本附件 2.6 一致。
表 A8-17 《数据质量校验规则库》职责矩阵
| 序 | 动作 | 对应章节 | 数据治理工作组 | 数据质量管理员 | 业务域数据管理员 | 系统运维责任人 | 我方项目组 |
|---|---|---|---|---|---|---|---|
| 1 | 规则编号规则的制定与维护 | 4.4 | 审 | 批 | — | — | 拟 |
| 2 | 规则元数据字段定义的维护 | 4.5 | 审 | 批 | 配 | — | 拟 |
| 3 | 十类模板的参数定义与表达式维护 | 4.6 | 审 | 批 | 签 | — | 拟 |
| 4 | 模板型规则的生成与登记 | 4.6 | — | 审 | 签 | 配 | 执 |
| 5 | 表达式型规则的编写 | 4.10 | — | 批 | 签 | 配 | 拟 |
| 6 | 表达式型规则的逐条评审 | 4.10 | 审 | 批 | 签 | 配 | 配 |
| 7 | 阈值的标定与复核 | 4.7 | — | 批 | 签 | 配 | 拟 |
| 8 | 严重级的判定 | 4.8 | 审 | 审 | 批 | — | 拟 |
| 9 | 观察期的设定 | 4.8 | — | 批 | 签 | — | 拟 |
| 10 | 观察期满转正式或退回 | 4.8 | 审 | 批 | 签 | — | 执 |
| 11 | 误报率的统计与收敛 | 4.8 | — | 批 | 配 | 配 | 执 |
| 12 | 规则的调参、停用与归并 | 4.8 | 审 | 批 | 签 | 配 | 拟 |
| 13 | 首轮扫描探查型规则集的编制 | 4.12 | — | 审 | 签 | 签 | 拟 |
| 14 | 机器可读规则配置的生成与下发 | 4.11 | — | 审 | — | 配 | 执 |
| 15 | 规则在平台侧的配置与调度 | 4.11 | — | 督 | — | 签 | 执 |
| 16 | 规则库统计与覆盖情况的出具 | 4.13 | 审 | 批 | 配 | — | 拟 |
| 17 | 规则与数据元、码表引用关系的维护 | 4.5 | — | 批 | 签 | — | 执 |
| 18 | 规则库版本的发布与下游通知 | 4.15 | 批 | 执 | 配 | 配 | 配 |
第 8 行把严重级的「批」放在业务域数据管理员,而阈值的「批」在第 7 行放在数据质量管理员,这两行的分工差别值得说明。阈值是「多少算不合格」,判断依据是数据分布与业务允差,技术侧与业务侧共同给出;严重级是「不合格之后该拦还是该记」,判断依据只有一个——这条数据带着问题流到下游会造成什么后果,而后果只有业务侧估得准。把两者都交给同一方,结果通常是严重级跟着阈值走:阈值卡得严的规则被设成阻断级,而实际上严不严与拦不拦是两回事。
责任边界按下列四条划定。
其一,规则所依据的业务约束由业务域数据管理员确认。我方项目组负责把业务约束翻译成可执行的判定表达式并验证其数据表现,不代行业务约束的认定;表达式与业务约束不一致的,以业务约束为准重写表达式。
其二,阻断级规则的拦截会使数据无法进入下一环节。设定阻断级须由业务侧确认其业务可承受性,我方项目组不自行把规则提升为阻断级;已设为阻断级的规则在实际运行中造成大面积拦截时,按本节 4.8 的观察期机制处理,不以临时放宽阈值的方式绕过。
其三,规则的误报由规则本身的缺陷或源数据的特殊情形造成,两者的区分以人工复核样本为准。我方项目组执行复核并出具统计,对判定为源数据特殊情形的,提请业务侧确认该情形是否应当纳入规则的例外条件,不自行在规则中加例外。
其四,规则在平台侧的配置与调度由我方项目组执行,但调度窗口与资源占用须经系统运维责任人确认。稽核作业对源系统与平台都是真实负载,这一确认不是形式。
规则库是五份文件中唯一被平台直接加载执行的一份:它的条目不只是文本,还是运行中的判据。一条规则拦住一批数据,复核时要回答这条规则是哪一版、按什么阈值、依据哪条诉求生成的——这四个问题分别落在本节四件附表上。下表给出本规则库项下各附表与配套记录的维护责任、更新触发与保存规则。保存期限一栏不直接写年限:年限取决于甲方档案管理制度与法定最低年限,二者孰长从长,本表给出的是定年限的规则。
表 A8-21 《数据质量校验规则库》附表索引与保存规则
| 编号 | 附表名称 | 性质 | 维护方 | 审批方 | 更新触发 | 保存期限的确定规则 |
|---|---|---|---|---|---|---|
| 附表一 | 规则元数据字段定义与取值域 | 规范性 | 我方项目组 | 数据质量管理员 | 字段增减、取值域调整 | 随本规则库版本留存;字段增减保留变更前定义,按旧定义登记的规则不随之失效 |
| 附表二 | 十类模板的参数定义与生成表达式 | 规范性 | 我方项目组 | 数据质量管理员 | 模板增减、参数定义调整 | 随本规则库版本留存;模板变更保留变更前的参数定义与表达式,已按旧模板生成的规则按旧定义解释 |
| 附表三 | 分业务域规则清单 | 规范性 | 数据质量管理员 | 数据治理工作组 | 规则新增、阈值调整、状态迁移 | 按发布版本归档;停用规则的行保留并标注停用版本与停用理由,不删行 |
| 附表四 | 阈值标定记录 | 规范性 | 我方项目组 | 数据质量管理员 | 每次标定与再标定 | 随对应规则版本留存;阈值调整保留调整前取值与标定样本说明,用于判断历史命中是否成立 |
| 附表五 | 严重级与观察期登记表 | 规范性 | 数据质量管理员 | 数据治理工作组 | 严重级调整、观察期设定或解除 | 随对应规则版本留存;观察期内的命中记录单独标注,不与正式命中混计 |
| 附表六 | 表达式型规则编写记录 | 资料性 | 我方项目组 | 数据质量管理员 | 新增或修改表达式型规则 | 随对应规则版本留存至该规则停用后一个完整复核周期 |
| 附表七 | 机器可读规则配置文件 | 规范性 | 我方项目组 | 数据质量管理员 | 每次版本发布 | 每一发布版本单独留存,不以新版覆盖;被数据集加工任务记录为依据版本的,保留至该数据集版本退役 |
| 附表八 | 首轮扫描探查型规则集 | 规范性 | 我方项目组 | 数据质量管理员 | 首轮扫描前确定、扫描后转正式规则 | 长期留存至首轮扫描结论定版后一个完整复核周期;转为正式规则的保留原探查型定义 |
| 附表九 | 规则库统计表 | 资料性 | 我方项目组 | 数据质量管理员 | 随每次版本发布同步生成 | 随对应发布版本留存 |
| 附表十 | 规则评审意见与处理表 | 规范性 | 评审组织方 | 数据治理工作组 | 每次评审 | 随该批次规则的发布版本留存,保留每一轮而不是只留最终版 |
| 附表十一 | 本规则库修订记录表 | 规范性 | 我方项目组 | 数据治理工作组 | 每次版本变更 | 置于规则库正文之后,与文档同寿,不可删行、不重排序号 |
附表四与附表七的保存规则是本表的重点,两件回答的是同一类追问。数据集交付之后被第三方评测复核,复核方要重跑当初的校验,重跑用的必须是当初那一版规则配置与当初那一组阈值——用现行版本重跑,结果与原始质检报告对不上,而对不上的原因不是数据有问题,是尺子换过了。因此这两件的留存不按档案周期,按引用它们的数据集版本的生命周期。
附表三的「停用规则不删行」另有一层用处。规则停用通常不是因为它写错了,而是因为它所针对的质量问题已经治理完毕;若干个月后同类问题复发时,先查的就是这条规则当初为什么停。停用理由与停用版本一并留在清单里,这个判断只要翻一行就能做出来。
| 项 | 内容 |
|---|---|
| 文件名称 | 《矿山装备制造领域高质量数据集建设项目数据质量分析报告》 |
| 文档编号 | GHY26691-GV-06-0004-V1.0(模板);每期报告编号在模板号后加期号,如 …-V1.0-2027M03 |
| 版本号 | V1.0(模板版本) |
| 文件性质 | 周期性报告。月度报告每月一期,季度报告每季一期(季度报告含月度全部章节并增补第七、第八章) |
| 出具时点 | 月度报告在次月第五个工作日前;季度报告在季后第十个工作日前(《数据质量管理办法》第五十三条) |
| 编制 | 数据质量管理员 |
| 审定 | 月度报告由数据治理工作组在月度例会审定;季度报告由数据治理委员会审定 |
| 送达 | 九个业务域数据管理员、各责任部门、数据集加工环节;季度报告另送数据治理委员会 |
| 密级 | 内部 |
| 依据文件 | 《数据质量管理办法》第七章;《数据质量需求清单》;《数据质量校验规则库》 |
本模板适用于项目期的全部月度与季度质量分析报告。报告的编制以两项数据为输入: 稽核任务的执行结果与异常明细,以及整改台账的处置记录。两项输入缺一不可—— 只有异常明细没有台账,报告说得出问题说不出进展;只有台账没有异常明细, 报告说得出进展说不出问题在哪。
生效条件一条:报告中的质量分章节须在首轮全量扫描形成基线后方可填写 (《数据质量管理办法》第 2.2 节)。基线形成前出具的报告只含问题量、 构成与整改进展三部分,质量分章节注明「待基线」。
报告一经出具不修改。 发现数据有误的出补充说明,并在下期报告中更正 (《数据质量管理办法》第五十三条)。这一条是为了让历史报告可以作为治理过程的证据, 而不是一份随时被改写的活文档。
| 章 | 节 | 条目 |
|---|---|---|
| 一 报告说明 | 1.1 报告期与数据截止时点<br>1.2 纳管范围与变化<br>1.3 所依据的规则库版本<br>1.4 口径说明 | 1.2.1 本期新增纳管对象<br>1.2.2 本期退管对象<br>1.4.1 同口径与全口径 |
| 二 质量总览 | 2.1 全局质量分<br>2.2 域级质量分与评级<br>2.3 对象级质量分排名 | 2.3.1 评级为需改进与差的对象清单 |
| 三 构成分析 | 3.1 按维度<br>3.2 按业务域<br>3.3 按源系统<br>3.4 按规则 | 3.4.1 问题量前十五条规则 |
| 四 趋势分析 | 4.1 质量分趋势<br>4.2 问题量趋势<br>4.3 三种情形的区分 | 4.3.1 持续下降<br>4.3.2 整改后反弹<br>4.3.3 纳管范围变化导致的下降 |
| 五 根因分析 | 5.1 问题量前列规则的逐条归因<br>5.2 归因分布<br>5.3 归因指向的治理动作 | 5.3.1 转规则变更<br>5.3.2 转已知缺口<br>5.3.3 转整改 |
| 六 整改进展 | 6.1 问题单处置统计<br>6.2 超期与升级<br>6.3 复发统计<br>6.4 本月关闭的重点问题 | 6.2.1 超期十个工作日以上清单 |
| 七 已知缺口变化 | 7.1 本期新增缺口<br>7.2 本期转回整改的缺口<br>7.3 缺口对数据集可构造样本量的影响 | — |
| 八 下期重点整改清单与建议 | 8.1 下期重点整改清单<br>8.2 规则库调整建议<br>8.3 需求清单调整建议<br>8.4 对数据集加工的提示 | 8.4.1 低置信对象清单<br>8.4.2 样本量预期调整 |
| 附 | 附一 异常明细汇总表<br>附二 本期规则变更清单<br>附三 口径与计算式 | — |
第七章与第八章在月度报告中为简表,在季度报告中展开为完整章节,并增补两节: 季度质量评估结论(含维度权重与严重级设置的复核意见)、 需求清单目标值与达成期的复核结论。
每期报告的图表位置与形态固定,便于逐期对照。
| 编号 | 图表名称 | 形态 | 所在章节 |
|---|---|---|---|
| 表 1 | 纳管范围变化表 | 表格 | 1.2 |
| 表 2 | 全局与域级质量分及评级表 | 表格 | 2.1、2.2 |
| 表 3 | 评级为需改进与差的对象清单 | 表格 | 2.3.1 |
| 图 1 | 质量分六维度构成图 | 柱状 | 3.1 |
| 表 4 | 按业务域与源系统的问题量构成表 | 表格 | 3.2、3.3 |
| 表 5 | 问题量前十五条规则表 | 表格 | 3.4.1 |
| 图 2 | 近十二期质量分与问题量趋势图(含同口径与全口径两条线) | 折线 | 4.1、4.2 |
| 表 6 | 根因分布表 | 表格 | 5.2 |
| 表 7 | 问题单处置统计表 | 表格 | 6.1 |
| 表 8 | 超期十个工作日以上问题单清单 | 表格 | 6.2.1 |
| 表 9 | 已知缺口变化表 | 表格 | 7.1、7.2 |
| 表 10 | 下期重点整改清单 | 表格 | 8.1 |
下列内容为样例,章节结构、表格字段与口径说明为正式口径,数值为示意, 用于说明填写粒度。报告期取 2027 年 3 月。
报告期:2027-03-01 至 2027-03-31,数据截止 2027-03-31 24:00。 所依据的规则库版本:V1.3(2027-03-01 发布)。本期规则变更九条,见附二。
表 1 纳管范围变化(样例)
| 项 | 上期 | 本期 | 变化 | 说明 |
|---|---|---|---|---|
| 纳管数据对象数 | 214 | 231 | +17 | 新增质量管理域检验记录类对象 11 个、设备管理域测点配置类对象 6 个 |
| 启用规则条数 | 742 | 836 | +94 | 其中 86 条为本期观察期结束后转启用 |
| 观察期规则条数 | 128 | 96 | −32 | 86 条转启用,6 条回炉,新增 60 条入观察期 |
| 纳管数据元数 | 968 | 1046 | +78 | — |
口径说明:本期新增纳管对象的质量分自纳管次日起计入统计。 因新增对象普遍起点较低,第二章质量分同时给出同口径与全口径两个数值 (《数据质量管理办法》第十九条)。
表 2 全局与域级质量分及评级(样例)
| 业务域 | 本期全口径 | 本期同口径 | 上期 | 同口径变化 | 评级 | 上期评级 |
|---|---|---|---|---|---|---|
| 研发设计 | 76.4 | 78.1 | 76.9 | +1.2 | 中 | 中 |
| 生产制造 | 71.2 | 73.8 | 72.4 | +1.4 | 中 | 中 |
| 质量管理 | 63.8 | 68.2 | 67.1 | +1.1 | 需改进 | 需改进 |
| 仓储物流 | 79.6 | 80.3 | 78.9 | +1.4 | 良 | 中 |
| 采购管理 | 84.2 | 84.5 | 83.8 | +0.7 | 良 | 良 |
| 设备管理 | 69.5 | 72.6 | 71.3 | +1.3 | 需改进 | 中 |
| 营销管理 | 72.8 | 73.1 | 72.6 | +0.5 | 中 | 中 |
| 财务管理 | 91.3 | 91.4 | 91.0 | +0.4 | 优 | 优 |
| 人力资源 | 86.7 | 86.9 | 86.5 | +0.4 | 良 | 良 |
| 全局 | 74.1 | 76.3 | 75.2 | +1.1 | 中 | 中 |
本期须特别说明两处。设备管理域全口径评级由「中」降为「需改进」, 同口径分数实际上升 1.3 分;下降原因是本期新增六个测点配置类对象, 其量纲、量程、采样周期三项配置齐备率仅五成左右(规则 DQ-R-EQ-CP-0008)。 这属于纳管范围变化导致的下降,不是治理退步(第 4.3.3 节)。 质量管理域全口径与同口径相差 4.4 分,原因同上,新增十一个检验记录类对象的 缺陷类型码值化率偏低(规则 DQ-R-QM-VL-0001)。
表 3 评级为需改进与差的对象清单(样例,节选)
| 数据对象 | 承载系统 | 质量分 | 评级 | 最低维度 | 触发的管控动作 |
|---|---|---|---|---|---|
| 检验记录(缺陷明细) | 质量管理 | 54.2 | 差 | 有效性 36.1 | 附置信标记;逐批确认取数范围;入下季重点清单 |
| 测点配置表(新增六对象) | 物联网与设备数据平台 | 51.8 | 差 | 完整性 42.5 | 同上 |
| 焊接参数流 | 物联网与设备数据平台 | 58.9 | 差 | 完整性 31.4 | 同上;配对率列入样本量预期 |
| 工单工序(备料分厂) | 制造执行 | 66.3 | 需改进 | 及时性 48.7 | 附置信标记;入下季重点清单 |
| 热处理炉次 | 热处理群控 | 68.1 | 需改进 | 完整性 59.2 | 同上 |
| 项目记录(历史) | 客户关系管理 | 64.7 | 需改进 | 完整性 51.3 | 同上;历史部分转文档解析补充 |
图 A8-5 本期质量分六维度构成与问题量分布(样例,数值为示意)。 左图为全局六维度得分,按《数据质量管理办法》附表二权重加权前的原始维度分; 右图为本期新生成问题单量。 数据来源:本报告第 3.1 节与第 3.4 节;维度定义见招标文件第五章 3.2.6.1.1.2.6 第(1)项(b1290)。
两图合看可以得出本期的判断:及时性得分最低(64.3)但问题单量不是最多(246 件), 说明及时性问题集中在少数对象上——核对第 3.3 节,其中 187 件来自制造执行系统的 报工时延(规则 DQ-R-MF-TM-0005);完整性得分不是最低(72.1)但问题单量最多(516 件), 说明完整性问题分散在多个对象上,整改面广而每处量小。 两种形态的整改策略不同:前者集中力量解决一处,后者须靠录入规范与界面校验从源头收。
表 4 按业务域与源系统的问题量构成(样例,节选)
| 业务域 | 源系统 | 问题单量 | 涉及记录数 | 占本期问题单量 | 阻断级 | 告警级 |
|---|---|---|---|---|---|---|
| 生产制造 | 制造执行 | 412 | 186 734 | 23.8% | 96 | 316 |
| 质量管理 | 质量管理 | 338 | 94 512 | 19.5% | 74 | 264 |
| 设备管理 | 物联网与设备数据平台 | 286 | 1 243 806 | 16.5% | 62 | 224 |
| 研发设计 | 产品全生命周期管理 | 248 | 71 329 | 14.3% | 54 | 194 |
| 仓储物流 | 仓储管理与物流执行 | 164 | 38 207 | 9.5% | 38 | 126 |
| 采购管理 | 企业资源计划 | 98 | 12 448 | 5.7% | 16 | 82 |
| 营销管理 | 客户关系管理 | 82 | 4 136 | 4.7% | 8 | 74 |
| 人力资源 | 人力资源系统 | 54 | 3 921 | 3.1% | 10 | 44 |
| 财务管理 | 企业资源计划/财务 | 48 | 9 874 | 2.8% | 6 | 42 |
| 合计 | — | 1 730 | 1 664 967 | 100% | 364 | 1 366 |
口径说明:问题单量与涉及记录数是两个量,一个问题单可能涉及上万条记录 (《数据质量管理办法》第五十五条)。设备管理域问题单量居第三而涉及记录数最多, 是因为时序数据按测点与时间窗聚合,单个缺段问题单涉及的记录数以万计。 比较各域整改工作量时应看问题单量,比较数据影响面时应看涉及记录数。
表 5 问题量前十五条规则(样例,节选前八条)
| 排名 | 规则标识 | 规则名称 | 问题单量 | 涉及记录数 | 根因初判 | 责任部门 |
|---|---|---|---|---|---|---|
| 1 | DQ-R-MF-TM-0005 | 报工在班次结束后约定时限内到达 | 187 | 62 418 | R1 录入不规范 | 备料加工分厂等 |
| 2 | DQ-R-QM-VL-0001 | 缺陷类型在码表内(新增记录) | 164 | 28 936 | R1 录入不规范 | 质量管理归口部门 |
| 3 | DQ-R-EQ-TM-0002 | 秒级采样测点无超约定时长缺段 | 142 | 986 203 | R3 接口缺陷 | 设备管理归口部门 |
| 4 | DQ-R-RD-CP-0004 | 已签发图纸存在对应工艺卡片 | 118 | 41 672 | R7 历史遗留 | 工艺研究分院 |
| 5 | DQ-R-MF-CP-0003 | 工单工序设备编码非空 | 96 | 23 841 | R1 录入不规范 | 生产管理部 |
| 6 | DQ-R-WH-CS-0002 | 库存数量三方一致 | 88 | 14 206 | R2 流程缺环 | 仓储归口部门 |
| 7 | DQ-R-QM-CP-0005 | 热处理炉次存在对应检验结论 | 74 | 9 318 | R2 流程缺环 | 热处理分厂 |
| 8 | DQ-R-EQ-CP-0008 | 已接入测点三项配置齐备 | 68 | 412 | R6 源头不可得 | 设备管理归口部门 |
前八条规则贡献了本期问题单量的 54.2%。这个集中度是质量治理的常态: 问题通常高度集中于少数字段(《数据质量管理办法》第四十八条)。 本期的整改资源按此排序投放,前四条进入下月重点整改清单。
图 A8-6 近十二期全局质量分与问题单量趋势(样例,数值为示意)。 实线为同口径质量分,虚线为全口径质量分,点线为问题单量(右轴)。 数据来源:本报告第 4.1 节与第 4.2 节;同口径与全口径的定义见《数据质量管理办法》第十九条。
本期趋势属第三种情形(纳管范围变化导致的下降)。同口径质量分连续十二期上行, 从 60.7 升至 76.3;全口径本期下行 0.6 分,原因是新增十七个纳管对象。 问题单量在前六期上升、后六期趋平:上升段是规则库逐批启用的结果, 不是数据变差;趋平段说明新启用规则带来的新增问题量与整改关闭量大致相当。
一条口径提醒:问题单量不是越少越好。规则库启用初期问题单量必然上升, 此时问题单量下降往往说明规则被停用或阈值被放宽,而不是数据变好。 因此本报告的趋势章节一律把问题单量与「本期启用规则条数」并列呈现(表 1)。
表 6 根因分布(样例)
| 根因代码 | 根因分类 | 问题单量 | 占比 | 对应治理动作 | 计入关闭率分母 |
|---|---|---|---|---|---|
| R1 | 录入不规范 | 586 | 33.9% | 界面必填校验、下拉替代文本、填写指引与培训 | 是 |
| R2 | 流程缺环 | 312 | 18.0% | 补流程节点、把线下动作纳入系统 | 是 |
| R3 | 接口缺陷 | 268 | 15.5% | 接口改造、增量水位线校正、补数机制 | 是 |
| R4 | 标准缺失 | 164 | 9.5% | 补数据元或指标标准、建立映射 | 是 |
| R5 | 规则不当 | 98 | 5.7% | 规则回炉修改或降级 | 否 |
| R6 | 源头不可得 | 182 | 10.5% | 评估采集可行性;不可得的登记已知缺口 | 否 |
| R7 | 历史遗留 | 120 | 6.9% | 分批清洗或仅做映射标记 | 否 |
| 合计 | — | 1 730 | 100% | — | 1 330 计入 |
本期归因为 R5 的九十八件,已按《数据质量管理办法》第三十六条提交规则变更: 六条规则回炉修改并重新入观察期,三条降级为告警,见附二。 归因为 R6 与 R7 的三百零二件中,二百一十四件转已知缺口,八十八件排入分批清洗计划。
表 7 问题单处置统计(样例)
| 项 | 阻断级 | 告警级 | 合计 |
|---|---|---|---|
| 期初未结 | 42 | 386 | 428 |
| 本期新增 | 364 | 1 366 | 1 730 |
| 本期关闭 | 352 | 1 024 | 1 376 |
| 期末未结 | 54 | 728 | 782 |
| 转已知缺口 | 18 | 196 | 214 |
| 按期关闭率(剔除已知缺口后) | 94.1% | 72.6% | 76.8% |
| 复发件数 | 26 | 148 | 174 |
| 复发率 | 7.4% | 14.5% | 12.6% |
| 超期未结(≥10 工作日) | 6 | 62 | 68 |
口径说明三条。第一,按期关闭率的分母已剔除转入已知缺口的二百一十四件 (《数据质量管理办法》第六十二条)。第二,复发率的分子为本期新增问题单中 标记为复发的件数,分母为本期新增问题单量;复发率比关闭率更能说明整改是否触及根因 (同办法第六十一条)。第三,阻断级按期关闭率高于告警级,是因为阻断级问题拦住了 数据流转,业务部门有直接动力处理;告警级问题不影响日常业务,容易被推后。
表 8 超期十个工作日以上问题单清单(样例,节选)
| 问题单号 | 规则标识 | 检查对象 | 严重级 | 分派日期 | 超期工作日 | 责任部门 | 升级状态 |
|---|---|---|---|---|---|---|---|
| DQ-I-2027-001842 | DQ-R-MF-CP-0003 | 工单工序(备料分厂) | 阻断 | 2027-02-18 | 21 | 备料加工分厂 | 已报工作组 |
| DQ-I-2027-001907 | DQ-R-WH-CS-0002 | 库存三方比对 | 阻断 | 2027-02-24 | 17 | 仓储归口部门 | 已报工作组 |
| DQ-I-2027-002015 | DQ-R-QM-CP-0005 | 热处理炉次 | 阻断 | 2027-03-02 | 12 | 热处理分厂 | 已报工作组 |
| DQ-I-2027-001766 | DQ-R-EQ-CP-0008 | 测点配置表 | 阻断 | 2027-02-10 | 27 | 设备管理归口部门 | 已报委员会 |
| DQ-I-2027-002103 | DQ-R-RD-CP-0004 | 图纸与工艺卡配对 | 告警 | 2027-03-05 | 10 | 工艺研究分院 | 已催办 |
升级不替代整改,升级后时限继续计算(《数据质量管理办法》第六十条)。 本清单在月度例会上点名到部门,不点名到个人(同办法第七十条)。
表 9 已知缺口变化(样例)
| 缺口编号 | 缺口内容 | 本期变化 | 对数据集可构造样本量的影响 | 复评结论 |
|---|---|---|---|---|
| DQ-G-001 | 焊接参数流与工件、焊道无对应 | 配对率由 4.6% 升至 7.2% | 焊接过程控制类监督样本可构造量按配对率折算 | 维持缺口,待时间基准统一后复评 |
| DQ-G-002 | 报警事件与维修事实无配对 | 配对率由 8.9% 升至 9.4% | 装备健康诊断类样本标签来源受限 | 维持缺口,待服务工单与运维平台打通后复评 |
| DQ-G-003 | 纸质无损检测报告未数字化 | 无变化 | 质量类数据集缺少无损检测结果通道 | 维持缺口,数字化不属本包范围 |
| DQ-G-004 | 历史选型记录接口参数无电子留痕 | 无变化 | 选型类样本以文档解析为主要来源 | 维持缺口,新增记录按规则管控 |
| DQ-G-005 | 部分车间设备未联网 | 本期新增 | 制造过程类时序样本的车间覆盖有限 | 新增登记,采集范围扩展计划另议 |
表 10 下期重点整改清单(样例,节选)
| 序 | 整改事项 | 对应规则 | 责任部门 | 根因 | 要求完成 | 预期影响 |
|---|---|---|---|---|---|---|
| 1 | 报工时限管理:明确各班次报工时限并在界面增加提醒 | DQ-R-MF-TM-0005 | 生产管理部、备料加工分厂 | R1 | 2027-04-30 | 生产制造域及时性维度分预期上升 |
| 2 | 缺陷类型码值化:缺陷描述改为下拉选择+备注 | DQ-R-QM-VL-0001 | 质量管理归口部门 | R1、R4 | 2027-05-31 | 质量管理域有效性维度分预期上升 |
| 3 | 测点采集通道稳定性:排查缺段测点并修复 | DQ-R-EQ-TM-0002 | 设备管理归口部门 | R3 | 2027-04-30 | 设备管理域及时性维度分预期上升 |
| 4 | 图纸与工艺卡配对:按产品线分批建立配对关系 | DQ-R-RD-CP-0004 | 工艺研究分院 | R7 | 2027-06-30(首批) | 工艺设计类数据集可构造样本量预期上调 |
| 5 | 工单设备编码补录:外协工序标识先行完善 | DQ-R-MF-CP-0003 | 生产管理部 | R1 | 2027-04-30 | 制造过程类样本的设备维度可用性提升 |
第 8.4 节对数据集加工的提示(样例)。 本期有三项提示。 一是低置信对象清单新增六个测点配置类对象与十一个检验记录类对象, 涉及这些对象的加工批次须附置信标记并逐批确认取数范围(表 3)。 二是焊接参数流配对率升至 7.2%,焊接过程控制类监督样本的可构造量预期 按新配对率上调,具体数值由加工侧核算。 三是报工时延整改在四月完成后,制造过程类数据集中与节拍、工时相关的样本 建议在五月之后重新取数,四月前已加工批次在数据卡中注明报工时延实测分布。
季度报告在月度报告八章的基础上增补两节。
季度质量评估结论。 内容包括:域级与全局质量分的季度值; 维度权重设置的复核意见(权重是否仍反映各域的质量短板); 规则严重级设置的复核意见(是否有规则长期零触发或长期大量触发); 规则库覆盖率的季度变化。复核意见提交数据治理委员会审定。
需求清单目标值与达成期的复核结论。 逐条复核:实测值是否已更新; 目标值与达成期是否仍合理;优先级是否需调整;已达成的诉求是否转为常态监控; 无法达成的诉求是否转为已知缺口(《数据质量管理办法》第二十六条)。
长期零触发的规则须专门说明。零触发有两种可能:数据确实没问题, 或规则写错了根本没在检查。两者的区别靠在样本数据上注入已知错误验证, 验证不通过的规则回炉。这项检查每季做一次,不做的话规则库里会积累 一批「看起来在跑、其实什么也没查」的规则。
同口径与全口径两条线是为甲方的分期纳管节奏设的。 甲方的数据对象 按季度滚动纳管,纳管顺序大体是从数据质量较好的企业资源计划系统, 到新上线的质量管理系统,再到采集覆盖有限的设备侧。 按这个顺序纳管,全口径质量分在中后期必然阶段性下行。 如果报告只给一个数字,治理工作会在第三、第四季度被误判为退步。
问题单量与涉及记录数分列,是为时序数据设的。 设备时序数据按测点与时间窗聚合, 一个缺段问题单涉及的记录数以万计;而一条工单填写问题只涉及一条记录。 两者用同一个指标比较,会得出「设备问题最严重」的错误结论—— 实际整改工作量以问题单量衡量更准确。
对数据集加工的提示单列一节。 这是本报告与通用数据质量报告最大的不同。 通用报告的读者是治理部门与业务部门,本报告还有第三类读者:数据集加工环节。 配对率变化、低置信对象变化、整改完成时点,都会直接改变加工侧的排产与样本量预期。 第 8.4 节把这些信息集中给出,使加工侧不必自己从全文中筛。
单期报告的评审。 月度报告由数据质量管理员编制,在月度例会由数据治理工作组审定, 审定意见记入会议纪要;季度报告另经数据治理委员会审定。 报告一经出具不修改,发现数据有误的出补充说明并在下期更正(第 5.2 节)。
模板的修订。 模板按年修订一次,并在下列情形下临时修订: 质量维度权重或评级门限调整;规则库结构发生较大变化; 甲方对报告形式提出新要求;连续两期发现某章节无内容可填或信息重复。 模板修订由数据质量管理员提出、数据治理工作组核定。
修订的下游通知。 模板修订后须通知报告的三类读者(业务域数据管理员、 责任部门、数据集加工环节),并更新平台中报告自动生成模块的取数配置。 取数配置不同步更新,会出现模板已改而报告内容仍按旧章节输出的情形。
每期报告附三份附表。附表与正文的分工是:正文给判断,附表给明细与算法。 评委与甲方读正文即可掌握本期状况;责任部门与数据集加工环节需要明细时查附表。
异常明细汇总表按问题单汇总,每条问题单一行;问题记录的业务主键清单 不在本表展开,而在台账附表 3.1 中按问题单号查(《质量问题整改台账》第 6.3 节)。 本表的作用是让责任部门在一张表里看到「本月归我整改的有哪些、各涉及多少记录」。
| 字段 | 说明 |
|---|---|
| 问题单号 | 引用台账字段 1 |
| 规则标识与版本 | 引用台账字段 4、5 |
| 检查对象与字段 | — |
| 质量维度 | — |
| 严重级 | — |
| 实测值/期望值 | 对照呈现,如「非空率 84.3%/≥95%」 |
| 涉及记录数与计量单位 | 两列分列,计量单位不同的不相加 |
| 责任部门 | — |
| 要求完成日期 | — |
| 状态 | 待分派/待整改/待复核/已退回/已关闭 |
| 本期是否新增 | Y/N;为 N 的为上期结转 |
样例(节选,与第 5.5 节同期,数值为示意):
| 问题单号 | 规则标识·版本 | 检查对象·字段 | 维度 | 严重级 | 实测值/期望值 | 涉及记录数 | 计量单位 | 责任部门 | 要求完成 | 状态 | 新增 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| DQ-I-2027-001842 | DQ-R-MF-CP-0003·V1.1 | 工单工序·设备编码 | 完整性 | 阻断 | 84.3%/≥95% | 3 416 | 记录 | 备料加工分厂 | 2027-02-25 | 待整改 | N |
| DQ-I-2027-002015 | DQ-R-QM-CP-0005·V1.0 | 热处理炉次→检验记录 | 完整性 | 阻断 | 72.6%/≥92% | 1 206 | 比对项 | 热处理分厂 | 2027-03-08 | 待整改 | Y |
| DQ-I-2027-002117 | DQ-R-EQ-TM-0002·V1.2 | 设备时序·时间戳 | 及时性 | 阻断 | 缺段 14 处/≤3 处 | 86 420 | 记录 | 设备管理归口部门 | 2027-03-13 | 已关闭 | Y |
| DQ-I-2027-002142 | DQ-R-EQ-AC-0003·V1.1 | 设备时序·振动测点值 | 准确性 | 告警 | 恒值 1 测点/0 | 12 | 测点 | 设备管理归口部门 | 按月清单 | 已关闭 | Y |
| DQ-I-2027-002166 | DQ-R-QM-VL-0001·V1.3 | 检验记录·缺陷类型 | 有效性 | 告警 | 31.7%/≥90% | 6 318 | 记录 | 质量管理归口部门 | 按月清单 | 待整改 | Y |
表中第二行与第四行的计量单位分别为「比对项」与「测点」, 与其余行的「记录」不同,三者不相加(《数据质量校验规则库》第 4.5 节字段 11)。 汇总行按计量单位分组给出小计,不给总计。
规则变更清单格式固定为七列(《数据质量校验规则库》第 4.15 节)。
| 规则标识 | 变更类型 | 变更前 | 变更后 | 变更原因 | 对历史可比性的影响 | 核定记录 |
|---|---|---|---|---|---|---|
| DQ-R-PU-CS-0003 | 参数变更 | 比对范围不排除调价生效日 | 排除调价生效日前后各一个工作日 | 误报:问题单 DQ-I-2027-002238 经确认为正常期间调价 | 本规则历史通过率偏低,趋势图中标注变更点 | 2027-03 月度例会 |
| DQ-R-MF-TM-0005 | 阈值变更 | 超时率 ≤ 20% | 超时率 ≤ 15% | 分期上调第二期,按标定记录计划执行 | 问题量将上升,趋势分析中按同口径与新口径分列 | 2027-03 月度例会 |
| DQ-R-QM-VL-0001 | 参数变更 | 适用全部记录 | 适用录入日期在系统上线后的记录 | 历史自由文本记录按现行码表判定会整批不通过 | 历史通过率不可比,基线重取 | 2027-03 月度例会 |
| DQ-R-EQ-AC-0003 | 参数变更 | 恒值判定参数全测点统一 | 按测点类型分组配置 | 温度测点保温段本就恒定,统一参数误报率高 | 影响有限,不重取基线 | 2027-03 月度例会 |
| DQ-R-XD-CS-0004 | 严重级变更 | 提示(观察期) | 告警 | 观察期结束,误报率收敛 | 新启用,无历史可比问题 | 2027-03 月度例会 |
| DQ-R-MF-CS-0013 | 规则修改 | 工序序号连续性判定未排除工艺变更 | 排除工艺路线版本变更的工单 | 误报率 18.6%,高于约定水平,回炉修改 | 重新入观察期,本期不计分 | 2027-03 月度例会 |
「对历史可比性的影响」这一列是本清单的要点。阈值或适用范围一变, 该规则的历史通过率就不再可比;不在清单里写明,趋势图上的拐点无人能解释, 几期之后连编制人自己也说不清是治理起效还是口径变了。 影响显著的在趋势图上标注变更点(第 5.5.4 节图 A8-6 的做法)。
本附表给出报告中全部指标的计算式。计算式在本处定义,正文与其余附表只引用不重复定义。
| 指标 | 计算式 | 口径要点 |
|---|---|---|
| 规则级通过率 | 通过检查的计量单位数 ÷ 被检查的计量单位数 | 计量单位取规则元数据字段 11;观察期规则不计入 |
| 维度得分 | Σ(该维度下各规则通过率 × 严重级权重)÷ Σ严重级权重 × 100 | 严重级权重:阻断 3、告警 2、提示 1;提示级不计分故实际只取 3 与 2 |
| 对象级质量分 | Σ(维度得分 × 维度权重) | 维度权重取《数据质量管理办法》附表二;某维度无规则时权重按比例分摊至其余维度并注明 |
| 域级质量分 | Σ(对象质量分 × 业务重要度权重)÷ Σ业务重要度权重 | 重要度权重:高 3、中 2、低 1 |
| 全局质量分 | Σ(域级质量分 × 域贡献度权重)÷ Σ域贡献度权重 | 贡献度权重按四类数据集取数来源构成核定,逐季复核 |
| 同口径质量分 | 按上期纳管范围重新核算的质量分 | 仅计入上期已纳管对象 |
| 全口径质量分 | 按本期纳管范围核算的质量分 | 含本期新增纳管对象 |
| 按期关闭率 | 本期按期关闭件数 ÷(本期新增问题单量 − 转已知缺口件数 − 规则误报撤单件数) | 分母剔除两类(《质量问题整改台账》第 6.7 节) |
| 总关闭率 | 本期关闭件数 ÷ 同上分母 | 不计时限 |
| 复发率 | 本期新增问题单中复发标志为 Y 的件数 ÷ 本期新增问题单量 | 复发判定见《数据质量管理办法》第六十一条 |
| 超期率 | 超出要求完成日期仍未关闭的件数 ÷ 期末未结件数 | 责任待定期间不计超期 |
| 误报率 | 经确认的误报次数 ÷ 该规则本期触发次数 | 按规则单独统计,不汇总为全局误报率 |
| 配对率 | 可配对的记录对数 ÷ 应配对的记录数 | 单边缺失计入分母不计入分子 |
| 规则覆盖率 | 已有至少一条规则的数据元数 ÷ 纳管数据元总数 | 未覆盖者逐条列明原因 |
三条口径须特别注意,它们是报告最容易被误读的地方。
维度得分不含提示级规则。 提示级规则(含观察期规则)不计分, 因此某维度下若全部规则都在观察期,该维度得分为空而非零; 得分为空时按对象级质量分的权重分摊规则处理,并在报告中注明。 把空当成零会把正在建设规则的维度算成质量最差的维度。
误报率不汇总为全局值。 误报率按规则单独统计。 全局误报率看起来是个简洁的指标,但它把一条高频规则的少量误报 与一条低频规则的大量误报混成一个数,而后者才是需要回炉的。 观察期的判定依据是单条规则的误报率(《数据质量校验规则库》第 4.8 节)。
配对率的分母是「应配对的记录数」,不是「两侧记录数之和」。 单边缺失计入分母而不计入分子,这是为了让配对率真实反映「有多少能配上」。 分母取两侧之和会让配对率在两侧记录数差别大时严重失真。
《数据质量管理办法》第五十二条把质量监控评估分日、月、季三个节奏, 其中月节奏的产出是本报告,季节奏的产出是季度报告,日节奏的产出是质量看板。 看板不是报告的简化版,二者的读者与用途不同:报告给判断与排期, 看板给当下状态与即时推送。看板的规格在此一并给出,因为它与报告共用同一套指标与口径。
看板最小粒度到数据对象与规则(《数据质量管理办法》第五十二条)。按读者分四个视图。
| 视图 | 读者 | 内容 | 刷新 |
|---|---|---|---|
| 全局视图 | 数据治理工作组 | 全局与九域质量分、本日新增问题单量、阻断级未结数、超期数 | 随稽核任务完成 |
| 业务域视图 | 业务域数据管理员 | 本域各对象质量分与评级、本域未结问题单按严重级与时限分组、本域本月整改进展 | 同上 |
| 责任部门视图 | 各责任部门 | 归本部门的未结问题单清单、要求完成日期、逾期提醒 | 同上 |
| 加工支撑视图 | 数据集加工环节 | 低置信对象清单、各配对关系的当前配对率、本日阻断级拦截量与拦截对象 | 同上 |
第四个视图是本项目专设的。数据集加工在排产与取数前需要知道两件事: 哪些对象现在是低置信的、各配对关系的配对率是多少。 这两项数据在月度报告中按月给出(第 8.4 节),但加工批次不按月排—— 因此看板须提供当日值。
| 触发条件 | 推送对象 | 推送内容 |
|---|---|---|
| 阻断级问题单生成 | 责任部门、业务域数据管理员 | 问题单号、规则、对象、涉及记录数、要求完成日期 |
| 阻断级问题单超期 | 同上,并抄送数据治理工作组 | 问题单号、超期工作日、升级状态 |
| 稽核任务连续失败达约定次数 | 系统运维责任人、数据质量管理员 | 任务标识、失败原因、最近成功时间 |
| 某对象质量分跌破评级门限 | 业务域数据管理员、数据质量管理员 | 对象、本期分数、上期分数、最低维度 |
| 配对率单日变动超约定幅度 | 数据集加工环节 | 配对关系、变动前后值、可能原因 |
| 单批次排除比例超约定水平 | 数据质量管理员、数据治理工作组 | 批次号、排除比例、涉及源对象 |
最后一条对应《数据质量管理办法》第六十六条: 单批次排除比例超约定水平时暂停该批次加工并提交工作组, 因为这通常说明源数据存在系统性问题而非个别错误。 这条推送不能等到月度报告,等到月报时该批次已经加工完了。
推送不等于催办。 推送只负责让该知道的人当天知道; 催办、升级与报委员会是台账中的升级状态字段驱动的流程 (《数据质量管理办法》第六十条)。两者分开,是为避免推送本身被当作已催办。
看板与报告的指标计算式同源,一律取第 5.9.3 节的定义,看板不另设算法。 二者允许出现的差异只有一种:时点差异。看板为当日值,报告为报告期值, 跨月的问题单在看板上计入当日未结、在报告中计入上期结转。 报告的第 1.1 节须注明数据截止时点,使二者的差异可解释。
不允许出现的差异有两种,项目期须在平台配置上排除: 一是口径差异(看板用总关闭率、报告用按期关闭率而都标为「关闭率」); 二是范围差异(看板含观察期规则、报告不含)。两类差异一旦出现, 业务部门会看到两个关闭率而无从判断哪个是真的,治理工作的公信力随之下降。
质量分析报告是本附件五份文档中唯一对外呈送的一份:它要提交给数据治理委员会,并作为考核与整改排期的依据。因此它的分工重点在「谁对报告里的结论负责」,而不只是谁来写。下表逐项列明。代码含义与本附件 2.6 一致。
表 A8-18 《质量分析报告》职责矩阵
| 序 | 动作 | 数据治理委员会 | 数据治理工作组 | 数据质量管理员 | 业务域数据管理员 | 我方项目组 |
|---|---|---|---|---|---|---|
| 1 | 报告模板与固定图表清单的确定 | 审 | 批 | 执 | 签 | 拟 |
| 2 | 评估方案与维度权重的引用 | 批 | 审 | 执 | 签 | 配 |
| 3 | 数据的取数与指标计算 | — | 督 | 审 | — | 执 |
| 4 | 构成分析与趋势分析的编写 | — | 审 | 审 | 配 | 拟 |
| 5 | 根因分析结论的形成 | — | 审 | 批 | 签 | 拟 |
| 6 | 对比分析的口径与可比性说明 | — | 审 | 批 | 签 | 拟 |
| 7 | 问题清单与整改建议的提出 | — | 审 | 审 | 签 | 拟 |
| 8 | 整改责任方与时限的指派 | — | 批 | 拟 | 签 | 配 |
| 9 | 月度报告的签发 | — | 批 | 拟 | 配 | 执 |
| 10 | 季度报告增补章节的编写 | 审 | 批 | 拟 | 签 | 拟 |
| 11 | 报告向决策层的呈送与通报 | 审 | 执 | 配 | 配 | 配 |
| 12 | 质量看板的维护与日节奏发布 | — | 督 | 审 | 配 | 执 |
| 13 | 报告附表的填写与留存 | — | 督 | 审 | 配 | 执 |
| 14 | 口径变更对历史报告可比性的说明 | 审 | 批 | 拟 | 签 | 执 |
第 5 行与第 6 行把「批」放在数据质量管理员而把「签」放在业务域数据管理员,这一组合对应的是根因分析最容易出偏差的地方:数据上看得出某个字段的不合格率在某月突然上升,看不出那个月业务上发生了什么。少了业务侧的签认,根因分析会停在「该字段录入质量下降」这一层,而真实原因可能是那个月换了一套作业流程。结论写到哪一层,决定了整改建议有没有用。
责任边界按下列三条划定。
其一,报告中的数值由我方项目组按已核定的口径计算并对计算过程负责;数值所反映的业务原因由业务侧确认。我方不在未经业务确认的情况下把统计相关性写成因果结论。
其二,整改责任方与时限的指派由甲方作出。我方项目组提出建议并在报告中列明依据,不代行指派;被指派方对指派有异议的,按本办法第二章的争议处理条款解决。
其三,报告一经签发不回改。口径或权重在其后发生变更的,在下一期报告中说明变更内容与对历史数据可比性的影响,并在受影响的历史报告索引中标注所依据的口径版本,不修改已签发的报告正文。
分析报告每期一份,附表随之每期一套。这类按期产出的附件最容易出现两种归档失误:一种是只留最新一期,一种是把各期附表混在一起而不标期次。两者都会使趋势分析失去依据——第七章要求的四种分析方法里有三种要跨期比较。下表给出本报告项下各附表与配套记录的维护责任、更新触发与保存规则。保存期限一栏不直接写年限:年限取决于甲方档案管理制度与法定最低年限,二者孰长从长,本表给出的是定年限的规则。
表 A8-22 《质量分析报告》附表索引与保存规则
| 编号 | 附表名称 | 性质 | 维护方 | 审批方 | 更新触发 | 保存期限的确定规则 |
|---|---|---|---|---|---|---|
| 附一 | 异常明细汇总表 | 规范性 | 我方项目组 | 数据质量管理员 | 每期出具 | 按期归档,逐期留存不覆盖;本表按问题单汇总,其明细在台账附表 3.1 中按问题单号查,两者的保留期取较长者 |
| 附二 | 本期规则变更清单 | 规范性 | 我方项目组 | 数据质量管理员 | 每期出具 | 按期归档;变更涉及阈值的,与规则库附表四的标定记录互相引用,两者不得只留其一 |
| 附三 | 口径与计算式 | 规范性 | 我方项目组 | 数据治理工作组 | 每期出具,口径调整时更新 | 按期归档;口径调整的期次保留调整前后两版计算式,并写明适用期次区间 |
| 附四 | 固定图表清单与图表源数据 | 规范性 | 我方项目组 | 数据质量管理员 | 每期出具 | 随对应期次的报告留存;图表源数据与图一并保存,不只存图 |
| 附五 | 季度报告增补章节的支撑数据 | 规范性 | 我方项目组 | 数据治理工作组 | 每季度出具 | 随对应季度报告留存至下一次年度复核结束 |
| 附六 | 质量看板的日节奏取数记录 | 资料性 | 我方项目组 | — | 每日生成 | 按月汇总归档;看板数值与当月报告正文不一致的,保留差异说明 |
| 附七 | 报告评审意见与处理表 | 规范性 | 评审组织方 | 数据治理工作组 | 每期评审 | 随对应期次的报告留存,保留每一轮而不是只留最终版 |
| 附八 | 本报告模板修订记录表 | 规范性 | 我方项目组 | 数据治理工作组 | 模板版本变更 | 置于报告模板之后,与模板同寿,不可删行、不重排序号 |
附三的保存规则写明「保留调整前后两版计算式,并写明适用期次区间」,这一条是本表中唯一涉及期次区间的。质量分的计算式一旦调整,调整前后两段的分值不可直接连成一条趋势线;读近十二期趋势图的人若不知道中间换过算法,会把算法变化读成质量变化。把适用期次区间写在附表上,是让这件事在看图的同时就能被发现,而不必去翻历次报告的正文。
附六的保留要求低于其余各件,但多了一条「保留差异说明」。看板按日取数,报告按期取数,两者的统计截止时点不同,数值有出入是正常的;出入本身不必追究,但不作说明就会在月度例会上被反复提起。一次性写清差异的来源,比每月解释一次省力。
| 项 | 内容 |
|---|---|
| 文件名称 | 《矿山装备制造领域高质量数据集建设项目数据质量问题整改台账》 |
| 文档编号 | GHY26691-GV-06-0005-V1.0 |
| 版本号 | V1.0(台账结构版本) |
| 文件性质 | 台账。以结构化记录形式存放于数据治理开发工具平台质量管理模块,按月导出一版,按季导出盖章纸质件归档 |
| 记录粒度 | 一条记录=一个问题单,自上报生成至归档关闭全程留痕 |
| 维护 | 数据质量管理员(分派、复核、归档);责任部门(整改环节字段) |
| 保存期限 | 不少于项目建设期加质保期,且不短于甲方档案管理规定的期限(《数据质量管理办法》第六条) |
| 依据文件 | 《数据质量管理办法》第八章及附表五、附表六 |
本台账适用于全部质量问题单,包括稽核任务自动生成的与业务人员手工提报的 (《数据质量管理办法》第五十五条)。数据集加工环节的加工质量问题不进本台账, 分界见同办法第六十三条。
生效条件一条:问题单的分派须以「责任部门已确认」为前提, 责任部门未确认的数据对象不得分派问题单(《数据质量需求清单》第 3.2 节)。 无责任部门的问题单会长期挂起并污染关闭率统计。
台账不可编辑已归档记录。 归档后的问题单不可编辑,如需重开则新建问题单 并标注关联原问题单号(同办法第五十九条)。这是台账作为整改证据的前提。
| 章 | 节 | 条目 |
|---|---|---|
| 一 台账说明 | 1.1 记录粒度与聚合规则<br>1.2 字段定义与取值域<br>1.3 状态流转<br>1.4 统计口径 | 1.1.1 按规则+对象+周期聚合<br>1.4.1 问题单数与记录数<br>1.4.2 关闭率分母<br>1.4.3 复发率 |
| 二 台账主表 | 2.1 按业务域分表<br>2.2 按状态分视图 | 2.2.1 未结视图<br>2.2.2 超期视图<br>2.2.3 复发视图 |
| 三 附表 | 3.1 问题记录主键清单(子表)<br>3.2 整改措施明细(子表)<br>3.3 复核记录(子表)<br>3.4 已知缺口清单 | — |
| 四 统计报表 | 4.1 月度处置统计<br>4.2 按根因统计<br>4.3 按责任部门统计<br>4.4 复发统计 | — |
| 五 维护记录 | 5.1 台账结构变更记录<br>5.2 统计口径变更记录 | — |
表 A8-10 整改台账主表字段总表
| 序 | 字段名 | 必填 | 填写环节 | 数据类型 | 取值域或格式 |
|---|---|---|---|---|---|
| 1 | 问题单号 | 是 | 上报 | 字符 | DQ-I-<年份>-<六位序号> |
| 2 | 发现日期 | 是 | 上报 | 日期 | YYYY-MM-DD |
| 3 | 来源 | 是 | 上报 | 枚举 | 稽核自动/业务提报/错样归因回流 |
| 4 | 规则标识 | 条件必填 | 上报 | 字符 | 引用规则库;业务提报可空 |
| 5 | 规则库版本 | 条件必填 | 上报 | 字符 | 生成本单时所依据的规则库版本 |
| 6 | 业务域 | 是 | 上报 | 枚举 | 九域之一 |
| 7 | 数据对象 | 是 | 上报 | 字符 | 《数据资源目录》登记对象 |
| 8 | 承载系统 | 是 | 上报 | 枚举 | 见需求清单字段 4 取值域 |
| 9 | 质量维度 | 条件必填 | 上报 | 枚举 | 六维度之一;取自规则元数据 |
| 10 | 严重级 | 是 | 上报 | 枚举 | 阻断/告警/提示 |
| 11 | 问题描述 | 是 | 上报 | 文本 | 实测值与期望值对照 |
| 12 | 涉及记录数 | 是 | 上报 | 整数 | 本单聚合的不通过记录数 |
| 13 | 记录主键清单 | 是 | 上报 | 引用子表 | 指向附表 3.1 |
| 14 | 计量单位 | 是 | 上报 | 枚举 | 记录/比对项/检查项/测点/批次 |
| 15 | 责任部门 | 是 | 分派 | 字符 | 甲方部门名称 |
| 16 | 责任人 | 是 | 分派 | 字符 | 【岗位或姓名由甲方填写】 |
| 17 | 分派日期 | 是 | 分派 | 日期 | YYYY-MM-DD |
| 18 | 要求完成日期 | 是 | 分派 | 日期 | 按附表五时限计算 |
| 19 | 责任待定标志 | 否 | 分派 | 枚举 | Y/N;为 Y 时时限暂停 |
| 20 | 根因分类 | 是 | 整改 | 枚举 | R1—R7(见附表六) |
| 21 | 整改措施 | 是 | 整改 | 文本+引用子表 | 指向附表 3.2 |
| 22 | 是否需系统改造 | 是 | 整改 | 枚举 | Y/N;为 Y 时时限按改造排期另定 |
| 23 | 改造排期编号 | 条件必填 | 整改 | 字符 | 字段 22 为 Y 时必填 |
| 24 | 整改完成日期 | 条件必填 | 整改 | 日期 | — |
| 25 | 复核结论 | 条件必填 | 复核 | 枚举 | 通过/不通过 |
| 26 | 复核日期 | 条件必填 | 复核 | 日期 | — |
| 27 | 退回次数 | 是 | 复核 | 整数 | 默认 0;≥2 时提交工作组 |
| 28 | 关闭原因 | 条件必填 | 归档 | 枚举 | 整改完成/转已知缺口/规则误报撤单/对象已退管 |
| 29 | 关闭日期 | 条件必填 | 归档 | 日期 | — |
| 30 | 派生修订 | 否 | 归档 | 字符 | 派生的规则标识或标准编号 |
| 31 | 复发标志 | 是 | 上报 | 枚举 | Y/N |
| 32 | 原问题单号 | 条件必填 | 上报 | 字符 | 字段 31 为 Y 时必填 |
| 33 | 超期工作日 | 是 | 自动 | 整数 | 由平台按要求完成日期计算 |
| 34 | 升级状态 | 否 | 自动/手工 | 枚举 | 未升级/已催办/已报工作组/已报委员会 |
| 35 | 状态 | 是 | 自动 | 枚举 | 待分派/待整改/待复核/已退回/已关闭 |
字段 5「规则库版本」与字段 14「计量单位」是本台账专门增设的两项。 前者使问题单的判定依据可追溯:半年后回看某条问题单,能知道当时按哪一版规则、 哪个阈值判定的。后者使统计时不把记录数与比对项数混算(第 4.5 节)。
同一规则、同一检查对象、同一稽核周期内的不通过记录聚合为一个问题单 (《数据质量管理办法》第五十五条)。聚合的理由与边界如下。
不聚合的后果是,一次全量扫描会产生上万个问题单,台账失去可管理性, 分派、复核、统计都无法进行。聚合的边界是「同一整改动作能否一次完成」: 同一规则同一对象的不通过记录,其根因与整改措施通常相同,一次补录或一次接口修复即可覆盖。
三种情形不聚合,单独成单:第一,业务人员手工提报的问题,一事一单; 第二,归因结论不同的记录,在整改环节拆单(如同一规则下部分记录是录入问题、 部分是接口问题,拆为两单分别分派); 第三,责任部门不同的记录,按责任部门拆单。
拆单时原问题单状态置为「已关闭」,关闭原因填「整改完成」或「拆分」, 并在派生修订字段登记拆出的子单号,子单的原问题单号指向原单。
下表为样例,字段结构与取值为正式口径,数值与部门为示意。 为便于版面排布,表取十二列,其余字段在平台中维护。
| 问题单号 | 发现日期 | 规则标识 | 数据对象 | 维度 | 严重级 | 涉及记录数 | 根因 | 责任部门 | 整改完成 | 复核 | 状态 |
|---|---|---|---|---|---|---|---|---|---|---|---|
| DQ-I-2027-001842 | 2027-02-17 | DQ-R-MF-CP-0003 | 工单工序(备料分厂) | 完整性 | 阻断 | 3 416 | R1 | 备料加工分厂 | — | — | 待整改 |
| DQ-I-2027-001907 | 2027-02-23 | DQ-R-WH-CS-0002 | 库存三方比对 | 一致性 | 阻断 | 2 148 | R2 | 仓储归口部门 | — | — | 待整改 |
| DQ-I-2027-002015 | 2027-03-01 | DQ-R-QM-CP-0005 | 热处理炉次 | 完整性 | 阻断 | 1 206 | R2 | 热处理分厂 | — | — | 待整改 |
| DQ-I-2027-002088 | 2027-03-04 | DQ-R-MF-TM-0005 | 工单工序(结构件焊接分厂) | 及时性 | 告警 | 8 742 | R1 | 结构件焊接分厂 | 2027-03-19 | 通过 | 已关闭 |
| DQ-I-2027-002103 | 2027-03-05 | DQ-R-RD-CP-0004 | 图纸与工艺卡配对 | 完整性 | 告警 | 41 672 | R7 | 工艺研究分院 | — | — | 待整改 |
| DQ-I-2027-002117 | 2027-03-06 | DQ-R-EQ-TM-0002 | 设备时序(热处理 3 号炉台) | 及时性 | 阻断 | 86 420 | R3 | 设备管理归口部门 | 2027-03-11 | 通过 | 已关闭 |
| DQ-I-2027-002142 | 2027-03-08 | DQ-R-EQ-AC-0003 | 设备时序(焊接产线振动测点) | 准确性 | 告警 | 12 | R6 | 设备管理归口部门 | — | — | 已关闭 |
| DQ-I-2027-002166 | 2027-03-10 | DQ-R-QM-VL-0001 | 检验记录(缺陷明细) | 有效性 | 告警 | 6 318 | R4 | 质量管理归口部门 | — | — | 待整改 |
| DQ-I-2027-002201 | 2027-03-12 | DQ-R-RD-UQ-0002 | 工艺卡片 | 唯一性 | 阻断 | 86 | R7 | 工艺研究分院 | 2027-03-18 | 不通过 | 已退回 |
| DQ-I-2027-002201-1 | 2027-03-22 | DQ-R-RD-UQ-0002 | 工艺卡片 | 唯一性 | 阻断 | 24 | R7 | 工艺研究分院 | 2027-03-27 | 通过 | 已关闭 |
| DQ-I-2027-002238 | 2027-03-15 | DQ-R-PU-CS-0003 | 采购订单价与物料价格 | 一致性 | 告警 | 312 | R5 | 采购归口部门 | — | — | 已关闭 |
| DQ-I-2027-002274 | 2027-03-18 | — | 热处理工艺参数记录 | 准确性 | 告警 | 1 | R1 | 热处理分厂 | 2027-03-20 | 通过 | 已关闭 |
样例行中有五处值得逐条看,它们对应台账字段设计中容易出错的地方。
DQ-I-2027-002142 的涉及记录数只有 12,但根因为 R6(源头不可得), 关闭原因为「转已知缺口」。这是一条振动测点长期恒值的问题单, 经设备管理部门确认该测点已失效且短期无更换计划,因此转缺口而非整改。 它的涉及记录数小而影响不小——该测点失效意味着对应设备的振动通道在样本中缺失。 涉及记录数不等于影响程度,这是台账统计时最容易误读的一处。
DQ-I-2027-002201 与 DQ-I-2027-002201-1 是一组退回与重做。 第一次整改复核不通过(退回次数 1),原因是只处理了八十六组冲突中的六十二组; 重做后剩余二十四组处理完毕并复核通过。两条记录都保留在台账中, 不合并为一条,使整改过程可见。
DQ-I-2027-002238 的根因为 R5(规则不当),关闭原因为「规则误报撤单」。 该条问题单经采购部门确认,三百一十二条中价格不一致的记录均属正常的期间调价, 规则未排除调价生效日的边界情形。本单撤销并派生规则修订 (派生修订字段填 DQ-R-PU-CS-0003 V1.1)。按《数据质量管理办法》附表六, R5 不计入关闭率分母。
DQ-I-2027-002274 的规则标识为空、涉及记录数为 1,来源为业务提报。 热处理分厂人员在查阅历史记录时发现一条保温温度录入明显异常,手工提报。 这类单条提报不走聚合规则(第 6.5 节第一种情形),也允许规则标识为空—— 质量问题不是只有规则能发现的。本单整改后派生了新规则建议, 由数据质量管理员评估后决定是否新增物理约束规则。
DQ-I-2027-002117 的涉及记录数达八万六千余条,而整改仅用五个工作日。 这是一条测点采集缺段问题单,根因为 R3(接口缺陷), 整改措施是修复采集通道并补数。单条问题单涉及记录数以万计是时序数据的常态, 比较整改工作量应看问题单量,比较数据影响面应看涉及记录数(第 6.7 节)。
台账的统计口径须说清三件事,否则数字容易被误读。
第一,问题单数与问题记录数是两个量。 一个问题单可能涉及上万条记录。 统计整改工作量用问题单数,统计数据影响面用涉及记录数,且因计量单位不同 (记录/比对项/测点),不同类别的涉及记录数不直接相加。 台账的统计报表按计量单位分组呈现。
第二,关闭率的分母应剔除转入已知缺口的问题单。 分母为「本期新增问题单量 减去转已知缺口的件数」,分子为「本期按期关闭件数」。 不剔除的后果是关闭率永远不达标,并掩盖真正能解决的问题 (《数据质量管理办法》第六十二条)。根因为 R5(规则不当)的撤单同样不计入分母。
第三,复发率比关闭率更能说明整改是否触及根因。 复发率的分子为本期新增问题单中标记为复发的件数,分母为本期新增问题单量。 复发的问题单在整改时须重新做根因分析,不得沿用原归因结论 (同办法第六十一条)。关闭率高而复发率也高,说明整改停留在改数据层面, 没有改产生数据的方式。
另有两条次要口径须在报表中注明:按期关闭率与总关闭率分别统计 (前者以要求完成日期为准,后者不计时限); 需系统改造的问题单不占用常规时限统计,单列一组。
图 A8-7 问题单的状态流转与台账留痕点。实线为正向流转,虚线为回退、分流与升级路径。 数据来源:《数据质量管理办法》第五十四条至第六十二条及附表五; 招标文件第五章 3.2.6.1.1.2.6 第(4)项「上报-分派-整改-复核-归档」(b1295)(b1296)。
聚合规则按「同一整改动作能否一次完成」划界,是为时序数据与历史图纸两类对象设的。 设备时序的缺段问题一次修复采集通道即可覆盖数万条记录; 图纸与工艺卡的配对问题需按产品线分批建立,一次完成不了。 因此前者聚合为一单,后者在分派时按产品线拆单 (第 6.5 节第三种情形的延伸,由责任分工决定拆分粒度)。
「转已知缺口」是本台账的常用关闭原因,不是例外路径。 甲方已预见的三类缺口(焊接参数流配对、报警与维修事实配对、纸质检测报告数字化) 加上采集未覆盖的车间,会持续产生无法整改的问题单。 台账把「转已知缺口」设为与「整改完成」并列的关闭原因, 并在关闭率分母中剔除,使治理成效的数字不被这些缺口拖住。
规则库版本字段是为第三方评测设的。 数据集质量评测与整改复测过程中 (b2136),评测机构可能对某批次数据的质量判定提出疑问。 台账记录每条问题单所依据的规则库版本,使评测时可按当时的规则集复核, 而不是用当前规则去判断半年前的数据。这一点与规则库第 4.15 节的可复现性要求对应。
单条问题单的审核。 分派由数据质量管理员审核,整改由责任部门填报, 复核由数据质量管理员执行,归档由数据质量管理员确认。 退回两次以上的问题单提交数据治理工作组协调(《数据质量管理办法》第五十八条)。
台账结构的修订。 字段的新增、删除、取值域变更,由数据质量管理员提出、 数据治理工作组核定,变更记入第五章。字段删除须评估对历史记录的影响: 已有记录的字段不物理删除,置为停用并在统计中排除。
统计口径的修订。 关闭率、复发率、按期关闭率的计算式变更,须同时给出 按新旧两种口径核算的近三期数值,供数据治理工作组判断变更是否造成趋势断裂。 口径变更后的首期报告须同时列出两套数值。
修订的下游通知。 台账结构或统计口径变更后,须通知三方并更新两处配置: 通知业务域数据管理员与各责任部门(填报字段可能变化)、通知数据治理工作组 (统计口径变化);更新平台中台账表单配置与月度报告的取数配置。 口径变了而报告取数未变,会出现报告数字与台账数字不一致而无人能解释的情形。
台账主表一行记一个问题单,但问题单的三类明细不适合挤进主表: 问题记录的业务主键清单可能有上万条,整改措施可能分若干项, 复核可能来回若干次。这三类明细各设一张子表,以问题单号关联主表。 另有一张已知缺口清单,是台账的第四张附表。
| 字段 | 必填 | 说明 |
|---|---|---|
| 问题单号 | 是 | 关联主表 |
| 序号 | 是 | 本单内顺序号 |
| 业务主键 | 是 | 源系统中可直接定位该记录的键值组合 |
| 实测值 | 是 | 该记录触发规则时的实际取值 |
| 期望值或期望描述 | 是 | 规则要求的取值或状态 |
| 记录所属单位 | 否 | 分厂、车间或部门,用于拆单与分派 |
| 本记录整改状态 | 是 | 未整改/已整改/确认无需整改 |
| 确认无需整改的理由 | 条件必填 | 状态为「确认无需整改」时必填 |
样例(节选,对应主表 DQ-I-2027-001842,数值为示意):
| 序号 | 业务主键 | 实测值 | 期望值 | 所属单位 | 整改状态 | 理由 |
|---|---|---|---|---|---|---|
| 1 | 工单号 MO-2702-00418+工序代码 BL-07 | 设备编码为空 | 非空且在设备主数据中 | 备料加工分厂 | 已整改 | — |
| 2 | 工单号 MO-2702-00418+工序代码 BL-12 | 设备编码为空 | 同上 | 备料加工分厂 | 已整改 | — |
| 3 | 工单号 MO-2702-00531+工序代码 BL-03 | 设备编码为空 | 同上 | 备料加工分厂 | 确认无需整改 | 该工序本批次为外协,工序类型字段未标外协,另派单改工序类型 |
| 4 | 工单号 MO-2702-00602+工序代码 BL-19 | 设备编码为空 | 同上 | 备料加工分厂 | 未整改 | — |
| … | …(本单共 3 416 条) | — | — | — | — | — |
第 3 行是本子表最有价值的一类记录:它不是整改,而是发现了另一个问题。 设备编码为空的真实原因是工序类型未标外协,而规则 DQ-R-MF-CP-0003 的允许空值条件正是「工序类型为外协」(《数据质量校验规则库》第 4.6.1 节)。 因此本记录确认无需整改,另派一单整改工序类型字段。 子表中「确认无需整改的理由」一列必填,就是为了让这类发现留痕, 而不是被业务部门一句「这个不用改」带过。
整改状态逐条记录而不只记总数,是复核能否按记录重跑的前提 (《数据质量管理办法》第五十八条)。只记「已整改 3 300 条」, 复核时无法知道哪一百余条没改,退回时也说不清退的是什么。
| 字段 | 必填 | 说明 |
|---|---|---|
| 问题单号 | 是 | 关联主表 |
| 措施序号 | 是 | 本单内顺序号 |
| 措施类型 | 是 | 数据更正/补录/界面校验/流程调整/接口改造/标准补充/培训 |
| 措施内容 | 是 | 具体做了什么 |
| 执行单位 | 是 | — |
| 计划完成/实际完成 | 是 | 两列 |
| 是否长效措施 | 是 | Y/N |
| 关联改造排期编号 | 条件必填 | 措施类型为接口改造或界面校验时必填 |
样例(对应主表 DQ-I-2027-002088,报工时延问题,数值为示意):
| 措施序号 | 措施类型 | 措施内容 | 执行单位 | 计划/实际完成 | 长效 | 改造排期 |
|---|---|---|---|---|---|---|
| 1 | 数据更正 | 对 8 742 条已超时报工记录补填实际作业时间,原报工时间保留 | 结构件焊接分厂 | 2027-03-15/2027-03-14 | N | — |
| 2 | 界面校验 | 报工界面增加「距班次结束已超时」提示与实际作业时间必填 | 系统运维责任人 | 2027-03-20/2027-03-19 | Y | SYS-2703-012 |
| 3 | 流程调整 | 班长在班次结束前三十分钟提醒未报工工序 | 结构件焊接分厂 | 2027-03-18/2027-03-17 | Y | — |
| 4 | 培训 | 对本分厂报工岗开展填写规范培训,覆盖 2 个班组 | 结构件焊接分厂 | 2027-03-20/2027-03-20 | Y | — |
「是否长效措施」这一列决定复发率能否下降。 只做第 1 项(数据更正)的问题单, 下个月几乎必然复发——数据改了,产生数据的方式没改。 台账在统计报表中按「是否含长效措施」分组统计复发率, 两组之间的差距是对「整改是否触及根因」最直接的度量 (《数据质量管理办法》第六十一条)。
| 字段 | 必填 | 说明 |
|---|---|---|
| 问题单号 | 是 | 关联主表 |
| 复核轮次 | 是 | 第 1 轮、第 2 轮… |
| 复核方式 | 是 | 重跑规则/抽样核对/两者兼用 |
| 复核规则库版本 | 是 | 重跑时所用的规则库版本 |
| 复核范围 | 是 | 全部记录/抽样及抽样量 |
| 复核结果 | 是 | 通过记录数、未通过记录数 |
| 结论 | 是 | 通过/不通过 |
| 不通过原因 | 条件必填 | 结论为不通过时必填 |
| 复核日期与执行人 | 是 | 执行人不得为整改执行人 |
样例(对应主表 DQ-I-2027-002201,工艺卡片唯一性冲突,数值为示意):
| 轮次 | 方式 | 规则库版本 | 范围 | 结果 | 结论 | 不通过原因 |
|---|---|---|---|---|---|---|
| 1 | 重跑规则 | V1.3 | 全部 86 组 | 通过 62 组、未通过 24 组 | 不通过 | 仅处理了 2024 年前签发的卡片,2024 年后的 24 组未处理 |
| 2 | 重跑规则 | V1.3 | 剩余 24 组 | 通过 24 组、未通过 0 组 | 通过 | — |
复核方式须记录。 重跑规则与抽样核对的证明力不同: 前者覆盖全部记录,后者只覆盖样本。涉及记录数大的问题单允许抽样复核, 但抽样量与抽样方式须记录在案,且抽样复核通过的问题单在后续两个统计周期内 由平台自动重跑一次该规则,重跑发现问题的按复发处理。 不作这条安排,大单一律抽样、抽样一律通过,关闭率就成了一个自证的数字。
| 字段 | 必填 | 说明 |
|---|---|---|
| 缺口编号 | 是 | DQ-G-<三位序号> |
| 缺口内容 | 是 | 一句话写明缺什么 |
| 登记日期 | 是 | — |
| 来源问题单号 | 条件必填 | 由问题单转入的必填 |
| 不可整改的原因分类 | 是 | 业务未产生/采集通道不具备/历史数据不符现行标准/不属本项目范围 |
| 影响范围 | 是 | 涉及的数据对象与字段 |
| 对数据集的影响 | 是 | 影响哪类数据集、哪个场景、可构造样本量如何折算 |
| 当前可度量指标 | 否 | 如配对率、数字化率,按周期更新 |
| 复评周期 | 是 | 默认每季;可按情形延长至每半年 |
| 最近复评日期与结论 | 是 | 维持缺口/转回整改/调整影响评估 |
| 转回整改的触发条件 | 是 | 写明什么条件具备后转回 |
样例(与第 5.5.6 节同期,数值为示意):
| 缺口编号 | 缺口内容 | 原因分类 | 对数据集的影响 | 当前可度量指标 | 复评周期 | 转回触发条件 |
|---|---|---|---|---|---|---|
| DQ-G-001 | 焊接参数流与工件、焊道无对应 | 采集通道不具备 | 焊接过程控制类监督样本按配对率折算可构造量 | 配对率 7.2% | 每季 | 时间基准统一且焊道标识在参数流中落地 |
| DQ-G-002 | 报警事件与维修事实无配对 | 采集通道不具备 | 装备健康诊断类样本标签来源受限 | 配对率 9.4% | 每季 | 服务工单与运维平台事件打通 |
| DQ-G-003 | 纸质无损检测报告未数字化 | 不属本项目范围 | 质量类数据集缺无损检测结果通道 | 数字化率 0% | 每半年 | 甲方另立数字化工作并完成与工件标识关联 |
| DQ-G-004 | 历史选型记录接口参数无电子留痕 | 业务未产生 | 选型类样本以文档解析为主要来源 | 结构化齐备率 23.1% | 每季 | 新增记录按规则管控后,历史部分不再转回 |
| DQ-G-005 | 部分车间设备未联网 | 采集通道不具备 | 制造过程类时序样本的车间覆盖有限 | 已联网车间占比【待填】 | 每季 | 采集范围扩展计划落地 |
「转回整改的触发条件」必填。 不写触发条件的缺口,三个季度后就没人记得 当初为什么不整改、什么条件下该重新整改,复评会变成每季重复确认「维持」。 写明条件后,复评的工作变成核对条件是否已具备,这是一件可执行的事。
「对数据集的影响」必填,且须写到可折算。 这一列是本清单区别于一般 风险登记表的地方:缺口不只是治理上的遗留,它直接决定某类数据集能造出多少样本。 DQ-G-001 的配对率从 4.6% 升至 7.2%,意味着焊接过程控制类可构造样本量 按新配对率上调,加工侧据此调整排产(《质量分析报告》第 8.4 节)。
台账第四章设四张统计报表。四张报表是月度质量分析报告第六章「整改进展」 与第 5.9 节附表的取数来源,报表与报告的数字须一致(本附件第七节表 A8-11 第 9 项)。
字段与样例见《质量分析报告》第 5.5.5 节表 7,此处不重复。 本报表的编制要点是三项分母的剔除顺序: 先剔除转已知缺口件数,再剔除规则误报撤单件数,最后计算按期关闭率; 顺序颠倒会使两类剔除项重复扣减(两者不重叠,但平台若按条件叠加筛选易出错)。
| 字段 | 说明 |
|---|---|
| 根因代码与分类 | R1—R7 |
| 本期新增件数 | — |
| 本期关闭件数 | — |
| 含长效措施的件数与占比 | 取附表 3.2「是否长效措施」为 Y 的 |
| 复发件数与复发率 | 按根因分组统计 |
| 平均整改工作日 | 分派日期至整改完成日期的工作日均值;需系统改造的单列 |
| 是否计入关闭率分母 | 取《数据质量管理办法》附表六 |
样例(与第 6.6 节同期,数值为示意):
| 根因 | 新增 | 关闭 | 含长效措施 | 复发件数 | 复发率 | 平均整改工作日 |
|---|---|---|---|---|---|---|
| R1 录入不规范 | 586 | 498 | 312(62.7%) | 74 | 12.6% | 6.4 |
| R2 流程缺环 | 312 | 214 | 196(91.6%) | 18 | 5.8% | 14.2 |
| R3 接口缺陷 | 268 | 246 | 238(96.7%) | 12 | 4.5% | 4.8 |
| R4 标准缺失 | 164 | 96 | 92(95.8%) | 8 | 4.9% | 21.6 |
| R5 规则不当 | 98 | 98 | — | — | — | 2.1 |
| R6 源头不可得 | 182 | 182 | — | — | — | 3.4 |
| R7 历史遗留 | 120 | 42 | 28(66.7%) | 62 | 51.7% | 18.9 |
本表最该看的是 R1 与 R7 两行。R1 含长效措施的占比只有 62.7%, 复发率 12.6%——三成七的录入问题只改了数据、没改录入方式,下月还会再来。 R7 复发率高达 51.7%,但这与 R1 的性质不同:历史遗留问题按批次清洗, 一批清完下一批又被规则扫出来,台账记为复发而实际是分批推进。 这类「技术性复发」须在报表注释中说明,否则 R7 的复发率会被当作整改失效的证据。 项目期的处置是对历史遗留类问题单在分派时即标注批次号, 复发判定按「同一批次内再次出现」而非「同一规则同一对象再次出现」。
| 字段 | 说明 |
|---|---|
| 责任部门 | — |
| 本期分派件数 | 含主责与协同分列 |
| 按期关闭件数与按期关闭率 | — |
| 超期件数与最长超期工作日 | — |
| 复发件数与复发率 | — |
| 退回件数与退回率 | 取主表字段 27 |
| 含长效措施占比 | — |
样例(节选,数值为示意):
| 责任部门 | 分派 | 按期关闭率 | 超期 | 最长超期 | 复发率 | 退回率 | 长效占比 |
|---|---|---|---|---|---|---|---|
| 备料加工分厂 | 268 | 71.3% | 18 | 21 | 14.2% | 8.6% | 58.2% |
| 结构件焊接分厂 | 214 | 83.6% | 8 | 12 | 9.8% | 4.7% | 71.5% |
| 热处理分厂 | 186 | 76.9% | 12 | 14 | 11.3% | 6.5% | 64.0% |
| 工艺研究分院 | 162 | 68.5% | 14 | 24 | 18.5% | 9.9% | 46.3% |
| 生产管理部 | 148 | 85.1% | 6 | 9 | 7.4% | 3.4% | 74.3% |
| 质量管理归口部门 | 142 | 72.5% | 10 | 16 | 13.4% | 7.0% | 59.2% |
| 设备管理归口部门 | 124 | 79.0% | 8 | 27 | 10.5% | 5.6% | 82.3% |
| 仓储归口部门 | 96 | 74.0% | 7 | 17 | 12.5% | 6.3% | 61.5% |
本报表用于月度例会通报,点名到部门不点名到个人 (《数据质量管理办法》第七十条)。 解读时须结合分派件数看:分派件数少的部门,一两件超期就会让比率显著变化, 因此例会通报以件数为主、比率为辅,分派件数低于约定下限的部门不参与比率排名。 设备管理归口部门的长效措施占比最高(82.3%)而最长超期也最长(27 个工作日), 两者并不矛盾——该部门的问题多为接口与采集通道类,整改必含长效措施, 但涉及系统改造的排期长。需系统改造的问题单不占用常规时限统计 (《数据质量管理办法》第五十七条),本表中的最长超期已剔除此类。
| 字段 | 说明 |
|---|---|
| 规则标识与对象 | — |
| 复发次数 | 同一规则同一对象的问题单归档后再次生成的累计次数 |
| 首次发现日期与最近发现日期 | — |
| 历次根因分类 | 列出各次的根因,便于判断归因是否反复 |
| 历次是否含长效措施 | — |
| 本次处置要求 | 复发须重新做根因分析,不得沿用原结论 |
样例(节选,数值为示意):
| 规则·对象 | 复发次数 | 首次/最近 | 历次根因 | 历次长效 | 本次处置要求 |
|---|---|---|---|---|---|
| DQ-R-MF-CP-0003·工单工序(备料分厂) | 4 | 2026-12-08/2027-03-16 | R1、R1、R1、R1 | N、N、Y、N | 归因四次相同而长效措施未落实,提交工作组督办界面必填校验 |
| DQ-R-QM-VL-0001·检验记录 | 3 | 2027-01-12/2027-03-10 | R1、R4、R4 | N、Y、Y | 归因已转 R4(标准缺失),待缺陷类型码表发布后复评 |
| DQ-R-RD-CP-0004·图纸与工艺卡配对 | 5 | 2026-11-30/2027-03-05 | R7×5 | Y×5 | 技术性复发,按批次号重新判定,不计入复发率 |
| DQ-R-WH-CS-0002·库存三方比对 | 2 | 2027-01-20/2027-02-23 | R2、R2 | Y、Y | 流程节点已补但未覆盖散料,补充散料盘点节点 |
本报表是整改质量的最终检验。 一条规则同一对象复发四次而历次根因都填 R1、 长效措施只有一次为 Y,说明整改一直停在改数据层面; 这类情形须提交数据治理工作组督办,而不是继续按常规时限分派第五次 (《数据质量管理办法》第六十一条)。 反过来,历次根因在变化(如从 R1 转 R4)说明归因在深入,是正常的推进过程。
四张报表的共同约定:按月生成,与台账同源,报表数字与月度质量分析报告第六章 及第 5.9 节附表须一致;不一致时以台账为准并追查取数配置 (本附件第七节表 A8-11 第 9 项)。
整改台账记录的是问题从上报到归档的全过程,它的每一次状态变更都对应一个动作与一个责任人。台账本身没有「谁来写」的问题——状态变更由谁触发就由谁留痕;需要写清的是每一次状态变更谁有权推进、谁有权判定完成。下表按五环流程与台账维护动作列出。代码含义与本附件 2.6 一致。
表 A8-19 《质量问题整改台账》职责矩阵
| 序 | 动作 | 对应环节 | 数据治理委员会 | 数据治理工作组 | 数据质量管理员 | 业务域数据管理员 | 系统运维责任人 | 我方项目组 |
|---|---|---|---|---|---|---|---|---|
| 1 | 问题单的创建与要素填写 | 上报 | — | — | 执 | 拟 | 拟 | 执 |
| 2 | 问题单的聚合与去重 | 上报 | — | 督 | 批 | 配 | 配 | 执 |
| 3 | 严重级与优先级的确认 | 上报 | — | 审 | 批 | 签 | — | 配 |
| 4 | 整改责任方的分派 | 分派 | — | 批 | 拟 | 签 | 签 | 配 |
| 5 | 分派异议的处理 | 分派 | 批 | 执 | 审 | 配 | 配 | 配 |
| 6 | 整改方案的提出 | 整改 | — | 审 | 审 | 拟 | 拟 | 配 |
| 7 | 整改的实施 | 整改 | — | 督 | 督 | 执 | 执 | 配 |
| 8 | 整改完成的申报 | 整改 | — | — | 审 | 拟 | 拟 | 配 |
| 9 | 复核的执行与结论 | 复核 | — | 审 | 批 | 配 | 配 | 执 |
| 10 | 复核不通过的退回与重整改 | 复核 | — | 督 | 批 | 执 | 执 | 配 |
| 11 | 超期的识别与升级 | 复核 | 批 | 执 | 拟 | 配 | 配 | 配 |
| 12 | 问题单的归档 | 归档 | — | 督 | 批 | 签 | 配 | 执 |
| 13 | 转已知缺口的判定与登记 | 归档 | 批 | 审 | 拟 | 签 | 配 | 执 |
| 14 | 已知缺口的到期复评 | 归档 | 批 | 审 | 拟 | 签 | 配 | 执 |
| 15 | 台账子表的维护 | 维护 | — | 督 | 审 | 配 | 配 | 执 |
| 16 | 统计报表的出具 | 维护 | 审 | 批 | 拟 | 配 | 配 | 执 |
| 17 | 状态流转留痕的完整性核查 | 维护 | — | 督 | 批 | — | — | 执 |
第 9 行把复核的「批」放在数据质量管理员、「执」放在我方项目组,这一分工落实的是整改与复核的分离。整改方自己宣布整改完成,在台账上与经复核确认的完成长得一模一样,而两者的区别要到同类问题再次出现时才显形。复核由不承担整改的一方执行,结论由质量管理员批准,是这张台账上数字可信的前提。
第 13 行的「转已知缺口」是本台账唯一一个允许问题单在未解决的情况下归档的出口,因此它的批准权在数据治理委员会。把这个出口的门槛设低,台账会很快变得好看——未解决的问题都转成了缺口,问题单关闭率随之上升。本办法第八章因此要求缺口登记必须带到期复评时点,第 14 行把复评也列进矩阵,就是不让这个出口变成终点。
责任边界按下列三条划定。
其一,整改的实施由责任方承担。我方项目组负责问题的定位、整改建议、复核执行与台账维护,不代行源系统或业务流程的整改;整改所需的系统改造与流程调整由甲方安排。
其二,复核结论以复核时的实测为准。复核通过不构成对该问题此后不再发生的保证;同一问题再次出现的,按新问题单处理并在根因分析中追溯前次整改的有效性。
其三,已知缺口的保留与复评结论由甲方决定。我方项目组负责登记、影响评估与到期提醒,并在相关数据集的说明文档中声明缺口的影响范围;缺口未经复评而到期的,在统计报表中单列,不计入已闭环。
整改台账是五份文件中保存期最长的一份:问题单关闭之后,台账仍是「这个问题当初是怎么治的、治完有没有复发」的唯一记录,而复发统计要跨若干个季度才看得出来。下表给出本台账项下各子表、报表与配套记录的维护责任、更新触发与保存规则。保存期限一栏不直接写年限:年限取决于甲方档案管理制度与法定最低年限,二者孰长从长,本表给出的是定年限的规则。
表 A8-23 《质量问题整改台账》附表索引与保存规则
| 编号 | 附表名称 | 性质 | 维护方 | 审批方 | 更新触发 | 保存期限的确定规则 |
|---|---|---|---|---|---|---|
| 附表一 | 字段定义与取值域 | 规范性 | 我方项目组 | 数据质量管理员 | 字段增减、取值域调整 | 随本台账版本留存;状态取值调整保留调整前取值,历史问题单按当时取值解释 |
| 附表二 | 台账主表 | 规范性 | 数据质量管理员 | 数据治理工作组 | 问题单开立、状态流转、关闭 | 长期留存;关闭的问题单不删行、不归并,复发统计按主表逐行回溯 |
| 附表 3.1 | 问题记录主键清单(子表) | 规范性 | 我方项目组 | 数据质量管理员 | 问题单开立时生成、复核时更新 | 随对应问题单留存;条数较大的按问题单号分件归档,保留期与主表一致 |
| 附表 3.2 | 整改措施明细(子表) | 规范性 | 责任部门 | 数据质量管理员 | 措施制订、措施调整 | 随对应问题单留存;措施调整保留调整前的措施与理由,不以最终措施覆盖 |
| 附表 3.3 | 复核记录(子表) | 规范性 | 数据质量管理员 | 数据治理工作组 | 每次复核 | 随对应问题单留存;复核往返多轮的保留每一轮记录,关闭判定以最后一轮为准但前几轮不删 |
| 附表 3.4 | 已知缺口清单 | 规范性 | 我方项目组 | 数据治理工作组 | 缺口登记、缺口关闭、缺口转问题单 | 长期留存;转为问题单的缺口保留原登记行并标注转出问题单号 |
| 报表 4.1 | 月度处置统计(按严重级) | 资料性 | 我方项目组 | 数据质量管理员 | 每月生成 | 按月归档;统计口径调整保留调整前口径说明 |
| 报表 4.2 | 按根因统计 | 资料性 | 我方项目组 | 数据质量管理员 | 每月生成 | 按月归档;根因分类调整的,保留调整前的分类对照,历史月份不按新分类重算 |
| 报表 4.3 | 按责任部门统计 | 资料性 | 我方项目组 | 数据治理工作组 | 每月生成 | 按月归档;涉及考核的月份随该考核期的结论一并留存 |
| 报表 4.4 | 复发统计 | 规范性 | 数据质量管理员 | 数据治理工作组 | 每季度生成 | 长期留存;复发判定依赖主表的历史行,本报表的保留期不短于主表 |
| 附表十一 | 本台账修订记录表 | 规范性 | 我方项目组 | 数据治理工作组 | 每次版本变更 | 置于台账正文之后,与文档同寿,不可删行、不重排序号 |
附表 3.2 与附表 3.3 都要求保留过程而不是只留结果,理由与本附件其余各处一致,但在整改台账上还多一层:复核往返若干轮本身就是一个信号。一张问题单复核三轮才关闭,与一轮即关闭,反映的治理难度不同;这个信息只存在于复核记录的轮次里,关闭结论本身看不出来。按根因统计(报表 4.2)在分析复发时会用到它。
报表 4.2 的「历史月份不按新分类重算」是一条反直觉的规则。根因分类调整之后,把历史数据按新分类重算一遍,统计表看起来更整齐,但它改写了当时的判断——当月被归为「流程缺失」的问题,在新分类下可能落到「系统缺陷」,而当时据以采取的治理动作是按前者定的。保留调整前的分类对照、不重算,是让治理动作与当时的判断对得上。
五份文档之间有十处字段级与口径级的引用关系。项目期交付前须逐项校验, 不一致的以表中「基准方」为准。这张表也是甲方验收本附件所列五份交付物时的核对清单。
表 A8-11 五份文档之间的引用关系与一致性校验项
| 序 | 校验项 | 引用方 | 基准方 | 不一致的典型表现 | 校验频率 |
|---|---|---|---|---|---|
| 1 | 六大质量维度的名称与定义 | 需求清单、规则库、分析报告、台账 | 管理办法第十五条及附表一 | 规则库中出现「规范性」一类第七个维度 | 每次发版 |
| 2 | 质量维度权重 | 分析报告质量分核算 | 管理办法附表二 | 报告按旧权重核算,与办法附表不符 | 每季 |
| 3 | 三档严重级的判定标准与时限 | 规则库、台账 | 管理办法附表四、附表五 | 台账的时限参数与办法不一致,超期统计失准 | 每次发版 |
| 4 | 根因分类 R1—R7 | 台账、分析报告 | 管理办法附表六 | 台账出现 R8 等未定义代码 | 每月 |
| 5 | 需求标识与规则标识的对应 | 规则库「来源需求」字段 | 需求清单「关联规则」字段 | 双向引用不闭合,有规则无诉求或有诉求无规则 | 每月 |
| 6 | 业务域码与维度码 | 规则库编号、需求清单编号 | 规则库第二章 | 同一域在两份文档中用不同码 | 每次发版 |
| 7 | 码表与数据元的引用 | 规则库 T02、T05 规则 | 《参考数据标准》《数据元标准》 | 码表发版后规则仍引用旧版本 | 每次码表发版 |
| 8 | 已知缺口清单 | 分析报告第七章、台账附表 3.4 | 管理办法第六十二条核定结果 | 两处缺口数量不一致 | 每月 |
| 9 | 关闭率与复发率的计算式 | 分析报告表 7 | 台账第 6.7 节 | 报告与台账算出两个关闭率 | 每月 |
| 10 | 规则库版本号 | 台账字段 5、分析报告第 1.3 节 | 规则库发版记录 | 台账记录的版本号不存在于发版记录中 | 每月 |
第 5 项与第 9 项最容易出问题,原因不同。第 5 项是双向引用,两边各自维护就会漂移; 处置方式是在平台中把两个字段做成同一关系的两个视图,而不是两份独立数据。 第 9 项是计算式分散在两份文档中各写一遍;处置方式是在台账中定义、 在报告中引用,报告不重复定义计算式。
五份文档不在同一时点交付。下表给出各份文档的首版交付时点、依赖条件与后续版本节奏。 时点以项目启动后的月序表示,具体日期以合同约定的实施计划为准。
表 A8-12 五份文档的交付节奏与版本计划
| 文档 | 首版交付 | 依赖条件 | 后续节奏 | 项目期内预计版本数 |
|---|---|---|---|---|
| 数据质量管理办法 | 治理规划阶段末 | 治理组织架构已定、数据资源目录首版已出 | 定期修订每年一次,临时修订按情形 | 2—3 版 |
| 数据质量需求清单 | 管理办法发布后一个月 | 首轮全量扫描完成(填入基线) | 按月增补、按季复核 | 按月滚动,季度出盖章版 |
| 数据质量校验规则库 | 需求清单首版后一个月 | 数据元标准与码表首版已发布 | 小版本按月、大版本按季 | 按月滚动,季度出盖章版 |
| 质量分析报告 | 规则库首批启用并运行满一个月后 | 稽核任务可调度、台账已启用 | 月度一期、季度一期 | 按月出期 |
| 质量问题整改台账 | 与规则库首批启用同步 | 责任部门已确认、问题单流程已配置 | 持续记录,按月导出、按季出盖章版 | 持续 |
交付顺序由依赖关系决定,不可调整。需求清单的基线依赖首轮扫描, 而首轮扫描须按规则执行——这里存在一处表面上的循环依赖,实际处置方式是: 首轮扫描使用一批不含阈值的「探查型」规则(只统计分布、不判通过与否), 扫描结果形成基线后再据以标定正式规则的阈值(第 4.7 节)。 探查型规则不进规则库正式版本,其清单与结果随首轮扫描报告留档。
这条安排须在项目启动时就明确,否则会出现「等基线才能定阈值、 等阈值才能跑扫描」的僵局。
本附件五份样章的结构、条款、字段与取值域均已写定,下列内容须由甲方提供 或经甲方确认后填入,投标阶段以【待填:…】标出,不预填拟值。
表 A8-13 待补材料清单
| 序 | 待补内容 | 需求方 | 提供方 | 影响的样章与位置 | 不补齐的后果 |
|---|---|---|---|---|---|
| 1 | 数据治理委员会、工作组的正式名称、组成与批准人职务 | 管理办法 | 甲方数字化转型工作办公室 | 第 2.1 节、第八条至第九条 | 办法无法发布 |
| 2 | 九个业务域对应的甲方主管部门正式名称与数据管理员岗位 | 管理办法、需求清单、台账 | 甲方各业务主管部门 | 第十一条;各域「责任部门」字段 | 问题单无法分派 |
| 3 | 数据质量管理员的岗位编制与任职人员 | 管理办法 | 甲方数字化转型工作办公室 | 第十条 | 日常执行无岗位承接 |
| 4 | 甲方图号编码规则,含历史图号的例外形态 | 规则库 | 工艺研究分院 | 第 4.6.3 节、DQ-R-RD-VL-0003 | 图号格式规则无法编写 |
| 5 | 各材质各热处理工艺的硬度合理区间 | 规则库 | 热处理分厂、质量管理归口部门 | DQ-R-QM-AC-0006 | 硬度准确性规则无法运行 |
| 6 | 各热处理分厂的环境温度取值口径 | 规则库 | 热处理分厂 | 第 4.6.8 节、DQ-R-EQ-AC-0005 | 温度下限判定无依据 |
| 7 | 报工时限的管理规定(若有);无规定时的班次日历 | 规则库 | 生产管理部 | 第 4.6.9 节、DQ-R-MF-TM-0005 | 时效规则阈值只能按实测标定 |
| 8 | 各测点类型的采样周期、量程与恒值判定参数 | 规则库 | 设备管理归口部门 | 第 4.6.10 节、四条 T10 规则 | T10 规则参数无法分组配置 |
| 9 | 钢材牌号、缺陷类型、工序、库位、物料状态等码表 | 规则库 | 甲方各业务主管部门 | T02、T05 类规则 | 值域与引用完整性规则无法编写 |
| 10 | 甲方档案管理规定中对文档装订、密级与保存期限的要求 | 五份文档 | 甲方档案管理部门 | 第 2.1 节、第 6.1 节 | 纸质交付形态无法确定 |
| 11 | 维度权重、评级门限、误报率约定水平的核定结论 | 管理办法、规则库 | 甲方数据治理委员会 | 附表二、第 4.8 节 | 评分与观察期判定无依据 |
| 12 | 各业务域的整改承载力(可处理问题单量的量级) | 规则库 | 甲方各业务主管部门 | 第 4.7.1 节第四步 | 阈值分期上调计划无法制定 |
| 13 | 实物盘点、检修期、财务结账期的周期安排 | 规则库 | 甲方各业务主管部门 | 第 4.7.2 节 | 周期性误报无法排除 |
| 14 | 首轮全量扫描的实测结果 | 需求清单、分析报告 | 项目期产出 | 「现状实测」各列;报告质量分章节 | 目标值与评分无法填写 |
表中第 4、第 5、第 8、第 9 项是规则库能否按期交付的关键依赖。 这四项都不是甲方需要新做的工作,而是已有资料的归集与确认: 图号编码规则存在于工艺部门的习惯中,硬度区间存在于工艺标准与检验规程中, 测点参数存在于测点配置表中,码表存在于各系统的下拉选项中。 项目期的做法是在蓝图设计阶段以专项访谈与资料核对的方式逐项归集, 归集结果形成《质量规则参照资料汇编》随规则库一并提交甲方确认。
第 12 项值得单独说明。阈值分期上调计划的制定需要知道各业务部门 每月能处理多少问题单,这个数字甲方此前没有统计过。 项目期的做法是在观察期内按实际处置速度测算,而不是先问一个数字再按它定阈值—— 问出来的数字通常偏乐观,按它定的阈值会在第二个月就形成积压。