判断需求提报规范是否改善需求质量，核心是拿同一套口径做前后对比：固定观察窗口和需求范围，分别统计信息完整度、返工澄清和规范执行一致性三类过程指标，再与评审退回、进入后变更等结果指标对照。只有口径可比、样本足够、趋势在多个窗口稳定且结果指标同向变化，才能得出改善结论。
要点总览（TL;DR）
- 判断规范是否改善质量，要用同一口径做前后对比：固定观察窗口和需求范围，分别统计信息完整度、返工澄清、规范执行一致性三类过程指标，再与评审退回率、进入后变更率等结果指标对照。
- 信息完整度看必填字段齐全率和一次提报合格率；返工澄清看澄清轮次、澄清耗时和返工率；规范执行一致性看规范覆盖率、字段填写一致率和例外比例。
- 改善结论需同时满足：口径可比、样本量足够、趋势在多个窗口稳定、结果指标同向变化；单看某一项指标上升不能证明质量改善。
- 过程指标改善而结果指标不动，只能判为“规范执行改善、需求质量待观察”；规范覆盖率过低或样本不足时，应正式给出“无法判断”的结论。
- 解读时要排除需求类型结构、提报人构成和评审标准变化等干扰因素，结论按“范围＋指标＋方向＋限制”的结构表述，并按季度或规范重大调整后复评。
评估目标：先明确要证明什么
评估要回答的命题可以写成一句话：需求提报规范执行后，需求进入环节的质量是否比执行前提升。这里的“质量”指需求在进入评审或需求池之前的状态，包括信息是否齐全、是否一次说清、是否需要反复澄清。评估对象是提报规范这一进入机制，需求池整理、优先级排序、服务请求受理不在本次范围内。
把命题拆开，需要分别验证三件事：规范是否被实际执行、执行后提报信息是否更完整、信息更完整是否减少了进入后的返工和变更。三件事对应不同指标，缺一项就难以支撑完整结论。
评估结论有三种可能，应提前约定表述方式：
- 改善：过程指标与结果指标同向变好，且在多个观察窗口稳定出现。
- 无变化：指标在正常波动范围内，或过程指标改善但结果指标未动。
- 无法判断：样本不足、口径不可比、规范执行率过低，数据不足以支撑任何方向性结论。
提前写明“无法判断”也是一种正式结论，可以避免在数据不足时勉强给出改善结论。评估开始前，建议用一页纸记录命题、对象边界、观察窗口和结论类型，作为后续取数和解读的依据。
指标与范围：三类过程指标加一组结果指标
指标分为过程指标和结果指标两层。过程指标衡量规范执行和提报信息本身的状态，结果指标衡量需求进入后是否减少了返工。两类指标要一起看，过程指标变好而结果指标不变，说明规范可能只改变了填写形式。
| 类别 | 指标 | 公式 | 单位 | 回答的问题 |
|---|---|---|---|---|
| 信息完整度 | 必填字段齐全率 | 必填字段全部填写的需求数 ÷ 纳入统计的需求总数 | % | 提报信息是否达到基本完整 |
| 信息完整度 | 一次提报合格率 | 首次提报即通过完整性检查的需求数 ÷ 首次提报需求总数 | % | 提报人是否一次就能提交合格需求 |
| 返工澄清 | 澄清轮次 | 进入评审前澄清沟通轮次总和 ÷ 发生澄清的需求数 | 轮/需求 | 平均需要几轮沟通才能说清 |
| 返工澄清 | 澄清耗时 | 从首次提报到信息满足评审要求的时间总和 ÷ 发生澄清的需求数 | 小时或工作日 | 澄清占用多长时间 |
| 返工澄清 | 返工率 | 因信息缺失被退回补充的需求数 ÷ 纳入统计的需求总数 | % | 多少需求需要退回重填 |
| 规范执行一致性 | 规范覆盖率 | 通过规范表单提报的需求数 ÷ 纳入统计的需求总数 | % | 规范是否覆盖目标需求 |
| 规范执行一致性 | 字段填写一致率 | 同一字段在不同提报人间填写口径一致的需求数 ÷ 抽查需求数 | % | 字段是否被按同一含义填写 |
| 规范执行一致性 | 例外比例 | 走例外通道或免填部分字段的需求数 ÷ 纳入统计的需求总数 | % | 规范被绕开的程度 |
| 结果 | 评审退回率 | 评审阶段因信息问题退回的需求数 ÷ 参加评审的需求数 | % | 进入评审后是否仍因信息不足被退回 |
| 结果 | 进入后变更率 | 进入需求池后因原始信息不清发生变更的需求数 ÷ 进入需求池的需求数 | % | 信息问题是否延续到后续环节 |
| 结果 | 返工工时 | 澄清、退回补充、因信息问题变更所耗工时总和 ÷ 纳入统计的需求数 | 小时/需求 | 信息问题造成的实际投入 |
统计范围需要固定四项：需求类型（如业务需求、内部优化需求）、来源渠道（如业务部门提报、运营反馈）、时间窗（规范实施前后各取等长窗口）、纳入与排除规则（如排除测试性提报、重复提报、服务请求）。范围一旦确定，前后两个窗口保持一致，中途调整需在报告中注明并说明影响。
这些指标需要稳定的承载方式。提报表单的必填字段、评审记录中的退回原因、澄清沟通记录和变更记录，如果分散在表单、邮件和即时消息里，取数时容易口径不一。ONES 的需求管理可以把提报字段、评审状态和变更记录放在同一工作项上，评估时按字段和状态导出，减少人工归并带来的口径偏差；澄清轮次和耗时则依赖沟通记录是否回填到工作项，需要在规范中约定回填要求。
数据口径与证据：让前后两组数据可比
前后对比最容易出错的地方是口径漂移：规范上线时同时调整了字段定义、需求分类或统计起点，导致两组数据实际不可比。取数前应先写一份口径说明，逐项固定以下内容。
- 字段定义：每个必填字段的含义、可接受取值、是否允许填“待定”。规范前后字段含义发生变化时，需按新定义回溯重算旧数据，或明确标注不可比。
- 需求类型分类：使用同一套分类标准，避免规范后新增分类导致结构变化被误读为质量变化。
- 统计起止点：统一以首次提报时间作为起点，以通过完整性检查或进入评审作为终点，澄清耗时按同一区间计算。
- 数据来源：提报表单字段、评审记录、澄清沟通记录、变更记录四类来源，分别记录导出时间和筛选条件。
样本方面，每个观察窗口的需求数量应足以支撑比例类指标的稳定估计；样本过少时，比例指标波动大，应改为描述性呈现并标注样本量。抽样核查字段填写一致率时，采用随机抽样并记录抽样框和抽样比例，保留抽查清单和原始记录，便于复算。
缺失值和异常值需提前约定处理规则：字段为空按“未填写”计入分母，不剔除；澄清轮次记录缺失的需求单独列出，不并入均值计算；明显异常的耗时（如跨月未处理）标注后单独说明，不直接删除。所有处理规则写入口径说明，前后窗口一致执行。
计算与评估步骤：从取数到得出结论
评估按五步推进，每一步都留下可复算的记录。
- 确定两个观察窗口：规范实施前取一个完整周期，实施后取等长周期，并在实施后预留一段适应期再开始统计，避免上线初期的磨合波动混入结果。
- 按同一口径计算指标：用上一节的口径说明逐项计算三类过程指标和结果指标，每个指标记录分子、分母、样本量和时间窗。
- 做前后对比与分组对比：先看整体前后变化，再按需求类型、来源渠道、提报人分组比较。分组能暴露整体均值掩盖的差异，例如某类需求改善明显而另一类没有变化。
- 判断变化是否稳定、是否同向：把实施后的窗口再切成两到三段，观察指标是否持续同向变化；同时检查过程指标与结果指标的方向是否一致。
- 形成结论：按评估目标中约定的三种结论类型给出判断，并附上支撑数据和限制说明。
判定规则建议写成明确条件：过程指标中信息完整度和返工澄清两类均朝好的方向变化，结果指标至少一项同向变化，且变化在实施后多个子窗口中重复出现，可判为改善；过程指标改善但结果指标无变化，判为“规范执行改善、需求质量待观察”；规范覆盖率或字段填写一致率过低时，判为无法判断。判定规则不设通用达标线，具体阈值由团队根据历史数据确定并写入评估方案。
算例：一次完整的指标计算
以下为演示情景，数值仅用于说明计算过程。某团队规范实施前窗口纳入 200 条需求，实施后窗口纳入 220 条需求。
| 指标 | 实施前 | 实施后 | 计算示例 |
|---|---|---|---|
| 必填字段齐全率 | 62% | 85% | 前：124÷200；后：187÷220 |
| 一次提报合格率 | 48% | 70% | 前：96÷200；后：154÷220 |
| 返工率 | 35% | 18% | 前：70÷200；后：40÷220 |
| 澄清轮次 | 2.4 轮/需求 | 1.5 轮/需求 | 前：168÷70；后：60÷40 |
| 评审退回率 | 22% | 20% | 前：44÷200；后：44÷220 |
| 规范覆盖率 | — | 92% | 后：202÷220 |
解读这组数据：信息完整度和返工澄清指标明显改善，规范覆盖率达到 92%，说明规范被实际执行；但评审退回率仅从 22% 降到 20%，变化幅度小，需要进一步看退回原因是否仍集中在信息问题。若退回原因中信息类占比同步下降，可判为改善；若退回原因转向需求价值或范围问题，则说明规范解决了信息问题，但评审退回的主要成因已不在提报环节。
分母为零的情况需要单独处理：若实施后窗口没有发生澄清的需求，澄清轮次的分母为零，此时不计算均值，直接报告“无澄清需求”，不能记为 0 轮后与前期均值比较。样本过少时，例如某分组只有 8 条需求，比例指标只作描述，不参与整体结论判定。
解读与限制：哪些结论不能下
指标改善与需求质量改善之间是相关关系，不能直接当作因果关系。规范上线同期可能发生其他变化，解读时需要排除或说明以下干扰因素：
- 需求类型结构变化：实施后窗口如果集中出现简单需求，完整率和返工率会自然变好，应按类型分组对比后再下结论。
- 提报人构成变化：新提报人比例上升或核心提报人集中提交，都会影响均值，需按提报人分组观察。
- 评审标准变化：评审口径收紧或放宽会直接改变退回率，评估期间应保持评审标准稳定，发生变化时在报告中说明。
规范执行不一致时，解读要更谨慎。规范覆盖率低或例外比例高，说明相当一部分需求没有走规范流程，此时整体指标的变化不能归因于规范本身，应先分析例外原因，再决定是否延长观察期或调整规范。
结论表述建议采用“范围＋指标＋方向＋限制”的结构，例如：“在业务需求范围内，规范实施后两个窗口的必填字段齐全率和一次提报合格率持续上升，返工率下降，评审退回率小幅下降；由于同期评审标准未变、需求类型结构基本稳定，判断为改善，进入后变更率仍需下一个窗口确认。”复评节奏建议按季度或按规范重大调整后重新执行一次完整评估，保持口径不变，便于纵向比较。
常见问题
规范上线时同时调整了必填字段和需求分类，前后数据还能直接比吗？
不能直接比。字段含义或分类标准变化后，两组数据实际口径不同，直接对比会把口径变化误读为质量变化。处理方式有两种：按新定义回溯重算旧窗口数据，使两组口径一致；或者明确标注该指标不可比，只对比口径未变的指标，并在报告中说明原因。评估开始前把字段定义、分类标准、统计起止点写进口径说明，是避免这类问题的前提。
规范覆盖率不高时，整体指标变好能不能说明规范起了作用？
要谨慎。规范覆盖率低或例外比例高，说明相当一部分需求没有走规范流程，整体指标的变化可能来自这部分需求或其他因素，不能直接归因于规范本身。建议先分析例外原因：是规范不适配某类需求，还是提报人习惯未改变。再决定是延长观察期、调整规范，还是只对走规范流程的需求单独统计后再下结论。
某个分组样本只有几条需求，比例指标还要不要算？
可以算，但只作描述性呈现，并标注样本量，不参与整体结论判定。样本过少时比例指标波动很大，一两条需求的变化就能让比例大幅跳动。分母为零的情况单独处理，例如实施后窗口没有发生澄清的需求，澄清轮次不计算均值，直接报告“无澄清需求”，不能记为 0 轮后与前期均值比较。
过程指标都变好了，但评审退回率没降，该怎么下结论？
这种情况判为“规范执行改善、需求质量待观察”，不判为改善。接着看退回原因构成：如果信息类退回占比下降，说明规范解决了提报环节的问题，退回主要成因已转向需求价值或范围判断；如果信息类退回占比没变，说明规范执行可能停留在填写形式，需要检查字段填写一致率和例外比例，确认规范是否被按同一含义执行。
评估做完判为改善之后，多久需要再评一次？
建议按季度复评，或在规范发生重大调整后重新执行一次完整评估，并保持口径不变，便于纵向比较。复评时沿用同一套指标定义和统计范围，重点观察此前未确认的指标，例如进入后变更率是否随窗口延长出现同向变化。如果复评发现趋势反转，应回到干扰因素排查，而不是直接推翻此前的结论。
