说它正确,要有依据。
02 / 验证
向下探索,亲手操作。
01同一个问题,又是 94%。
一周后,另一笔大额订单带来了同一个问题。智能体又回答了 94%。记忆里还留着上次的修正,但这不代表答案会遵守它。
做决定前,分开查两件事:算得对不对,答的是不是这个问题。
02算得对吗?
按答案采用的口径,重新统计上个月的 100 笔订单。
在工厂承诺交期内交付:94 / 100
94%,与原答案一致。
通过 · 计算没有错
03回答了这个问题吗?
把答案采用的口径,与记忆中的修正逐项对照。
还未核对计算。 先核对计算
- 答案采用的口径
- 按工厂承诺交期统计
- 记忆中的修正
- 这个问题,按客户要求交期回答(销售负责人)
未通过 · 算得对,却答了另一个问题
04用两种口径,各算一次。
同样的 100 笔订单,分别按工厂承诺交期和客户要求交期统计。
还未核对计算。 先核对计算
- 工厂承诺交期
- 94 / 10094%
- 客户要求交期
- 79 / 10079%
相差的 15 笔,赶上了工厂承诺交期,却错过了客户要求交期。另有 6 笔,两种交期都没赶上。
查看这 15 笔订单
- O-005客户要求 9日工厂承诺 10日实际交付 10日
- O-012客户要求 14日工厂承诺 18日实际交付 18日
- O-018客户要求 12日工厂承诺 14日实际交付 14日
- O-024客户要求 10日工厂承诺 14日实际交付 14日
- O-031客户要求 15日工厂承诺 18日实际交付 18日
- O-037客户要求 13日工厂承诺 14日实际交付 14日
- O-043客户要求 11日工厂承诺 14日实际交付 14日
- O-050客户要求 16日工厂承诺 18日实际交付 18日
- O-056客户要求 14日工厂承诺 18日实际交付 18日
- O-062客户要求 12日工厂承诺 14日实际交付 14日
- O-069客户要求 17日工厂承诺 18日实际交付 18日
- O-075客户要求 15日工厂承诺 18日实际交付 18日
- O-081客户要求 13日工厂承诺 14日实际交付 14日
- O-088客户要求 18日工厂承诺 22日实际交付 22日
- O-094客户要求 16日工厂承诺 18日实际交付 18日
修正后的答案
上个月的按期交付率,按客户要求交期计算为 79%(按工厂承诺交期计算为 94%)。
算得对, 不代表答得对。
设计原则
把验证拆成两步:计算是否正确,口径是否符合问题。口径不明,就明确说不明。决定交给人,决定本身也要留下记录。
这是一个虚构的简化示例,用 100 笔模拟订单验证一个问题。两组比例均由页面中的订单数据实际计算得出。真实验证还需要核对口径的来源和统计范围。
