メインコンテンツまでスキップ

Metric-less Improvement

A Failure Pattern of Measurement Gap and Broken Learning Loop

Summary​

Metric-less Improvement は、測定が存在しないまま改善活動が継続され、 「良くなっているはずだ」という感覚だけが積み上がっていく Failure Pattern である。

本 Pattern では、改善意欲や努力そのものが否定されることはない。 むしろ、測定が欠落した環境においては、 改善を続けること自体が最も合理的な振る舞いとなり、 その結果として学習が成立しなくなる構造を扱う。

Context​

プロジェクトやチームにおいて、 改善は常に求められている。

パフォーマンス、品質、開発体験、スピードなど、 何らかの問題意識が共有され、 振り返りや改善施策が継続的に実施される。

しかし多くの場合、 「何がどれだけ変わったか」を示す共通の指標を持たないまま改善が進められる。 測定はコストが高く、合意形成も必要なため、 短期的な成果を求められる状況では後回しにされやすい。

その結果、改善は事実ではなく印象として語られ、 活動そのものが目的化しやすくなる。

Forces​

この Pattern を生み出す主な力学は以下である。

  • 測定コストの高さ
    指標の定義や収集には時間と合意が必要であり、 短期的な成果を求められる状況では後回しにされやすい。

  • 改善への期待圧力
    何もしないことは停滞とみなされるため、 効果が不明確でも改善施策を実行することが評価されやすい。

  • 不確実性の高さ
    結果がすぐに現れない領域では、 測定不能であること自体が前提として受け入れられる。

  • 成功・失敗の非対称性
    改善が失敗した場合の影響は限定的である一方、 何も改善しないことの説明責任は重くなる。

Failure Mode​

測定が存在しないため、 改善施策と結果の対応関係を検証できなくなる。

その結果、以下のような壊れ方が同時に進行する。

  • 効果の有無が区別されない
    効果のあった施策と、なかった施策が同列に扱われる。

  • 判断が納得感へ収束する
    改善の是非が感想や空気で決まり、比較や反証が成立しない。

  • 次の改善が前回の結果に接続されない
    施策の継続・中止が観測に基づかず、同じ試行錯誤が反復される。

改善は継続されるが、 判断や振る舞いは更新されない。

Consequences（定着する影響）​

Countermeasures（向きを変える最小介入）​

以下は解決策の一覧ではなく、 Failure Mode に対して最小限の介入で力学を変えるための対抗パターンである。

  • 改善の是非ではなく、 何を観測しようとしているかを判断の前提として明示する
  • 精度より比較可能性を優先し、 差分として観測できる形に落とす
  • 改善を「続けること」ではなく、 やめる判断ができる状態を目標に据える

Resulting Context（新しい当たり前）​

改善は依然として必要であり、 すべてが数値で割り切れるようになるわけではない。

しかし、測定が最小限でも存在することで、 改善と結果の関係が議論可能となる。

その結果、改善はイベントではなく学習となり、 次の判断に接続されるようになる。

See also​

  • Local Optimization Trap
    全体指標が存在しない状況で、局所的な改善が合理化され続ける派生パターン。

  • Test-Passing Illusion
    測定不能な領域において、代理指標が「改善した」という感覚を補完してしまう構造。

Appendix: Conceptual References​

Appendix: References​

  • W. Edwards Deming, Out of the Crisis, 1982.
  • Stafford Beer, Cybernetics and Management, 1959.
  • Stafford Beer, The Heart of Enterprise, 1979.
  • Eric Ries, The Lean Startup, 2011.
にHiroshi Kurabayashiが最終更新