Framework Explained

キャリブレーションとターゲット:すべてを変える違い

目標値は、あなたが何を望んでいるかを示します。一方、調整済みの閾値は、プロセスが実際に何ができるのか、そして何が本当に変化したのかを示します。MetriqOne MetriqOne調整済みの閾値を使用しています。その違いは技術的なものではありません。それは、数値を追い求めることと、シグナルを検出することの違いです。

ターゲットが何をするか

目標とは、望ましい結果を数値で表したものです。年末までに売上高50万ドルを達成する。従業員の定着率を85%以上にする。納品完了率を95%にする。目標は、経営陣が野心、過去の平均値、資金提供者の要求、または競合他社のベンチマークに基づいて設定します。目標は、組織が達成したいことを表します。

目標設定は、組織特有の行動様式、すなわち目標達成への執着を生み出します。従業員や管理者は、数値を生み出すプロセスではなく、数値そのものに注目します。数値が目標値に近づくと、目標達成に向けた取り組みが強化され、目標値を超えると、それを称賛します。数値の背後にあるプロセスはほとんど目に見えず、評価されるのは数値の結果のみです。

これにより、2つの失敗モードが生じます。1つ目は、プロセスが悪化しているにもかかわらず目標が達成される場合です。これは、プロセスが崩壊に向かっている間も、出力が目標を数ヶ月間上回り続ける可能性があるためです。2つ目は、プロセスが正常に稼働しているにもかかわらず目標が達成されない場合です。これは、プロセスが実際に問題を抱えているかどうかに関わらず、あらゆるプロセスの通常の変動によって、時折、固定された閾値を下回る値が発生する可能性があるためです。

目標値は観測結果をパフォーマンススコアに変換します。較正された閾値は観測結果を信号に変換します。スコアは、目標値に達したかどうかを示します。信号は、その数値を生成するプロセスにおいて実際に何かが変化したかどうかを示します。これらは同じ情報ではありません。

校正済み閾値とは

較正済み閾値は、プロセスの履歴、具体的には、プロセスが正常に機能しているときに発生する自然な変動から導き出されます。すべてのプロセスには自然な変動範囲があり、ある週は高く、ある週は低くなりますが、それはそのプロセスの正常な動作を反映した範囲内です。較正済み閾値は、その範囲の境界を特定します。

自然範囲内の観測値は、一般的な変動、つまりノイズです。これに対しては対応は不要です。自然範囲外の観測値は、特殊原因シグナル、つまりプロセスにおいて何らかの変化が実際に発生したことを示しています。これは報告だけでなく、調査が必要です。

この共通原因変動と特殊原因変動の区別は、W・エドワーズ・デミングが1982年にプロセス監視の数学的基礎として確立したものです。MetriqOne MetriqOne 、キャリブレーションログと移動平均を通じて、これをPIレイヤーに直接統合しています。スタック内のすべてのPIしきい値は、管理目標ではなく、キャリブレーションされた自然なプロセス限界です。

Back-End Verification Matrix

状況 ターゲット応答 校正済み閾値応答
読解力は目標をわずかに下回る 事態の悪化が発生。マネージャーが介入。スタッフは、通常の変動に対しても厳しく監視されていると感じる。 読解力は移動平均と比較して評価される。自然な範囲内であれば介入は不要。範囲外であれば調査を開始する。
読解力は目標値を上回るものの、処理速度は低下している。 青信号。応答なし。危機は数ヶ月にわたり、目に見えない形で進行していく。 移動平均トレンドが検出されました。アンバーシグナルが発動しました。閾値を超える前に調査を行います。
読書率は目標を大きく下回る 赤信号。緊急対応。通常、被害を防ぐには手遅れ。 自然過程の限界値超過により、数週間前に赤信号が発令された。被害を未然に防ぐことができる段階で対応策が実施された。
読書量が目標を大幅に上回る 祝賀ムード。新たな、より高い目標設定の可能性も。 読解力を評価した。正常範囲内であれば、通常の変動と判断する。上限値を超える場合は、特別な原因が考えられる。何が改善したのか、そしてその改善が持続可能かどうかを調査する。

MetriqOneキャリブレーション済みしきい値を設定する方法

MetriqOneのキャリブレーションプロセスでは、移動平均(指標の最近の測定値をローリング計算したもの)と、その平均値の経時的な変動から算出される自然プロセス限界値を使用します。履歴データがない新規導入の場合、初期しきい値は、類似プロセス法、専門家推定法、運用最小値法のいずれかのプロキシキャリブレーション方法を使用して設定されます。

閾値は最初の観測が行われる前に宣言されます。閾値は、名称、日付、および根拠となる文書とともに校正ログに記録されます。結果を良く見せるために後から修正することはできません。校正ログは変更不可能な記録です。最初の必須修正日は、展開時に設定されます。使用する代理方法に応じて、3、4、または6回の観測サイクル後となります。

データを見る前に閾値を設定するというこの規律こそが、キャリブレーションの信頼性を高める要素である。データを見た後に閾値を設定することは、キャリブレーションとは言えない。それは事後的な合理化に過ぎない。

The same process, two approaches

ある小規模Enterprise週ごとの売上を追跡調査した。経営陣は、経費を賄い、わずかな黒字を生み出すために必要な金額として、週15,000の目標を設定した。12週間の売上は12,500から17,800の間で推移した。目標は7回達成され、5回未達成だった。従業員は5回は業績が低かったと感じ、7回は成功したと感じた。実際の変動は、この業種・規模の企業にとって全く通常の範囲内であった。

MetriqOneキャリブレーションを同じ12週間のデータに適用したところ、自然なプロセス限界が算出されました。下限は11,200、上限は18,900でした。この12週間におけるすべての測定値は、自然な範囲内に収まっていました。異常値を示すものは一つもなく、経営陣の介入を必要とするものも一つもありませんでした。変動はノイズ、つまり事業の収益プロセスの正常な運用範囲内でした。

第14週、売上高は9,800にまで落ち込み、自然なプロセス限界の下限を下回った。これは明らかな兆候だった。何かが変わったのだ。調査の結果、主要サプライヤーの納品遅延が原因で、 Enterprise顧客からの注文を2件逃していたことが判明した。対応は的確かつ迅速だった。介入は、数字ではなく、根本原因に対処するものだった。

目標設定方式では、14週目は「目標未達」の5週間と同様に、スタッフへの圧力や対応の強化といった事態を引き起こしていたでしょう。しかし、調整方式では、14週目はそれまでのどの週とも全く異なる状況だったため、異なる対応が取られました。これこそがシグナルの役割であり、目標設定では実現できないことです。

取り除く

01

目標は目標追跡を生み出す。校正は信号検出を生み出す。 前者は組織をある数値に集中させる。後者は、その数値の背後にあるプロセスが実際に変化したかどうかに焦点を当てる。

02

共通原因による変動はシグナルではない。 それをノイズであるかのように扱うのは改ざん行為であり、改ざん行為はプロセスをより安定させるのではなく、むしろ不安定にする。較正された閾値は、何がノイズで何が信号かを区別する。

03

閾値は最初の観測を行う前に宣言されなければならない。 データを見た後に設定された閾値は、合理化のためのものです。キャリブレーションログには、観測が行われる前に、閾値が名前と日付とともに記録されます。

04

琥珀色は、このシステムにおいて最も価値の高い信号である。 しきい値を超える前にドリフトを検出します。ターゲットには黄色表示はなく、緑と赤のみが表示されます。校正済みのしきい値により、障害が発生する前に対応するための時間的余裕が確保されます。

The MetriqOne Trilogy

目標を追いかけるのはやめよう。シグナルを検知することに集中しよう。

第1巻では、移動平均、自然プロセス限界、キャリブレーションログなど、キャリブレーションの全範囲を、段階的な例題とともに解説しています。

Amazonで三部作をゲットしよう →