타겟이 하는 일
목표는 바람직한 결과를 숫자로 나타낸 것입니다. 예를 들어, 연말까지 매출 50만 달러 달성, 직원 유지율 85% 이상, 업무 완료율 95% 등이 있습니다. 목표는 경영진이 야심, 과거 평균, 기부자 요구 사항 또는 경쟁사 기준 등을 고려하여 설정합니다. 목표는 조직이 달성하고자 하는 바를 나타냅니다.
목표는 조직 내에서 특정한 행동 양식, 즉 목표 추구를 낳습니다. 직원과 관리자는 목표 수치 자체에만 집중하고, 그 수치를 만들어내는 과정에는 관심을 기울이지 않습니다. 수치가 목표에 근접하면 보고 체계가 무너지고, 목표를 초과하면 축하를 받습니다. 이처럼 수치를 만들어내는 과정은 대부분 눈에 보이지 않고, 오직 결과물만이 평가 대상이 됩니다.
이로 인해 두 가지 실패 모드가 발생합니다. 첫째, 목표치는 달성되지만 공정은 악화되는 경우입니다. 공정이 붕괴 직전까지 가는 동안에도 산출량이 몇 달 동안 목표치 이상을 유지할 수 있기 때문입니다. 둘째, 공정이 정상적으로 작동하는 동안에도 목표치를 달성하지 못하는 경우입니다. 어떤 공정이든 정상적인 변동으로 인해 실제 문제가 있는지 여부와 관계없이 설정된 임계값보다 낮은 수치가 가끔씩 나타날 수 있기 때문입니다.
목표는 관찰값을 성과 점수로 변환합니다. 보정된 임계값은 관찰값을 신호로 변환합니다. 점수는 원하는 수치를 달성했는지 여부를 알려줍니다. 신호는 해당 수치를 산출하는 과정에서 실제로 변화가 있었는지 여부를 알려줍니다. 이 두 정보는 서로 다릅니다.
보정된 임계값의 역할
보정된 임계값은 해당 프로세스의 이력, 특히 정상적으로 작동할 때 발생하는 자연적인 변동으로부터 도출됩니다. 모든 프로세스에는 자연적인 변동 범위가 있습니다. 어떤 주는 값이 높고 어떤 주는 낮을 수 있지만, 이는 해당 프로세스의 정상적인 작동 범위를 반영합니다. 보정된 임계값은 바로 이 범위의 경계를 나타냅니다.
자연적인 변동 범위 내에 속하는 관측값은 일반적인 원인에 의한 변동, 즉 잡음입니다. 따라서 특별한 조치가 필요하지 않습니다. 그러나 자연적인 변동 범위를 벗어나는 관측값은 특수 원인 신호로, 프로세스에 실제로 변화가 발생했음을 나타냅니다. 이러한 경우에는 단순히 보고하는 것이 아니라 조사가 필요합니다.
일반 원인 변동과 특수 원인 변동의 구분은 W. 에드워즈 데밍이 1982년에 공정 모니터링의 수학적 기초로 정립한 개념입니다. MetriqOne 보정 로그와 이동 평균을 통해 이를 PI 계층에 직접 통합합니다. 스택의 모든 PI 임계값은 관리 목표가 아닌 보정된 자연 공정 한계입니다.
Back-End Verification Matrix
| 상황 | 목표 반응 | 보정된 임계값 응답 |
|---|---|---|
| 읽기 속도가 목표치보다 약간 낮아졌습니다. | 문제가 확대되어 관리자가 개입합니다. 직원들은 정상적인 변동 사항에 대해 감시당하는 느낌을 받습니다. | 측정값은 이동평균을 기준으로 평가됩니다. 정상 범위 내에 있으면 개입이 필요 없으며, 범위를 벗어나면 조사가 시작됩니다. |
| 읽기 수치는 목표치 이상으로 유지되지만 프로세스는 변동됩니다. | 녹색 신호. 아무런 응답 없음. 위기는 수개월 동안 보이지 않게 고조된다. | 이동평균 추세가 감지되었습니다. 위험 신호가 발생했습니다. 임계값을 초과하기 전에 조사를 진행하십시오. |
| 독서량이 목표치보다 훨씬 낮아졌습니다. | 적색 경보. 긴급 대응. 대개 피해를 막기엔 너무 늦습니다. | 자연적인 과정의 한계를 넘어서면서 몇 주 전에 적색 경보가 발령되었습니다. 피해를 예방할 수 있는 시점에 대응 조치가 시행되었습니다. |
| 독서량이 목표치를 크게 초과했습니다. | 축하할 일입니다. 아마도 새롭고 더 높은 목표가 설정되었을 것입니다. | 읽기 능력을 평가합니다. 정상 범위 내에 있으면 정상적인 변동으로 간주합니다. 상한선을 벗어나면 특수한 원인을 조사해야 합니다. 어떤 부분이 긍정적으로 변화했는지, 그리고 그 변화가 지속될 수 있는지 검토해야 합니다. |
MetriqOne 어떻게 보정된 임계값을 설정하는가?
MetriqOne 의 보정 프로세스는 이동 평균(지표의 최근 측정값을 누적 계산하는 방식)과 해당 평균의 시간 경과에 따른 변동을 기반으로 계산된 자연 프로세스 한계를 사용합니다. 과거 데이터가 없는 신규 구축의 경우, 초기 임계값은 유사 프로세스 방법, 전문가 추정 방법 또는 운영 최소값 방법의 세 가지 대리 보정 방법 중 하나를 사용하여 설정됩니다.
임계값은 첫 번째 관측을 수행하기 전에 설정됩니다. 이 임계값은 이름, 날짜 및 문서화된 근거와 함께 보정 로그에 기록됩니다. 보정 로그는 변경 불가능한 기록이므로, 사후에 결과를 조작하기 위해 수정할 수 없습니다. 첫 번째 필수 수정 날짜는 배포 시점에 설정되며, 사용된 대리 측정 방법에 따라 3, 4 또는 6번의 관측 주기가 됩니다.
데이터를 관찰하기 전에 임계값을 설정하는 이러한 원칙이 바로 보정의 신뢰성을 확보하는 핵심입니다. 데이터를 본 후에 임계값을 설정하는 것은 보정이 아니라 사후 합리화일 뿐입니다.
소규모 Enterprise 주간 매출을 추적했습니다. 경영진은 비용을 충당하고 약간의 흑자를 내는 데 필요한 금액을 기준으로 주당 15,000달러의 목표를 설정했습니다. 12주 동안 매출은 12,500달러에서 17,800달러 사이였습니다. 목표를 달성한 경우는 7번, 미달한 경우는 5번이었습니다. 직원들은 5번은 실적이 저조했다고 느꼈고, 7번은 성공했다고 느꼈습니다. 실제 변동폭은 해당 유형과 규모의 기업에서 일반적으로 나타나는 범위 내에 있었습니다.
MetriqOne 교정을 동일한 12주간의 데이터에 적용했을 때, 자연적인 공정 한계값이 계산되었습니다. 하한값은 11,200, 상한값은 18,900이었습니다. 이 12주 동안의 모든 측정값은 자연적인 범위 내에 있었습니다. 이상 징후는 하나도 없었고, 관리자의 개입이 필요한 경우도 없었습니다. 변동은 노이즈, 즉 기업 매출 프로세스의 정상적인 작동 과정에서 발생하는 오차였습니다.
14주 차에 매출이 9,800달러로 떨어져 자연적인 하한선 아래로 내려갔습니다. 이는 분명한 신호였습니다. 무언가 변화가 생긴 것입니다. 조사 결과, 주요 Enterprise 납품 지연으로 인해 두 건의 고객 주문을 놓친 것으로 드러났습니다. 대응은 즉각적이고 구체적이었습니다. 이러한 조치는 매출 감소보다는 근본적인 원인을 해결하는 데 초점을 맞췄습니다.
목표 설정 시스템에서는 14주 차에 이전 5주 동안의 "목표 미달"과 마찬가지로 직원들에게 압박과 부담이 가중되는 동일한 반응이 나타났을 것입니다. 하지만 보정 시스템에서는 14주 차가 이전 주들과는 완전히 다른 양상을 보였기 때문에 다른 반응이 나타났습니다. 이것이 바로 신호의 역할입니다. 목표는 이러한 역할을 수행할 수 없습니다.
테이크아웃
목표물은 목표물 추적을 유발하고, 보정은 신호 탐지를 가능하게 합니다. 첫 번째 방법은 조직이 특정 숫자에 집중하도록 하고, 두 번째 방법은 그 숫자를 뒷받침하는 과정이 실제로 변화했는지에 집중하도록 합니다.
일반적인 원인에 의한 변동은 신호가 아닙니다. 그것을 마치 신호인 것처럼 대응하는 것은 조작이며, 조작은 프로세스를 더 안정적으로 만드는 것이 아니라 오히려 불안정하게 만듭니다. 보정된 임계값은 무엇이 노이즈이고 무엇이 신호인지를 식별합니다.
임계값은 첫 번째 관찰 전에 선언되어야 합니다. 데이터를 확인한 후 설정된 임계값은 합리화 과정입니다. 보정 로그는 관측이 시작되기 전에 임계값을 이름과 날짜와 함께 기록합니다.
앰버는 시스템에서 가장 가치 있는 신호입니다. 임계값을 넘기 전에 편차를 감지합니다. 목표물에는 황색등이 없고 녹색과 적색등만 있습니다. 보정된 임계값을 통해 고장이 발생하기 전에 대응할 시간을 확보할 수 있습니다.