정도관리를 시작한 직후 기준값(관리도 중심선과 한계)이 계속 바뀌어 보이는 원인은 두 가지다. 하나는 데이터가 적어서 평균과 표준편차 추정치가 아직 자리를 잡는 중인 경우이고, 다른 하나는 운영자·시약 로트·유지보수 같은 실제 변동 요인이 이제야 데이터에 들어오는 경우다. Westgard는 최소 10일 동안 20회 이상, 가능하면 20 작업일 동안 측정해 첫 평균과 SD를 구하고, 이후 두 달 이상 누적값으로 다듬으라고 권고한다. CLSI C24는 3~6개월 누적을 권고하는 것으로 소개된다. 이 글은 지금 내 실험실이 설정 단계인지 안정화 단계인지 판단하는 기준, 움직임이 우연 변동인지 시스템 변화인지 진단하는 방법, 임시값을 정식값으로 바꾸는 시점을 정리한다.
목차
먼저 결론: 처음 몇 주 동안 기준값이 움직이는 것은 대부분 정상이다
기준값을 정한 초기에는 데이터가 쌓일 때마다 관리도 중심선과 한계선을 다시 계산하게 되므로 값이 조금씩 바뀐다. 이 시기의 기준값은 확정값이 아니라 추정 중인 값이기 때문이다.
Westgard는 첫 평균과 표준편차를 구하려면 최소 2주(10 작업일) 동안 20회 이상 측정하고, 가능하면 4주(20 작업일) 이상에 걸쳐 모으라고 한다. 이렇게 처음 정한 값도 이후 데이터가 쌓이면 다시 고쳐 쓰는 것을 전제로 한다. 수가 적을 때 구한 평균과 SD는 데이터가 늘수록 갱신할 수 있다는 것이 Westgard의 설명이다.
그래서 지금 따져 볼 것은 '바뀌어도 되는가'가 아니다. 다음 두 가지다.
1. 지금 바뀌는 것이 추정치가 자리를 잡는 과정인가, 측정 시스템이 실제로 달라진 것인가?
2. 언제까지 임시값으로 운영하고, 언제 정식값으로 고정할 것인가?
어느 기간에 어떤 값을 썼는지 기록으로 남겨야 한다는 점은 처음부터 지켜야 한다. ISO/IEC 17025:2017 7.7.1은 결과 유효성 모니터링 데이터를 경향을 알아볼 수 있는 방식으로 기록하고, 가능한 경우 통계 기법으로 검토하라고 요구한다. 기준값을 임시로 운영하는 기간이 있다면 그 사실과 적용 기간이 기록에 드러나야 한다.
기준값이 움직여 보이는 두 가지 원인
원인 1 — 추정치가 아직 수렴하지 않았다 (통계적 원인)
데이터 5개로 구한 평균은 같은 시스템에서 다음 5개를 더 측정하면 달라진다. 이것은 측정이 불안정해서가 아니라 표본이 작아서 생기는 현상이다. 평균의 흔들림은 대략 s/√n 크기이므로, 데이터 수가 4배가 되어야 흔들림이 절반으로 줄어든다. 처음 며칠은 값이 크게 움직이다가 점점 덜 움직이는 것이 정상적인 모습이다.
표준편차는 특히 짧은 기간에 작게 나오기 쉽다. Westgard는 수집 기간이 너무 짧으면 표준편차가 너무 작게 추정된다고 지적한다. 초기 한계선이 실제보다 좁게 잡히고, 데이터가 쌓이면서 한계가 넓어지는 것도 이 때문이다. 이 과정에서 한계를 벗어나는 점이 실제 이상 없이 나오기도 한다.
원인 2 — 실제 변동 요인이 이제야 데이터에 들어왔다 (시스템적 원인)
Westgard는 짧은 기간에는 다음 변동 요인이 데이터에 충분히 담기지 않는다고 설명한다. 한 달도 짧을 수 있다고 본다.
– 측정자가 바뀌는 경우
– 시약 로트가 바뀌는 경우
– 시료 프로브·피펫의 차이
– 유지보수 전후의 성능 차이
여기에 실험실마다 다른 요인이 더해진다. 실험실 온습도의 계절 변화, 막 개봉한 표준물질과 시간이 지난 표준물질의 차이, 시작 초기 측정자의 숙련도 차이 같은 것들이다. 이런 요인이 처음 데이터에 들어오면 평균이 한쪽으로 이동하거나 산포가 커진다. 이것은 '기준값이 틀렸다'는 뜻이 아니다. 초기 기준값이 대표하던 조건이 좁았다는 뜻이다.
두 원인은 대응이 다르다. 원인 1이면 데이터를 더 모으면 된다. 원인 2이면 무엇이 바뀌었는지 기록에서 찾아, 그 변화가 앞으로도 정상 운영의 일부인지(누적값에 포함) 일시적 사건인지(원인 조사 대상) 판단해야 한다.
가상 예시: 20일 동안 평균과 표준편차는 어떻게 움직이는가
아래는 가상(교육용) 데이터다. 한 QC 시료(공칭 50 µg/L 수준)를 하루 1회씩 20일 측정했다고 가정했다. 측정 시스템에는 아무 변화도 없고, 값의 차이는 모두 우연 변동이라고 설정했다.
– 처음 5일: 평균 50.38 µg/L, s 0.65 µg/L, RSD 1.3 %
– 처음 10일: 평균 50.33 µg/L, s 0.71 µg/L, RSD 1.4 %
– 20일 전체: 평균 50.29 µg/L, s 0.79 µg/L, RSD 1.6 %
평균은 0.09 µg/L 정도 움직였다. 다만 중첩된 기간의 평균 차이를 처음 5일의 s/√n만으로 판정할 수는 없으므로, 이 예시는 평균 변화가 크지 않아 보이는 교육용 사례로만 해석한다. 눈에 띄게 바뀐 것은 표준편차다. 데이터가 쌓이면서 s가 0.65에서 0.79로 커졌고, 평균 ±2s로 그은 한계도 함께 넓어졌다.
5일치로 만든 한계를 그대로 썼다면 13일째 51.8 µg/L와 16일째 48.9 µg/L가 한계 밖 경고로 표시됐을 것이다. 시스템은 변하지 않았으므로 두 경고 모두 짧은 기간에 산포를 작게 잡아서 생긴 것이다. 시작 직후 '기준값이 자꾸 바뀐다', '이상치가 자꾸 나온다'는 느낌이 드는 전형적인 상황이다.
이 예시에서 얻을 수 있는 실무 원칙은 두 가지다. 첫째, 초기에는 평균보다 표준편차가 더 크게 움직인다. 둘째, 초기 한계 밖으로 나간 점은 즉시 '시스템 이상'으로 판정하기 전에, 아직 설정 단계인지부터 확인한다. 다만 이 수치는 교육용 가상 데이터일 뿐이다. 어떤 항목에서든 이 정도 변화가 정상이라는 기준으로 쓰면 안 된다.
설정 단계와 안정화 단계는 무엇이 다른가
두 단계를 구분하지 않으면 설정 단계의 자연스러운 변화를 이상으로 오인하거나, 반대로 안정화 단계의 실제 이동을 '아직 초기라서'라며 넘기게 된다. 아래 표는 두 단계의 성격을 비교한 것이다. 기간과 데이터 수의 근거는 아래 본문과 글 끝의 근거 자료에서 확인할 수 있다.
| 구분 | 설정 단계 | 안정화 단계 |
|---|---|---|
| 기준값의 성격 | 임시값(잠정 평균·잠정 한계) | 누적값(lot-to-date)으로 다듬어지는 운영값 |
| 주된 목적 | 자기 실험실 조건에서 첫 평균과 SD를 얻는 것 | 운영자·로트·유지보수 등 장기 변동을 SD에 반영하는 것 |
| 기준값이 변하는 주원인 | 표본 수 부족에 따른 추정치 흔들림 | 새로운 변동 요인이 처음 데이터에 들어옴 |
| 변화의 전형적 모습 | 평균이 오르내리다 좁혀지고, SD가 대체로 커짐 | 특정 사건(로트 교체, 정비 등) 전후로 평균 또는 산포가 바뀜 |
| 한계 이탈 시 첫 질문 | 데이터가 아직 부족한가? | 그 시점에 무엇이 바뀌었는가? |
| 기준값 조정 방식 | 데이터가 늘 때마다 다시 계산 | 정해진 주기에 누적 계산하되, 사건 구간은 원인 확인 후 포함 여부 결정 |
| 문서화 | 임시값이라는 표시와 적용 기간 | 정식값 승인일, 적용 개시일, 산출에 쓴 데이터 범위 |
설정 단계가 끝나는 시점. Westgard는 최소 10일 동안 20회 이상, 가능하면 20 작업일 동안 20회 이상 측정하라고 권고한다. Westgard의 Q&A 답변은 새 평균과 SD를 정하는 일반 지침으로 20일 동안 최소 20회 측정을 제시한다. 10일은 성능에 영향을 주는 요인을 관찰하기 위한 최소 기간이고 20일이 더 낫다고도 설명한다.
안정화 단계의 길이. Westgard는 누적(lot-to-date) 평균·SD를 낼 때 '긴 기간'을 최소 두 달 이상으로 보고, 여러 달이나 1년까지도 될 수 있다고 한다. 또 CLSI C24 지침은 3~6개월간의 성능으로 만든 누적 평균과 SD를 쓰도록 권고한다고 소개한다. 이 권고는 그 기간 동안 시스템이 안정하다는 전제를 깔고 있다. 유효기간이 짧은 관리물질이나 시약 로트 간 차이가 큰 항목은 예외로 언급된다.
따라서 누적 기간이 이 권고 기간에 이르기 전에는 기준값이 다듬어지는 것이 예정된 일이다.
지금의 변화가 우연인지 시스템 변화인지 진단하는 순서
관리도 중심선이나 한계를 다시 계산했더니 값이 바뀌었다면 다음 순서로 확인한다.
1. 데이터 수와 기간부터 센다. 설정 단계에 필요한 최소 데이터 수와 날짜 수를 채우지 못했다면 추정치 흔들림의 가능성을 우선 검토한다. 다만 데이터 수가 적다는 사실만으로 시스템 변화를 배제할 수는 없으므로, 평균 이동 폭은 사건 기록과 함께 검토한다.
2. 변화가 평균인지 산포인지 나눈다. 초기에는 SD가 커지는 쪽으로 움직이는 것이 흔하다. 산포는 그대로인데 평균만 한 방향으로 계속 이동한다면 시스템 변화를 의심한다.
3. 변화가 시작된 날짜에 무슨 일이 있었는지 맞춰 본다. 측정자 교대, 시약·표준물질 로트 교체, 교정, 정비, 실험실 환경 변화 기록을 관리도 날짜와 대조한다. 특정 사건 전후로 값이 계단처럼 나뉘면 시스템 변화를 의심하고 원인을 확인한다.
4. 기준값 출처와 비교한다. CRM 인증값과 자기 실험실 평균의 차이 자체는 이상이 아니다. Westgard는 앞으로의 QC 측정은 제조사 목표값이 아니라 실험실이 직접 정한 평균과 SD로 평가해야 한다고 설명한다. 다만 차이가 크면 계통 오차(편향)일 수 있으므로, 값이 알려진 다른 물질(다른 CRM이나 숙련도 시료)로 확인하라고 권고한다.
5. 판정 결과를 기록에 남긴다. '우연 변동 — 누적 계속', '시스템 변화 — 원인 조사 중, 해당 구간 산출 보류' 중 어느 쪽인지 날짜와 함께 적는다.
시스템 변화로 판정된 구간을 누적 계산에 넣을지 뺄지는 원인을 확인한 뒤에 정한다. 시약 로트 교체처럼 앞으로도 반복될 정상 운영 요인이라면, 그 변동은 장기 SD에 들어가야 할 성분이다. 장비 고장처럼 일시적인 이상이라면 원인 조사와 시정조치의 대상이다.
임시값에서 정식값으로 넘어가는 판단 체크리스트
아래 항목을 모두 확인한 시점을 임시값을 정식값으로 전환하는 근거로 삼는다. 항목별 기간·횟수는 위에서 소개한 Westgard·CLSI C24 권고를 출발점으로 삼는다. 실제 기준은 항목 특성과 사내 절차에 맞게 문서로 정한다.
설정 단계 종료 확인
– [ ] 수준별로 최소 데이터 수와 최소 날짜 수를 채웠다(가능하면 20 작업일 이상 분산 측정).
– [ ] 측정을 하루에 몰아서 하지 않았고, 실제 운영 조건(일상 측정자·일상 장비)에서 얻었다.
– [ ] 최근 데이터를 추가했을 때의 평균 이동을 사건 기록과 함께 검토했고, 적용할 관리기준과 판단 근거를 문서화했다.
안정화 단계 진행 확인
– [ ] 측정자 교대, 시약 로트 교체, 정기 정비 같은 일상 변동 요인을 한 번 이상 거친 데이터가 들어 있다.
– [ ] 월별 통계를 누적했고, 월별 SD가 누적 SD와 크게 어긋나는 달이 있으면 원인을 확인했다.
– [ ] 시스템 변화로 판정된 구간이 있으면 누적값에 넣을지 뺄지 근거와 함께 기록했다.
– [ ] CRM 인증값과 실험실 평균의 차이를 검토했고, 차이가 크면 다른 기준물질로 편향 여부를 확인했다.
전환 문서화
– [ ] 정식값 산출에 쓴 데이터 범위(시작일·종료일·데이터 수)를 적었다.
– [ ] 정식값 승인자와 승인일, 적용 개시일을 적었다.
– [ ] 임시값을 적용한 기간의 판정을 정식값으로 소급해 다시 할지에 대한 방침을 적었다.
정식값으로 바꾼 뒤부터는 이 글이 다루는 '시작 직후의 흔들림' 문제가 아니다. 그때부터는 정기 재검증, 연 단위 추이 평가, 갱신 판정의 문제가 된다. 로트 교체나 장비 교체가 생기면 별도의 이월 검증 절차로 넘어간다.
이어서 볼 글: 정도관리 시료 변질 신호 해석 4단계 — 색변·침전·결정화 기준
근거 자료
- Advisera Community, Clause 7.7 7.7.1 (ISO/IEC 17025:2017 조항 인용) (ISO/IEC 17025:2017) — 7.7.1
- Westgard QC — QC: The Calculations (Basic QC Practices Lesson 14)
- Westgard QC — QC: the Practice
- Westgard QC — QC: The Levey-Jennings Control Chart
- Westgard QC — Q & A: Establishing new control ranges for unassayed chem controls
- Westgard QC — Un-conventional Answers to Un-conventional Questions