정도관리 데이터 진위성 검증은 값의 정확성이 아니라 그 값이 실제 측정에서 나왔는지를 확인하는 별도의 절차다. 감사추적·원자료 대조, 중복·복제 패턴 감지, 통계적 이상 패턴 분석, 판정과 기록의 4단계로 수행한다. 각 단계의 결과는 단독 증거가 아니라 결합 증거로 해석하며, 최종 판정은 데이터가 재구성 가능한지를 기준으로 내린다.
목차
정도관리 데이터 진위성 검증이 필요한 순간
정도관리 데이터 진위성은 결과의 정확성과 다른 축이다. 계산이 맞고 관리도가 관리한계 안에 들어와도, 그 값이 실제 측정에서 나왔는지는 별개의 질문이다.
MHRA의 GxP 데이터 무결성 가이던스는 데이터의 중요도(criticality)와 내재 위험을 먼저 규정하고 그에 맞춰 통제 수준을 차등화할 것을 제시한다. 모든 데이터를 같은 강도로 뒤지는 것이 아니라, 조작 유인과 통제 결손이 겹치는 지점부터 본다는 뜻이다.
현장에서 의심이 커지는 신호는 대체로 정해져 있다. 관리도가 지나치게 매끈한 구간, 재측정 기록 없이 사라진 첫 측정값, 마감 직전에 몰려 입력된 QC 결과, 특정 분석가에게만 나타나는 비현실적인 재현성이다.
이 글의 4단계는 조작 의도를 단정하기 위한 절차가 아니다. 데이터가 원자료로부터 다시 재구성될 수 있는지(reconstructability)를 확인하고, 재구성되지 않는 구간을 판정 근거에서 분리하기 위한 절차다.
1단계 — 감사추적과 원자료 대조로 출처 확인
정도관리 데이터 진위성 검증의 출발점은 언제나 원자료다. WHO 데이터 무결성 가이드라인은 감사추적을 원본 기록을 가리거나 덮어쓰지 않은 채 생성·추가·삭제·변경 이력을 안전하게 기록하는 수단으로 정의하고, 감사추적 기능이 데이터 수명주기 전체에서 활성 상태로 유지되는지 주기적으로 검증할 것을 요구한다.
실무는 세 갈래로 나눈다. 첫째, 기기 원시 파일(크로마토그램, 시퀀스 로그, 원 신호)과 LIMS 최종 보고값을 무작위 표본으로 대조한다. 둘째, 감사추적에서 삭제·재처리·재적분·메서드 변경 이벤트를 추출해 사유와 승인 기재 여부를 확인한다. 셋째, 감사추적 비활성화 이력과 관리자 권한 사용 이력을 별도 목록으로 본다.
특히 주의할 지점은 시퀀스 번호의 결번이다. 주입 번호나 런 ID가 연속하지 않으면 실행되었으나 보고되지 않은 측정이 존재한다는 의미이며, ALCOA+의 완전성(Complete) 요건에 직접 걸린다.
권한 구조도 같은 층위에서 확인한다. 분석가가 자기 결과를 삭제하거나 시스템 시각을 변경할 수 있는 환경이면, 이후 단계의 통계 검증은 근거의 무게가 크게 떨어진다.
2단계 — 중복·복제 패턴 감지
조작의 가장 흔한 형태는 새 숫자를 지어내는 것이 아니라 과거의 정상값을 복사해 옮기는 것이다. 2단계는 그 흔적을 찾는다.
먼저 완전 일치를 조회한다. 유효숫자 전체가 동일한 QC 값이 서로 다른 날짜·배치에 반복 등장하는지 본다. 측정 분해능이 높은 항목일수록 소수점 아래 자리까지 같은 값이 반복될 확률은 급격히 낮아지므로, 반복 자체가 조사 대상이 된다.
다음은 블록 복제다. 연속된 3~5개 측정값의 조합이 다른 기간에 같은 순서로 나타나면 개별 값의 우연 일치로 설명하기 어렵다. 값 벡터를 문자열로 이어 붙여 해시로 비교하면 스프레드시트 수준에서도 빠르게 검출된다.
세 번째는 유사 복제다. 원본에 미세한 상수를 더하거나 마지막 자리만 바꾼 값들로, 인접 차분의 분포가 비정상적으로 좁아진다. 실무에서는 완전 일치보다 이 유형이 더 자주 발견된다.
타임스탬프도 함께 본다. 서로 다른 배치의 입력 시각이 수 초 간격으로 몰려 있다면 실제 측정 시점이 아니라 사후 일괄 입력일 가능성이 높고, 이는 동시성(Contemporaneous) 위반에 해당한다.
3단계 — 통계적 이상 패턴 분석
사람이 만들어낸 숫자는 실제 측정 분포와 다른 흔적을 남긴다. 정도관리 데이터 진위성 판단에서 통계는 결정적 증거가 아니라 표본을 좁히는 도구로 쓴다.
첫째는 자릿수 편중이다. Benford 법칙을 이용한 조작 데이터 탐지 연구는 위조 데이터에서도 첫 자리는 단조 감소 형태를 흉내 내는 경우가 많아, 오히려 둘째·셋째·넷째 자리의 분포 이탈을 보는 편이 유용하다고 지적한다. QC 측정값의 끝자리가 0과 5에 몰리는 반올림 선호도 같은 맥락의 신호다.
둘째는 과소 분산이다. 값들이 중심선 주변에만 촘촘히 모이고 관리한계 근처를 거의 밟지 않는다면 실제 변동보다 좁은 인공 분포일 수 있다. 해당 구간의 표준편차를 장기 재현성 이력과 비교해 지표화한다.
셋째는 순서 패턴이다. 중심선 위아래 부호의 교대 횟수가 이론적 기대치보다 과도하거나 과소하면 무작위성이 훼손된 것이며, 런 검정으로 정량화할 수 있다.
넷째는 경계 회피다. 관리한계 바로 안쪽에서 도수가 급감하는 분포는 한계를 넘은 값이 선별적으로 제거되었을 가능성을 시사한다. 다만 이 단계의 결과는 모두 의심 신호일 뿐이며, 단독으로 조작을 단정하는 근거로 삼지 않는다.
4단계 — 정도관리 데이터 진위성 판정과 조치 기록
정도관리 데이터 진위성 결론은 통계 신호 하나가 아니라 1~3단계 증거의 결합으로 내린다. 원자료 대조 결과가 판정의 중심이고, 중복·통계 신호는 조사 범위를 지정하는 역할이다.
판정은 세 등급으로 나누는 편이 운영에 편하다. 설명 가능(문서화된 사유와 원자료로 재구성됨), 설명 미흡(자료는 있으나 사유·승인 기록 결손), 재구성 불가(원자료 부재 또는 감사추적 단절)다. 재구성 불가로 분류된 데이터는 조작 여부와 무관하게 품질 판정 근거로 사용할 수 없다.
조치는 영향 범위 확정에서 시작한다. 의심 구간에 포함된 배치, 그 배치로 보고된 고객 결과, 동일 분석가·기기의 동기간 데이터까지 넓혀 소급 검토 대상을 확정한다.
인적 요인이 개입된 정황이면 조사 주체를 분리한다. 해당 분석가의 직속 관리자가 단독 조사하는 구조는 이해상충이 있으므로 품질책임자 또는 독립 조사자가 맡는다.
기록은 조사 착수 시점, 검토한 원자료 목록, 판정 근거, 결론, 후속 조치와 그 유효성 검증 결과까지 남긴다. 정도관리 데이터 진위성 조사 자체도 감사 대상 기록이다.
관련해서 정도관리 데이터 수정·삭제 정당성 4단계 — 근거·기록·승인·추적 글도 참고할 만하다.
체크포인트 정리 — 정도관리 데이터 진위성 운영 기준
진위성 검증은 상시 감시가 아니라 정기 점검 항목으로 설계해야 지속된다. 월간 정도관리 평가에 진위성 항목을 포함하고, 표본 대조 건수와 대상 선정 기준을 미리 문서화한다.
체크포인트는 다음과 같다. 감사추적 활성 상태와 관리자 권한 사용 이력을 확인했는가. 시퀀스 결번과 미보고 측정이 없는가. 완전 일치·블록 복제·유사 복제 조회를 수행했는가. 끝자리 편중과 과소 분산 지표를 산출했는가. 판정 등급과 그 근거를 기록으로 남겼는가.
운영상 유의점도 있다. 이 절차가 개인을 겨냥한 감시가 아니라 시스템 취약점을 찾는 과정임을 사전에 공지해야 협조를 얻는다. 실제로 발견되는 문제의 상당수는 고의 조작이 아니라 편집 가능한 스프레드시트, 공용 계정, 사후 일괄 입력 같은 통제 결손이다.
마지막으로 탐지보다 예방이 저렴하다. 입력 시점 잠금, 원자료 자동 보존, 권한 분리, 이중 검토가 갖춰진 환경에서는 정도관리 데이터 진위성 검증이 소수 표본 확인만으로도 충분해진다.
