너무 쉽게 적합 판정을 받는 시료
월요일 오전 6시 40분, 동물 사료 한 화물이 항구의 실험실에서 대기하고 있습니다.
실험실에는 해당 화물이 이동을 계속할 수 있는지 결정할 수 있는 시간이 매우 제한되어 있습니다. 신속 생물학적 스크리닝 분석법이 몇 분 만에 적합 결과를 냅니다. 신호는 명확하고, 관리물질은 허용 범위 내에 있습니다. 작업자는 해당 로트를 출하합니다.
이후 확인시험에서 법적 기준을 초과하는 오염이 검출됩니다.
문제는 신속 분석법이 느렸다는 데 있지 않았습니다. 분석법의 민감도가 부족했다고 단정할 수도 없습니다. 문제는 해당 적합 결과가 검증 데이터로 정당화할 수 있는 수준보다 더 높은 신뢰도를 지니고 있었다는 것입니다.
식품 및 사료 안전 분야에서 스크리닝 분석법은 단순히 더 빠른 실험실 시험이 아닙니다. 이는 의사결정 시스템입니다. 이 시스템의 역할은 계속 진행할 수 있는 물질과 조사가 필요한 물질을 구분하는 동시에 다음 두 가지 상충하는 위험을 관리하는 것입니다.
- 오염된 물질이 공급망에 유입되는 것.
- 너무 많은 적합 시료가 비용이 많이 드는 확인시험으로 보내지는 것.
따라서 규제기관의 승인은 인상적인 분석 신호보다 엄격한 통계적 증거에 더 크게 좌우됩니다.
스크리닝 결과는 위험에 대한 결정이다
모든 스크리닝 방법은 두 범주 사이에 경계를 만듭니다.
| 결과 | 운영상의 의미 |
|---|---|
| 적합 | 정의된 스크리닝 규칙에 따라 시료를 다음 단계로 진행할 수 있음 |
| 의심 또는 부적합 | 시료에 대한 확인 조사가 필요함 |
이 경계는 분석물질의 자연적인 특성이 아닙니다. 검증 모델에 의해 만들어집니다.
법적 기준에 가까운 결과는 특히 어렵습니다. 추출 효율, 매트릭스 조성, 시약 성능 또는 기기 반응의 작은 변화만으로도 동일한 시료가 경계의 한쪽에서 다른 쪽으로 이동할 수 있습니다.
복잡한 시스템을 다뤄본 사람이라면 익숙할 심리적 함정이 있습니다. 사람들은 측정된 불확실성보다 깔끔한 이진 답변을 더 신뢰하는 경향이 있습니다. “통과”는 확정적으로 느껴집니다. 그러나 실제로 이는 확률에 대한 주장입니다.
따라서 규제 수준의 분석법은 다음 두 가지 질문에 답해야 합니다.
- 깨끗한 시료가 잘못 의심 판정을 받는 경우는 얼마나 자주 발생하는가?
- 오염된 시료가 잘못 적합 판정을 받는 경우는 얼마나 자주 발생하는가?
첫 번째 질문은 위양성에 관한 것입니다. 두 번째 질문은 위음성 또는 허위 적합 결과에 관한 것입니다.
두 번째 위험이 일반적으로 더 심각합니다. 오염된 제품이 개입 없이 식품 또는 사료 공급망을 계속 통과할 수 있기 때문입니다.
두 가지 통계적 핵심 요소: CCα와 CCβ
판정한계: CCα
판정한계 또는 CCα는 위양성 오류가 통제된 확률 수준으로 유지되는 조건에서 시료를 부적합으로 분류할 수 있는 농도를 정의합니다.
실무적으로 CCα는 적합 시료가 잘못 의심 시료로 처리되는 빈도를 관리합니다.
너무 낮게 설정된 판정한계는 신중해 보일 수 있습니다. 그러나 과도한 신중함은 자체적인 실패 양상을 만들어냅니다.
- 더 많은 적합 로트가 의심 판정을 받습니다.
- 확인시험 수요가 증가합니다.
- 실험실은 무해한 결과를 조사하는 데 역량을 소모합니다.
- 수입, 생산 및 출하 결정이 지연됩니다.
- 스크리닝 프로그램에 대한 신뢰가 약화되기 시작합니다.
거의 모든 것을 의심으로 처리하는 스크리닝 시스템은 견고한 시스템이 아닙니다. 단지 비용이 많이 드는 시스템일 뿐입니다.
검출능: CCβ
검출능 또는 CCβ는 허위 적합 오류를 허용 수준 이하로 유지하면서 분석물질을 신뢰성 있게 검출, 식별 또는 분류할 수 있는 최저 농도입니다.
규제 목적의 스크리닝에서 일반적인 목표는 위음성률을 5% 미만으로 유지하는 것입니다. 다이옥신과 같이 독성이 매우 높은 물질의 경우에는 요구되는 비율이 1% 미만일 수 있습니다.
따라서 CCβ는 스크리닝 분석법이 검출되지 않은 오염으로부터 대중을 보호하는지를 보여주는 보다 직접적인 지표입니다.
분석법은 최소 요구 성능 한계(MRPL) 또는 적용되는 법적 기준에서 관련 오염을 검출할 수 있음을 입증해야 합니다. 규제 기준보다 훨씬 높은 농도에서만 우수한 성능을 보이는 방법은 분석학적으로 흥미로울 수 있지만, 규제 목적의 스크리닝에는 충분하지 않습니다.
차이가 중요한 이유
CCα와 CCβ는 서로 다른 오류를 설명합니다. 두 개념을 혼동하면 검증 계획이 완전해 보이면서도 핵심적인 안전성 질문에는 답하지 못하게 됩니다.
| 매개변수 | 핵심 질문 | 주로 통제하는 위험 |
|---|---|---|
| CCα | 언제 시료를 부적합으로 판정할 수 있는가? | 불필요한 확인시험 |
| CCβ | 어떤 농도에서 오염을 신뢰성 있게 검출할 수 있는가? | 허위 적합 출하 |
| 위음성률 | 오염된 물질이 통과하는 경우는 얼마나 자주 발생하는가? | 공중보건 및 법적 위험 |
방어 가능한 방법은 의사결정의 양쪽 측면을 모두 통제해야 합니다.
민감도는 법적 기준에서 의미가 있어야 한다
낮은 검출한계는 실험실이 실제로 내려야 하는 결정을 뒷받침할 때만 유용합니다.
많은 식품 및 사료 오염물질의 경우, 실용적인 설계 기준은 관심 있는 규제 수준의 약 5분의 1에 가까운 LOD입니다. 이 여유는 다음과 같은 요인으로 인한 변동을 감당할 수 있도록 해줍니다.
- 시료 분해.
- 불완전한 추출.
- 매트릭스 억제.
- 불균일한 오염.
- 운송 및 보관 조건.
- 로트별 시약 변동.
특히 곰팡이독소, 잔류성 유기오염물질 및 매우 낮은 농도에서도 유해한 기타 오염물질의 경우 요구되는 민감도가 피코그램 또는 나노그램 수준에 이를 수 있습니다.
그러나 민감도만으로 해당 방법이 목적에 적합해지는 것은 아닙니다.
분석법은 낮은 농도에서 강한 신호를 생성할 수 있지만, 지방, 단백질, 전분, 색소 또는 구조적으로 유사한 화합물에 의해 신호가 왜곡되면 신뢰할 수 없는 결정을 내릴 수 있습니다. 분석학적 질문은 단순히 “분석법이 무언가를 볼 수 있는가?”가 아닙니다.
핵심 질문은 다음과 같습니다.
규제가 조치를 요구하는 농도에서, 분석법은 시료의 화학적 특성과 목표 오염을 구분할 수 있는가?
실제 시료가 방법을 시험하는 지점은 선택성이다
깨끗한 완충액에서는 거의 모든 분석법이 정교해 보일 수 있습니다.
실제 사료 및 식품 매트릭스는 그렇게 협조적이지 않습니다. 유지가 풍부한 물질, 가공 원료, 건조 배합사료 및 단백질 함량이 높은 제품은 모두 분석법의 작동에 영향을 줄 수 있습니다.
선택성
선택성은 자연적으로 존재하는 매트릭스 성분과 함께 추출된 물질이 존재할 때에도 방법이 올바른 분류를 유지하는지를 측정합니다.
선택성이 높은 분석법은 다음과 같은 영향을 줄 수 있는 화합물에 둘러싸인 목표 분석물질이 존재할 때에도 신뢰성을 유지해야 합니다.
- 분석 신호를 억제하는 물질.
- 배경 반응을 증가시키는 물질.
- 결합을 방해하는 물질.
- 반응 속도를 변화시키는 물질.
- 목표 구조를 모방하는 물질.
- 추출 중 회수율을 변화시키는 물질.
특이성
특이성은 구조적으로 관련된 화합물 및 교차반응 물질로부터 목표 분석물질을 구분하는 방법의 능력과 관련됩니다.
이 구분은 중요합니다. 특정 분석법이 한 매트릭스에서는 선택적일 수 있지만 특정 유사체에 대해서는 특이성이 낮을 수 있기 때문입니다. 해당 방법이 여러 제품 범주에서 사용될 것으로 예상된다면 두 특성을 모두 확립해야 합니다.
따라서 검증에는 모든 주요 매트릭스 등급을 대표하는 공시료와 관련 간섭물질 및 교차반응 물질이 포함되어야 합니다. 하나의 간단한 매트릭스만으로는 광범위한 규제 신뢰성을 확립할 수 없습니다.
정밀도는 작업 흐름의 특성이다
개발 실험실에서는 정밀한 방법이 일상적인 사용에서는 불안정할 수 있습니다.
그 차이는 추출 시간, 시약 온도, 피펫팅 순서, 배양 조건, 작업자 기술 또는 기기 드리프트와 같은 작은 운영 세부사항에서 나타나는 경우가 많습니다.
스크리닝 분석법의 경우 일반적인 반복성 목표는 변동계수 30% 미만입니다. 정확한 허용 기준은 분석물질, 매트릭스, 플랫폼 및 규제 체계에 따라 달라지지만, 원칙은 동일합니다. 분석법은 반복 시험에서 안정적인 분류 결과를 산출해야 합니다.
각 배치에는 시험 시료와 유사한 조건에서 처리된 관리물질이 포함되어야 합니다.
- 동시에 추출한 공시료.
- 기준 시료 또는 강화 시료.
- 양성 및 음성 관리물질.
- 정의된 허용 범위.
- 문서화된 취급 및 배양 조건.
이러한 관리물질은 키트가 작동하는지만 확인하는 것이 아닙니다. 분석법 드리프트로 인한 변화와 실제 시료 결과를 구분하는 데 도움을 줍니다.
추출 후에 추가되는 관리물질은 추출 실패를 밝혀낼 수 없습니다. 하루에 한 번만 처리되는 관리물질은 배치별 문제를 드러내지 못할 수 있습니다. 가장 강력한 관리물질은 적합성을 평가하려는 시료와 동일한 작업 흐름에 통합됩니다.
실험실은 분석법의 일부다
검증 데이터는 이를 생성한 실험실과 독립적으로 존재하지 않습니다.
시설의 장비, 직원 역량, 교정 프로그램, 문서화 및 품질 관리 모두 감사 과정에서 결과를 방어하거나 여러 관할권에서 결과를 인정받을 수 있는지에 영향을 미칩니다.
ISO 17025 인증
규제 업무를 위해 시험 시설은 관련 범위에 대해 ISO 17025 인증에 따라 운영되어야 합니다.
ISO 17025는 다음을 입증하기 위한 체계를 제공합니다.
- 기술적 역량.
- 방법의 검증 및 확인.
- 장비 교정 및 유지관리.
- 직원 교육 및 권한 부여.
- 측정 소급성.
- 문서 관리.
- 부적합 작업의 처리.
- 지속적인 품질 감독.
인증이 약한 분석법을 신뢰할 수 있게 만드는 것은 아닙니다. 인증은 그만큼 중요한 역할을 합니다. 즉, 보고된 분석법의 성능이 통제되고 감사 가능한 시스템 안에서 생성되었음을 입증합니다.
EU 집행위원회 결정 2002/657/EC와 같은 지침은 판정한계, 검출능, 정밀도, 선택성 및 검증 설계를 포함하여 방법 성능에 대한 체계적인 통계적 기대치도 제공합니다.
정확한 규제 요건은 관할권과 분석물질에 따라 다릅니다. 그러나 기본 논리는 동일합니다. 성능 주장은 측정 가능하고 재현 가능해야 하며, 정의된 규제 결정과 연결되어야 합니다.
시약 공급망은 검증 변수가 된다
분석법이 연구 단계에서 정기 모니터링 단계로 이동하면 원재료는 더 이상 부수적인 세부사항이 아닙니다.
친화도가 변동하는 항체는 판정 경계를 이동시킬 수 있습니다. 활성이 변하는 효소는 신호 형성에 영향을 줄 수 있습니다. 일관성이 낮은 기질은 시험 간 변동을 증가시킬 수 있습니다. 어려운 매트릭스에서 이전에는 허용 기준을 충족했던 분석법도 다르게 작동하는 시약 로트로 인해 문제가 발생할 수 있습니다.
따라서 체외진단 제조업체, 실험실 및 연구기관은 원재료 선정을 방법 관리의 일부로 고려해야 합니다.
중요한 특성은 다음과 같습니다.
- 항체의 특이성 및 친화도.
- 효소의 활성 및 안정성.
- 기질의 일관성.
- 로트 간 비교 가능성.
- 순도 및 오염 관리.
- 보관 및 운송 요건.
- 기술 문서 및 추적성.
- 의도한 분석 형식과의 호환성.
아무리 뛰어난 검증 계획도 불안정한 투입물의 문제를 영원히 보완할 수는 없습니다. 분석법이 규제 결정을 지원해야 한다면, 자재 공급망도 동일한 수준의 엄격성을 뒷받침해야 합니다.
위양성의 경제적 영향
위음성은 가장 큰 안전성 위험을 초래합니다. 그러나 위양성은 스크리닝 프로그램이 경제적으로 지속 가능한지를 결정합니다.
모든 위양성 결과는 다음과 같은 조치를 유발할 수 있습니다.
- 확인 질량분석.
- 추가 시료 처리.
- 출하 또는 선적 지연.
- 공급업체 조사.
- 규제기관 보고.
- 잠재적인 상업적 분쟁.
소규모에서는 이러한 비용이 감당할 만해 보일 수 있습니다. 그러나 국가 단위의 수입 관리나 대규모 사료 생산 규모에서는 비용이 빠르게 증가합니다.
이로 인해 실용적인 최적화 문제가 발생합니다.
분석법은 CCβ를 법적 기준보다 충분히 낮게 유지할 수 있을 만큼 민감해야 합니다. 동시에 확인 시스템이 불필요한 의뢰로 압도되지 않도록 CCα는 목표 기준에 충분히 가까워야 합니다.
추상적인 의미에서 “더 민감한” 방법이 자동으로 더 나은 것은 아닙니다. 선택성이 낮으면 정기 모니터링이 불필요한 조사 대기열로 바뀔 수 있습니다.
목표는 가능한 한 낮은 기준값이 아닙니다. 목표는 허용 가능한 운영 비용으로 가장 신뢰성 높은 규제 결정을 내리는 것입니다.
목적별 검증 로드맵
고위험 오염물질
다이옥신, 아플라톡신 및 기타 중대한 결과를 초래하는 오염물질의 경우 다음을 우선해야 합니다.
- 적용되는 엄격한 기준 이하의 위음성률.
- 규제 수준 이하의 CCβ.
- 가장 어려운 매트릭스에서의 검증.
- 강력한 교차반응성 연구.
- 견고한 추출 및 회수 절차.
- 분석법 드리프트에 대한 보수적인 관리.
이러한 분석물질은 양성 결과를 놓쳤을 때의 비용이 이례적으로 높습니다. 검증 설계는 이러한 비대칭성을 반영해야 합니다.
대량 수입 및 정기 스크리닝
대규모 스크리닝 프로그램에서는 다음을 우선해야 합니다.
- 반복성 및 운영 정밀도.
- 정의된 허용 기준 이하의 CV.
- 명확한 배치 허용 규칙.
- 신속하고 재현 가능한 시료 전처리.
- 위양성을 통제할 수 있도록 목표 기준에 충분히 가까운 CCα.
- 추출 및 시험별 실패를 드러내는 관리물질.
처리량은 단순히 분석법의 속도만을 의미하지 않습니다. 실험실이 하루에 내릴 수 있는 신뢰할 수 있는 결정의 수를 의미합니다.
광범위한 매트릭스 적용 범위
다양한 식품 및 사료 범주를 대상으로 하는 분석법에서는 다음을 우선해야 합니다.
- 매트릭스별 회수율 연구.
- 각 주요 매트릭스 그룹의 공시료.
- 간섭 및 교차반응 시험.
- 변동하는 시료 화학 특성을 견딜 수 있는 시약 조성.
- 실질적으로 다른 매트릭스에 대한 별도의 성능 주장.
단순한 매트릭스에서만 검증된 방법을 보편적으로 적용 가능한 방법으로 제시해서는 안 됩니다.
규제 신뢰도란 무엇인가
규제 수준의 스크리닝 분석법은 다음과 같은 몇 가지 쉽게 확인할 수 있는 특성을 갖습니다.
- 성능 주장을 제시하기 전에 의사결정 모델이 정의되어 있습니다.
- CCα와 CCβ가 대표성 있는 데이터로부터 계산됩니다.
- 허위 적합 결과가 실제 규제 관심 수준에서 측정됩니다.
- 민감도가 적절한 LOD 및 회수율 연구로 뒷받침됩니다.
- 선택성이 완충액뿐 아니라 실제 매트릭스에서 입증됩니다.
- 작업자, 시험, 날짜 및 시약 로트가 달라져도 정밀도가 허용 수준을 유지합니다.
- 관리물질이 전체 작업 흐름을 시험하는 방식으로 처리됩니다.
- 실험실이 적절한 ISO 17025 품질 시스템 내에서 운영됩니다.
- 원재료가 시간 경과에 따른 분석법의 작동을 유지할 만큼 일관됩니다.
- 최종 방법이 공중보건 보호와 확인시험 역량 사이의 균형을 맞춥니다.
가장 신뢰할 수 있는 분석법은 가장 극적인 기술 사양을 가진 방법이 아닙니다. 한계를 알고 측정하며 관리하는 방법입니다.
핵심 성능 목표 요약
| 매개변수 | 일반적인 목표 또는 요건 | 검증 목적 |
|---|---|---|
| 위음성률 | < 5%; 다이옥신 또는 고독성 오염물질의 경우 잠재적으로 < 1% | 오염된 물질이 출하될 가능성을 줄임 |
| 검출능, CCβ | MRPL 또는 법적 기준 이하 | 조치 수준에서 신뢰성 높은 검출 능력을 입증 |
| 판정한계, CCα | 목표 기준에 가깝게 설정하며, 대개 30~40% 이내 | 불필요한 위양성 의뢰를 통제 |
| 검출한계, LOD | 일반적으로 관심 있는 규제 수준의 약 5분의 1 | 까다로운 시료에 대한 민감도 여유를 제공 |
| 반복성 | 방법 및 분석물질에 따라 대개 CV < 30% | 정기 배치에서 안정적인 결과를 지원 |
| 선택성 | 관련 식품 및 사료 매트릭스 전반에서 입증 | 매트릭스 간섭으로부터 보호 |
| 특이성 | 관련 화합물 및 교차반응 물질에 대해 확인 | 신호가 목표 분석물질에 의한 것임을 보장 |
| 품질 시스템 | 관련 범위에 대한 ISO 17025 인증 | 성능 데이터를 추적 가능하고 감사 가능한 상태로 만듦 |
분석법 개념에서 정기 관리까지
유망한 생물학적 분석법에서 방어 가능한 규제 방법으로 나아가는 과정은 여러 의존 관계로 연결된 사슬입니다.
우수한 항체도 불량한 시료 전처리를 보완할 수 없습니다. 낮은 LOD도 통제되지 않은 매트릭스 효과를 해결할 수 없습니다. 검증된 프로토콜도 불안정한 시약 로트를 보완할 수 없습니다. 그리고 적합해 보이는 결과도 결과가 어떻게 생성되었는지 설명할 수 없는 실험실 시스템의 문제를 해결할 수 없습니다.
이 때문에 분석법 개발은 원재료 선정, 분석법 설계, 분석 최적화, 검증 계획 및 정기 운영에 이르는 전체 수명 주기 전반의 지원을 통해 더욱 효과적으로 이루어집니다.
CamelBio는 체외진단 제조업체, 실험실 및 연구기관에 IVD 원재료, 기술 서비스 및 컨설팅을 한곳에서 제공합니다. CamelBio의 지원은 초기 개념부터 임상 단계까지의 발전 과정을 포괄하며, 팀이 생물학적 성능을 실질적인 검증 요건에 맞추도록 돕습니다.
고도로 특이적인 항체, 견고한 효소 시스템, 일관된 기질 또는 CCα/CCβ 검증에 대한 지침이 필요한 경우에도 목표는 동일합니다. 규제기관, 실험실 또는 공급망 파트너에게 측정되지 않은 위험을 수용하도록 요구하지 않으면서 신속한 결정을 내릴 수 있는 분석법을 구축하는 것입니다.
신속 스크리닝 분석법은 모든 “적합” 결과가 면밀한 검토를 견딜 만큼 강력한 증거로 뒷받침될 때 신뢰를 얻습니다. 전문가에게 문의하기로 검증 여정을 시작하세요.