반복성은 동일한 조건에서 분석법의 일관성을 나타내며, 재현성은 실제 환경에서의 성능을 보여줍니다. 진단 분석법 개발자는 단기 및 장기 변동성을 동시에 포착하는 구조화된 실험을 수행하여 이 두 가지 정밀도 요소를 구분합니다. 이들은 20회 이상의 독립적인 실행에 걸쳐 낮음, 중간, 높음 분석물 농도의 중복 품질 관리(QC) 샘플을 측정하고, 분산 분석(ANOVA)을 사용하여 총 불정밀도를 분해합니다. 이를 통해 관찰된 산포를 런 내 반복성(순수 장비 및 취급 노이즈)과 런 간 재현성(새로운 시약 로트, 다른 작업자, 보정 변화 또는 일일 변화로 인한 추가 변동성)으로 분할합니다.
실제 IVD 성능은 단 한 번의 완벽한 실행으로 결정되지 않습니다. 반복성과 재현성을 구분하는 핵심은 의도적으로 변화를 준 다중 실행 실험을 수행하고 분산 성분 분석을 사용하는 것입니다. 이를 통해 시약 로트, 작업자 또는 날짜가 변경될 때 발생하는 변동성과 분석법 자체의 변동성을 파악하여, 개발자가 의미 있는 사양을 설정하고 견고한 제품을 구축하는 데 필요한 데이터를 얻을 수 있습니다.
정밀도의 두 가지 차원 이해
런 내 반복성: 분석법의 단기 지문
런 내 정밀도(반복성)는 동일한 장비, 동일한 시약 로트, 동일한 작업자 등 동일한 조건 하에서 짧은 시간 내에 동일한 샘플을 여러 번 측정했을 때 결과가 일치하는 정도를 의미합니다. 이는 액체 취급 불정밀도, 검출기 노이즈 및 즉각적인 미세 환경 변동을 포착합니다.
통계적 관점에서 반복성은 모든 조건을 일정하게 유지해도 남는 잔여 변동을 나타냅니다. 이는 모든 진단 시스템이 임상 임계값 이하로 유지해야 하는 분석법의 고유한 "심장 박동" 노이즈입니다.
전체 재현성: 실제 환경을 위한 스트레스 테스트
재현성(중간 정밀도 또는 런 간 정밀도라고도 함)은 의도적으로 변화된 요인이 도입되었을 때 결과가 일치하는 정도를 측정합니다. 이러한 요인에는 일반적으로 여러 날에 걸친 실행, 신선한 시약 분취액, 새로운 보정 또는 다른 작업자가 포함됩니다.
전체 재현성은 반복성에 이러한 변화하는 조건으로 인한 추가 분산 성분을 더한 값입니다. 이는 "환자의 결과가 다음 주에, 새로운 시약 로트로, 다른 작업자에 의해 측정되어도 동일할 것인가?"라는 중요한 질문에 답합니다.
두 가지를 구분하는 실험 프레임워크
중복 측정을 포함한 균형 잡힌 다중 실행 설계
골드 표준 접근 방식(CLSI EP05-A3 준수)은 중첩된(nested) 균형 설계를 기반으로 합니다. 개발자는 전체 분석 측정 범위(낮음, 중간, 높음)를 포괄하는 2~3개의 QC 샘플을 선택합니다. 각 독립적인 실행 내에서 모든 샘플은 중복 측정됩니다.
로트 간 견고성을 테스트하는 경우 신선한 분취액과 이상적으로는 다른 시약 로트를 사용하여 일반적으로 별도의 날짜에 걸쳐 최소 20회 실행을 수행합니다. 실행 내 중복 측정과 연구 내 실행의 중첩 구조가 ANOVA를 통해 수학적으로 오차 원인을 분리할 수 있게 합니다.
ANOVA를 사용하여 총 변동성 분할
분산 분석(ANOVA)은 원시 데이터를 가져와 총 제곱합을 "런 내" 성분(동일 실행 내 중복 측정값 간의 변동)과 "런 간" 성분(전체 평균 주변의 실행 평균 변동)으로 나눕니다.
이 제곱합으로부터 개발자는 분산 성분을 계산합니다:
- σ²_within – 순수 반복성 분산.
- σ²_between – 실행 간 변화로 인해 도입된 추가 분산.
총 재현성 분산은 단순히 σ²_within + σ²_between입니다. 이러한 분산을 변동 계수(%CV)로 변환하면 각 농도 수준에서 반복성과 전체 재현성에 대한 명확하고 비교 가능한 지표를 얻을 수 있습니다.
농도 전반에 걸친 정밀도 프로파일 구축
단일 지표에서 농도 의존적 관점으로
정밀도는 분석물 수준 전반에서 일정하지 않은 경우가 많습니다. 각 QC 농도에서 총 재현성 %CV를 계산하고 이를 분석물 수준에 대해 플로팅함으로써 개발자는 정밀도 프로파일을 생성합니다.
이 프로파일은 분석법이 가장 안정적인 곳과 불정밀도가 급증하는 곳(일반적으로 정량 하한(LLOQ) 근처)을 즉시 보여줍니다. 이는 IVD 제품이 강력한 진단 요구 사항에 필요한 대로 청구된 측정 범위의 최소 90% 이상에서 임상 성능 임계값(예: ≤5% CV)을 충족하도록 보장합니다.
낮은 농도에서 더 엄격한 제형 관리가 필요한 이유
낮은 분석물 수준에서는 동일한 절대 피펫팅 오차가 훨씬 더 큰 상대적 오차가 되어 %CV가 급증합니다. 따라서 정밀도 프로파일은 제형 최적화를 안내합니다. LLOQ에서의 CV가 허용 한도를 초과하면 개발자는 배양 시간, 세척 단계 또는 신호 증폭을 개선하여 곡선을 평탄화하고 분석법의 신뢰 범위를 확장할 수 있습니다.
정밀도 평가의 일반적인 함정과 한계
너무 적은 실행 횟수는 실제 런 간 변동을 가림
5~10회만 실행하면 불안정한 분산 추정치가 생성되며 종종 런 간 성분을 과소평가하게 됩니다. 실제 일상적인 테스트에서 더 가변적인 조건이 도입될 때 무너질 수 있는 견고성에 대한 잘못된 확신이 생길 수 있습니다. 주요 참조 표준의 20회 최소 실행은 사치가 아니라 실질적인 필요성입니다.
중간 정밀도와 전체 재현성의 혼동
기술적으로 다중 실행, 단일 실험실 연구는 중간 정밀도를 평가합니다. 규제 정의에 따른 전체 재현성은 종종 다중 사이트, 다중 장비 실험을 요구합니다. 개발자는 자신의 주장을 정확하게 라벨링해야 합니다. 그렇지 않으면 내부적으로는 견고해 보이는 분석법이 외부 실험실로 배송될 때 실패할 수 있습니다.
데이터 품질 및 정규성 가정 무시
ANOVA는 실행 전반에 걸쳐 균일한 분산과 정규 분포 오차를 가정합니다. 이상치가 있는 단일 실패 실행은 전체 분해를 왜곡할 수 있습니다. CLSI 가이드라인에서 강조하는 것처럼 강력한 이상치 처리 프로토콜과 그래픽 확인(예: 잔차 플롯)이 필수적입니다.
목표에 맞는 정밀도 전략 수립 방법
올바른 실험 설계와 수용 기준은 분석법이 임상 및 공급망에서 무엇을 달성해야 하는지에 전적으로 달려 있습니다.
- 임상 안전성 극대화가 주된 목표인 경우: 모든 정밀도 한도를 임상 결과 모델(Milan hierarchy Model 1)에 고정하십시오. 의료 결정 지점에서의 총 재현성 CV가 환자 오분류 위험이 무시할 수 있을 정도로 낮도록 보장하십시오.
- 제조 일관성 및 로트 출시가 주된 목표인 경우: 최소 3개의 독립적인 시약 배치로 전용 로트 간 재현성 연구를 수행하십시오. 결과로 나온 정밀도 프로파일을 사용하여 모든 새 로트가 전체 측정 범위에서 이전 로트와 동일하게 작동하도록 보장하는 출시 사양을 설정하십시오.
- 신속한 규제 승인 획득이 주된 목표인 경우: CLSI EP05-A3를 정확히 따르십시오(20회 이상 실행, 중복 측정, 전체 정밀도 프로파일). 각 농도에 대해 반복성, 런 간, 총 재현성 CV를 별도로 보고하십시오. 이러한 투명한 문서는 검토를 가속화합니다.
- 수동 또는 저신호 분석법 최적화가 주된 목표인 경우: 정밀도 프로파일을 사용하여 %CV가 10%를 초과하는 지점을 찾으십시오. 그런 다음 프로파일이 임상 임계값 아래로 평탄화될 때까지 추가 배양 시간, 더 많은 반복 측정, 더 엄격한 배양 온도 제어 등 프로토콜 엔지니어링으로 해당 농도 영역을 타겟팅하십시오.
궁극적으로 반복성과 재현성을 구분하는 것은 단순한 통계적 연습이 아니라, 모든 환자 샘플에서 매일 신뢰할 수 있는 결과를 제공하는 IVD 분석법을 구축하기 위한 개발자의 나침반입니다.
요약 표:
| 정밀도 차원 | 변동 원인 | 실험 설정 (CLSI EP05-A3) | 주요 통계 출력 (ANOVA) |
|---|---|---|---|
| 런 내 반복성 | 액체 취급 노이즈, 검출기 변동, 즉각적인 시스템 노이즈 | 동일한 조건: 동일 작업자, 로트, 장비, 짧은 시간; 중복 측정 | 런 내 분산 (σ²_within), 반복성 %CV |
| 전체 재현성 | 일일 변화, 로트 간 변동, 다른 작업자 및 보정 | 다중 실행 연구: 의도적으로 변화된 조건에서 며칠에 걸쳐 ≥20회 독립 실행 | 총 분산 (σ²_within + σ²_between), 전체 재현성 %CV |
| 정밀도 프로파일 | 농도 의존적 오차 급증 (예: LLOQ 근처에서 높은 %CV) | 낮음, 중간, 높음 분석 측정 범위를 포괄하는 2~3개의 QC 샘플 | 청구 범위 전반의 총 %CV 대 분석물 농도 플롯 |
CamelBio와 함께 컨셉에서 임상까지 IVD 개발 가속화
견고하고 재현성이 높은 IVD 분석법을 구축하려면 뛰어난 원자재와 엄격한 정밀도 검증이 모두 필요합니다. CamelBio는 진단 제조업체, 임상 실험실 및 연구 기관에 프리미엄 IVD 원자재, 기술 서비스 및 전문 컨설팅에 대한 원스톱 액세스를 제공하며, 초기 분석법 컨셉부터 임상까지 모든 단계를 포괄합니다.
LLOQ 근처의 정밀도 프로파일을 평탄화하기 위해 분석법 제형을 개선하든, 로트 간 변동을 해결하든, 규제 제출을 위한 CLSI 준수 데이터 패키지를 준비하든, 당사의 기술 전문가가 도와드립니다.
진단 성능을 향상하고 신뢰할 수 있는 실제 분석법 정밀도를 확보할 준비가 되셨나요? 지금 CamelBio에 문의하여 IVD 원자재 및 기술 솔루션을 살펴보세요!