性能評估精密度

1、精密度評估指導(dǎo)原則1 概述精密度是考察體外診斷試劑對同一樣本重復(fù)測定時能否得到相同實驗結(jié)果的能力的指標(biāo)。精密度評價是質(zhì)量控制的重要內(nèi)容。同時，精密度評估資料也是是評價擬上市產(chǎn)品有效性的重要依據(jù)，是產(chǎn)品注冊所需的重要申報資料之一。本指導(dǎo)原則基于國家食品藥品監(jiān)督管理局體外診斷試劑注冊管理辦法（試行）的有關(guān)要求、參考體外診斷試劑分析性能評估系列指導(dǎo)原則（征求意見稿）、EP05A2-定量檢測方法的精密度評估和臨床檢驗質(zhì)量管理技術(shù)基礎(chǔ)，并依據(jù)我公司具體情況，對定量檢測方法中精密度的評估和數(shù)據(jù)處理方法進(jìn)行了要求。其目的是為我公司研發(fā)人員和相關(guān)技術(shù)人員進(jìn)行定量檢測方法中精密度的評估提供原則性指導(dǎo)。同時也為用

2、戶驗證某種方法和設(shè)備的精密度提供實驗方案指導(dǎo)。這個過程對于某些無法獲得足夠的檢測材料的方法可能并不適用。2 基本概念精密度是指在規(guī)定的測試條件下，同一個均勻供試品，經(jīng)多次取樣測定所得結(jié)果之間的接近程度，即在規(guī)定條件下，獨(dú)立測試結(jié)果表現(xiàn)的一致程度。一般用標(biāo)準(zhǔn)偏差（StandardDeviation,SD）或變異系數(shù)（CoefficientofVariation,CV）表示。給定檢測程序的精密度”可以根據(jù)特定的精密度條件進(jìn)行分類?！爸貜?fù)性”的檢測條件基本不變，常被稱為“批內(nèi)精密度”。“重現(xiàn)性”與條件改變有關(guān)，如：不同的時間、實驗室、操作者和檢測系統(tǒng)（不同校準(zhǔn)品和試劑批號）下的精密度。2.1 批內(nèi)精

3、密度指在同一實驗室，由同一（組）操作員在同一儀器上，使用同一方法和同批號試劑，在一個批次實驗中對同一測試樣品（常用校準(zhǔn)品）重復(fù)測定10次或以上測量結(jié)果的精密度。表現(xiàn)為“重復(fù)性”，也被稱為“序列內(nèi)精密度”和“分析內(nèi)精密度”2.2 批間精密度指在同一實驗室，由同一（組）操作員在同一儀器上，使用同一方法和同一批號試劑，在一段時間內(nèi)（一般不超過一天）對同一測試樣品（常用校準(zhǔn)品）分別做10個或以上試驗批次的測量結(jié)果的精密度。也被稱為“分析間精密度”2.3 天間精密度指在同一實驗室，由同一（組）操作員在同一儀器上，使用同一方法和同一批號試劑，對同一測試樣品（常用校準(zhǔn)品）每天做1次測量，累積測10天或以上測

4、量結(jié)果的精密度。其表現(xiàn)為“重現(xiàn)性”，與時間條件改變有關(guān)，2.4 不同批號試劑盒間精密度指在同一實驗室，由同一（組）操作員在同一儀器上，使用同一方法和10批或以上批號試劑，在一個批次實驗中對同一測試樣品（常用校準(zhǔn)品）分別測量1次測量結(jié)果的精密度。2.5 總精密度將穩(wěn)定的常用校準(zhǔn)品每天做2次實驗，間隔時間不少于2小時，每次對樣品做雙份檢測，共做20個工作日實驗。將運(yùn)行內(nèi)、運(yùn)行間和天間的精密度以方差形式相加，可得到樣品均值下具有的總標(biāo)準(zhǔn)差，由它可客觀地反映真正的總精密度。3 精密度評估的基本原則3.1 操作者必須熟悉方法和/或儀器工作原理，了解并掌握儀器的操作步驟和各項注意事項，能在評估階段維持儀器

5、的可靠和穩(wěn)定。3.2 用于評估試驗的樣品一般常采用臨床實驗室收集的穩(wěn)定和冷凍貯存的血清（漿）庫；當(dāng)實驗室收集的樣品不穩(wěn)定或不易得到時，也可考慮使用穩(wěn)定的、以蛋白質(zhì)為基質(zhì)的商品物質(zhì)，如校準(zhǔn)品或質(zhì)控品。3.3 評估精密度時，應(yīng)至少評估二個濃度水平樣本的精密度。當(dāng)二個濃度的精密度有顯著差異時，建議增加為三個濃度。所選樣本濃度應(yīng)在測量范圍內(nèi)有醫(yī)學(xué)意義，即至少有一個濃度在醫(yī)學(xué)決定水平（medicaldecisionlevels配右。不要為了得到較小的精密度，者6選用較高值的樣品，甚至超出測量范圍。也不應(yīng)選用靠近最低檢出限的樣品，此時所得的精密度往往偏大。相當(dāng)多的檢驗項目低值常無實際臨床意義，但有少數(shù)檢驗

6、項目，其低值也有臨床價值，此時就需要評估有判斷價值的低值精密度，適用時，可進(jìn)行功能靈敏度的評估。如沒有醫(yī)學(xué)決定水平，可在參考區(qū)間上限左右選一個濃度。此外，再根據(jù)檢驗項目的性質(zhì)在線性區(qū)間內(nèi)選擇另一個值。如與廠商或文獻(xiàn)報導(dǎo)的精密度進(jìn)行比較，所選濃度應(yīng)與被比較精密度的濃度相接近。否則，有可能得出不恰當(dāng)?shù)慕Y(jié)論。4 精密度評估的方法和數(shù)據(jù)處理4.1 批內(nèi)精密度的評估4.1.1 評估方法：使用同一批號的試劑和校準(zhǔn)物，每次使用六點(diǎn)定標(biāo)。在一個工作日三次實驗中對樣本進(jìn)行重復(fù)測定，每次進(jìn)行10次重復(fù)測定，進(jìn)行三次實驗，以兩次或以上結(jié)果無顯著差異，做進(jìn)一步分析，求三次實驗CV均值。4.1.2 質(zhì)量控制：檢測時應(yīng)同

7、時至少測一個質(zhì)控品。當(dāng)質(zhì)控品結(jié)果超出規(guī)定的失控限，不論實驗結(jié)果是否滿意都應(yīng)棄去不用，重新進(jìn)行試驗，要保存所有的質(zhì)控數(shù)據(jù)和失控處理記錄。4.1.3 數(shù)據(jù)收集：在進(jìn)行數(shù)據(jù)分析前，檢查數(shù)據(jù)中是否有由于偶然差錯引起的離群值(outliers),可用下述離群值的標(biāo)準(zhǔn)；以已收集的10個或以上數(shù)據(jù)計算出總均值和標(biāo)準(zhǔn)差，任何結(jié)果和總均值的差值超過4個標(biāo)準(zhǔn)差時，可認(rèn)為本次實驗結(jié)果可疑，并進(jìn)行至少2次重復(fù)實驗。以兩次或以上結(jié)果一致的數(shù)據(jù)作為有效數(shù)據(jù)。在進(jìn)行這種批內(nèi)精密度評估實驗時，一次只能有一個離群值，當(dāng)離群值超過1個時，應(yīng)懷疑是否為方法不穩(wěn)定或操作者不熟悉所致。此時，應(yīng)不用此次試驗數(shù)據(jù)。檢查問題和解決問題后重新

8、開始新的評估實驗。4.1.4 數(shù)據(jù)的記錄：將所收集到的數(shù)據(jù)記錄在表1:表1批內(nèi)精密度實驗原始數(shù)據(jù)記錄在舁廳P第一次第二次第三次質(zhì)控品1質(zhì)控品2質(zhì)控品1質(zhì)控品2質(zhì)控品1質(zhì)控品212.910均值4.1.5單次分析內(nèi)精密度估計值的計算xii1求出均值：x=-n計算標(biāo)準(zhǔn)差計算變異系數(shù)n為一次實驗的重復(fù)測定次數(shù)，這里n=104.2 評估分析間精密度4.2.1 評估方法：使用同一批號的試劑和校準(zhǔn)物，每次使用六點(diǎn)定標(biāo)。在一個工作日內(nèi)分別做10個實驗批次的測量，每次測量重復(fù)三次。4.2.2 質(zhì)量控制：檢測時應(yīng)同時至少測一個質(zhì)控品。當(dāng)質(zhì)控品結(jié)果超出規(guī)定的失控限，不論實驗結(jié)果是否滿意都應(yīng)棄去不用，重新進(jìn)行試驗，要

9、保存所有的質(zhì)控數(shù)據(jù)和失控處理記錄。4.2.3 數(shù)據(jù)收集：在進(jìn)行數(shù)據(jù)分析前，檢查數(shù)據(jù)中是否有由于偶然差錯引起的離群值(outliers),可用下述離群值的標(biāo)準(zhǔn)；從已收集的10個或以上數(shù)據(jù)計算出總均值和標(biāo)準(zhǔn)差，任何結(jié)果和總均值的差值超過4個標(biāo)準(zhǔn)差時，可認(rèn)為本次實驗結(jié)果可疑，并進(jìn)行至少2次重復(fù)實驗。以兩次或以上結(jié)果一致的數(shù)據(jù)作為有效數(shù)據(jù)。在進(jìn)行這種批問精密度評估實驗時，一次只能有一個離群值，當(dāng)離群值超過1個時，應(yīng)懷疑是否為方法不穩(wěn)定或操作者不熟悉所致。此時，應(yīng)不用此次試驗數(shù)據(jù)。檢查問題和解決問題后重新開始新的評估實驗。4.2.4 數(shù)據(jù)的記錄：將所收集到的數(shù)據(jù)記錄在表2:表2分析間精密度實驗原始數(shù)據(jù)記

10、錄實驗批次質(zhì)控品1質(zhì)控品2結(jié)果1結(jié)果2結(jié)果3結(jié)果1結(jié)果2結(jié)果312.910均值求出總體均值:n k' X Xj_i =1 j =1y,一次實驗的均值Xinkk, Xj rk4.2.5批次間精密度估計值的計算n為實驗進(jìn)行的批次，4.3評估天間精密度4.3.1評估方法：使用同一批號的試劑和校準(zhǔn)物，每次使用六點(diǎn)定標(biāo)。在一個工作日早、中、晚各進(jìn)行一次實驗，每次實驗中對樣本各測定1次，累計10個工作日結(jié)果。以兩次或以上結(jié)果無顯著差異，做進(jìn)一步分析，求三次實驗CV均值。計算標(biāo)準(zhǔn)差計算變異系數(shù)k為每次實驗的重復(fù)次數(shù)，這里n=10,k=3o4.3.2 質(zhì)量控制：檢驗時應(yīng)同時每批至少測一個質(zhì)控品。當(dāng)質(zhì)控

11、品結(jié)果超出規(guī)定的失控限，不論實驗結(jié)果是否滿意都應(yīng)棄去不用，重新進(jìn)行試驗，要保存所有的質(zhì)控數(shù)據(jù)和失控處理記錄。4.3.3 數(shù)據(jù)收集：在進(jìn)行數(shù)據(jù)分析前，檢查數(shù)據(jù)中有無由于偶然差錯引起的離群值(outliers),可用下述離群值的標(biāo)準(zhǔn)；從已收集的10個或以上數(shù)據(jù)計算出總均值和標(biāo)準(zhǔn)差，任何結(jié)果和總均值的差值超過4個標(biāo)準(zhǔn)差時，可認(rèn)為本次實驗結(jié)果可疑，并進(jìn)行至少2次重復(fù)實驗。以兩次或以上結(jié)果一致的數(shù)據(jù)作為有效數(shù)據(jù)。在進(jìn)行天間精密度評估實驗時，一次一批次只能有一個離群值，當(dāng)離群值超過1個時，應(yīng)懷疑是否為方法不穩(wěn)定或操作者不熟悉所致。此時，應(yīng)不用此次試驗數(shù)據(jù)。檢查問題和解決問題后重新開始新的評估實驗。4.3.

12、4 數(shù)據(jù)的記錄：將所收集到的數(shù)據(jù)記錄在表3:表3批間精密度實驗原始數(shù)據(jù)記錄日期第一次實驗第二次實驗第三次實驗質(zhì)控品1質(zhì)控品2質(zhì)控品1質(zhì)控品2質(zhì)控品1質(zhì)控品212.910均值4.3.5天間精密度估計值的計算n'Xii=1求出均值：X二一廠計算標(biāo)準(zhǔn)差計算變異系數(shù)n為累計實驗的天數(shù)，這里n=10,4.4 評估不同批號試劑盒間精密度4.4.1 評估方法：使用同一種類、10個批號試劑，一種校準(zhǔn)物，每次使用六點(diǎn)定標(biāo)。在一個工作日一次實驗中用不同批號試劑對樣本進(jìn)行10次測定，進(jìn)行三次實驗，以兩次或以上結(jié)果無顯著差異，做進(jìn)一步分析，求三次實驗CV均值。4.4.2 質(zhì)量控制：檢驗時應(yīng)同時每批至少測一個質(zhì)

13、控品。當(dāng)質(zhì)控品結(jié)果超出規(guī)定的失控限，不論實驗結(jié)果是否滿意都應(yīng)棄去不用，重新進(jìn)行試驗，要保存所有的質(zhì)控數(shù)據(jù)和失控處理記錄。4.4.3 數(shù)據(jù)收集：在進(jìn)行數(shù)據(jù)分析前，檢查數(shù)據(jù)中有無由于偶然差錯引起的離群值(outliers),可用下述離群值的標(biāo)準(zhǔn)；從已收集的10個或以上數(shù)據(jù)計算出總均值和標(biāo)準(zhǔn)差，任何結(jié)果和總均值的差值超過4個標(biāo)準(zhǔn)差時，可認(rèn)為本次實驗結(jié)果可疑，并進(jìn)行至少2次重復(fù)實驗。以兩次或以上結(jié)果一致的數(shù)據(jù)作為有效數(shù)據(jù)。在進(jìn)行不同批號試劑盒間精密度評估實驗時，一次一批次只能有一個離群值，當(dāng)離群值超過1個時，應(yīng)懷疑是否為方法不穩(wěn)定或操作者不熟悉所致。此時，應(yīng)不用此次試驗數(shù)據(jù)。檢查問題和解決問題后重新開

14、始新的評估實驗。4.4.4 數(shù)據(jù)的記錄：將所收集到的數(shù)據(jù)記錄在表4表4不同批號試劑間精密度實驗原始數(shù)據(jù)記錄批號第一次實驗第二次實驗第三次實驗質(zhì)控品1質(zhì)控品2質(zhì)控品1質(zhì)控品2質(zhì)控品1質(zhì)控品212.910均值4.4.5不同批號試劑盒間精密度估計值的計算n'Xii1求出均值：x=-n-計算標(biāo)準(zhǔn)差計算變異系數(shù)4.5 評估總精密度4.5.1 評估方法：每天做2個批次的測試，每批測試時，對同一樣品作雙份測量，共做20天。評估結(jié)束時共有40對，即80個測試結(jié)果。從40批次測量中雙份結(jié)果的差值求出運(yùn)行內(nèi)精密度。從所有80個數(shù)據(jù)計算出批間精密度。將穩(wěn)定的常用質(zhì)控品每天做2次實驗，間隔時間不少于2小時，每

15、次對樣品做雙份檢測，共做20個工作日實驗。將運(yùn)行內(nèi)、大間、運(yùn)行間的精密度以方差形式相加，可得到樣品均值下具有的總標(biāo)準(zhǔn)差，由它可客觀地反映真正的總精密度。在實施此項評估工作時，必須由同一個或一組操作者在同一臺儀器上進(jìn)行，應(yīng)該使用相同的校準(zhǔn)品、相同種類和批號的試劑。所用時間不得少于20個工作日，這樣所測到的精密度能更好地反映出該臨床實驗室定量測量方法在一段時間內(nèi)的理想或最適的穩(wěn)定性。在每一批次測量中，必須同時測量質(zhì)控品，以保證結(jié)果是可靠的，數(shù)據(jù)能夠采用。4.5.2 數(shù)據(jù)的收集要收集到足夠有效數(shù)據(jù)(至少為80個數(shù)據(jù))。除補(bǔ)充由于質(zhì)控失控而增加的測試外，應(yīng)在進(jìn)行數(shù)據(jù)分析前，檢查數(shù)據(jù)中有無由于偶然差錯引

16、起的離群值(outlier),可用下述剔除值的標(biāo)準(zhǔn)；從實施段已收集的40對均值的數(shù)據(jù)計算出總均值和標(biāo)準(zhǔn)差，出現(xiàn)下列任何一種情況都可認(rèn)為是離群值：(1)任何一對均值和總均值的差超過4倍標(biāo)準(zhǔn)差(2)任何一對中二個結(jié)果的絕對差值超過4倍標(biāo)準(zhǔn)差離群值不用于精密度的計算。在剔除后應(yīng)再增加檢驗次數(shù)，以保證至少有40批次，80個數(shù)據(jù)進(jìn)行計算。注：任何一次實驗的剔除值不能超過總測量數(shù)的2.5%。當(dāng)超過時，應(yīng)懷疑是否為方法不穩(wěn)定或操作者不熟悉所致。此時應(yīng)不用此次試驗數(shù)據(jù)，重新開始新的試驗。4.5.3 數(shù)據(jù)的記錄：將所收集到的數(shù)據(jù)記錄在表5。表5精密度實驗原始數(shù)據(jù)記錄序號日期第一次實驗第二次實驗結(jié)果1結(jié)果2均值結(jié)

17、果1結(jié)果2均值1219204.5.4 運(yùn)行內(nèi)精密度（repeatbilityestimimation）的標(biāo)準(zhǔn)差評估按表5要求對數(shù)據(jù)進(jìn)行進(jìn)一步計算，將結(jié)果填入表6表6精密度實驗原始數(shù)據(jù)計算日第一次實驗第二次實驗（結(jié)果1-結(jié)果2）2（結(jié)果1-結(jié)果2）2121920合計(4)利用表6中的結(jié)果依據(jù)下列公式計算批內(nèi)標(biāo)準(zhǔn)差Sr:I=檢測運(yùn)行的總天數(shù)（通常為20）j=每天檢測運(yùn)行的次數(shù)（1或2）xiji=第i天，第j次檢測，第1個測定的結(jié)果Xij2=第i天，第j次檢測，第2個測定的結(jié)果4.5.5 運(yùn)行問和大間標(biāo)準(zhǔn)差的計算，將上述實驗結(jié)果記錄在表7中表7:次問和天間精密度實驗原始數(shù)據(jù)記錄第一次第二次結(jié)果1結(jié)果2結(jié)果1結(jié)果2121920合計(1)