檢測系統(tǒng)性能驗(yàn)證-文檔資料

1、123檢測系統(tǒng)性能驗(yàn)證檢測系統(tǒng)性能驗(yàn)證 倪耿彬4主要內(nèi)容相關(guān)概念的介紹1性能驗(yàn)證方案的介紹2問題及討論35相關(guān)概念的介紹1、檢測系統(tǒng)2、性能評價(jià)與性能驗(yàn)證3、正確度、精密度和準(zhǔn)確度4、線性范圍和參考區(qū)間6檢測系統(tǒng) 一般認(rèn)為，完成一個(gè)檢驗(yàn)項(xiàng)目的測定所涉及的儀器、試劑、校準(zhǔn)品、質(zhì)控品、消耗品、操作程序、質(zhì)量控制程序、維護(hù)保養(yǎng)程序等的組合，稱為檢測系統(tǒng)檢測系統(tǒng)。如果從更廣義上來看也可以包括樣品采集器具、檢測用水等。若是有手工操作步驟，則還應(yīng)包括具體的操作人員。7性能評價(jià) 自行研究或開發(fā)了一個(gè)檢測方法，為了使方法的檢測結(jié)果符合臨床要求，必須對方法的性能作詳細(xì)而全面的實(shí)驗(yàn)，這時(shí)的實(shí)驗(yàn)是對性能的評價(jià)性能的

2、評價(jià)。 通常是生產(chǎn)廠家完成生產(chǎn)廠家完成。8性能驗(yàn)證 對他人或廠商的評價(jià)資料中的幾個(gè)主要性能的核實(shí)核實(shí)。 由實(shí)驗(yàn)室實(shí)驗(yàn)室自己完成。9精密度、正確度和準(zhǔn)確度精密度好，正確度差正確度好，精密度差正確度差，精密度差準(zhǔn)確度好10精密度( precision)n在規(guī)定條件下，獨(dú)立測試結(jié)果間的一致程度n精密度與隨機(jī)誤差隨機(jī)誤差有關(guān)11正確度( trueness)n由大量測試結(jié)果得到的平均數(shù)與接受參照值間的一致程度n正確度差，表明存在顯著的系統(tǒng)誤差系統(tǒng)誤差。12準(zhǔn)確度( accuracy) n測試結(jié)果與接受參照值間的一致程度n與隨機(jī)誤差和系統(tǒng)誤差有關(guān)13線性范圍 線性范圍即定量檢測項(xiàng)目的分析測量范圍分析測量范

3、圍。指患者標(biāo)本未經(jīng)任何處理未經(jīng)任何處理（稀釋、濃縮或其他預(yù)處理），由檢測系統(tǒng)直接測量得到的可靠結(jié)果范圍可靠結(jié)果范圍，在此范圍內(nèi)一系列不同樣本分析物的測量值和其實(shí)際的濃度（真值）呈線性比例線性比例關(guān)系。14參考區(qū)間n對一個(gè)參考個(gè)體進(jìn)行某項(xiàng)目測定得到的的值為該個(gè)體的參考值，所有參考抽樣組的各個(gè)參考值合起來即為參考值范圍參考值范圍。 n依據(jù)所有參考值的分布特性以及臨床使用要求，選擇合適的統(tǒng)計(jì)方法進(jìn)行歸納分析后，確定參考值范圍中的一部分為參考區(qū)間參考區(qū)間，區(qū)間的兩端為參考區(qū)間的限值，分為低參考限和高參考限。 15參考區(qū)間n一般情況下，常選擇95%分布范圍的大小表示參考值區(qū)間。例如：從2.5%位數(shù)到97

4、.5%位數(shù)所在的區(qū)間。n很多地方用“參考范圍”表示“參考區(qū)間” ，其實(shí)“參考區(qū)間”只是“參考范圍”的一部分，而不是全體，兩者不能混淆。 16性能驗(yàn)證方案的介紹n1、為什么要做性能驗(yàn)證n2、什么時(shí)候做性能驗(yàn)證n3、該做哪些性能驗(yàn)證n4、如何做性能驗(yàn)證17為什么要做性能驗(yàn)證？n我國的醫(yī)療機(jī)構(gòu)臨床實(shí)驗(yàn)室管理辦法和國際標(biāo)準(zhǔn)化組織針對醫(yī)學(xué)實(shí)驗(yàn)室頒布的ISO15189醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則的國際標(biāo)準(zhǔn)中都要求，設(shè)備在臨床應(yīng)用之前必須要進(jìn)行性能驗(yàn)證臨床應(yīng)用之前必須要進(jìn)行性能驗(yàn)證，以確定設(shè)備能達(dá)到所要求的性能指標(biāo)。n設(shè)備的性能是否合格，對檢驗(yàn)的結(jié)果起決定性的作用。18什么時(shí)候做性能驗(yàn)證？n方法/系統(tǒng)首次在

5、實(shí)驗(yàn)室使用nEQA（室間質(zhì)量評價(jià)）/PT（能力比對檢驗(yàn)）結(jié)果未通過，采取糾正措施后n達(dá)到文件規(guī)定周期，一般要求一年一次19正確度精密度線性范圍參考區(qū)間靈敏度抗干擾性能正確度精密度線性范圍正確度精密度參考區(qū)間線性范圍正確度精密度20該做哪些性能驗(yàn)證？檢測系統(tǒng)的性能驗(yàn)證應(yīng)至少包括：n正確度（accuracy）n精密度（precision）n線性范圍/可報(bào)告范圍（reportable range）n參考區(qū)間（reference interval）211、實(shí)驗(yàn)條件n儀器的維護(hù)保養(yǎng)n儀器校準(zhǔn)n室內(nèi)質(zhì)控n試劑、校準(zhǔn)品（有效期、批號(hào)等）n人員（SOP）（保證儀器的最佳狀態(tài)）（保證儀器的最佳狀態(tài)）如何做性能驗(yàn)

6、證？22如何做性能驗(yàn)證？ 2、驗(yàn)證方法 按照CLSI（美國臨床實(shí)驗(yàn)室標(biāo)準(zhǔn)化協(xié)會(huì)） 頒布的指南文件進(jìn)行23正確度驗(yàn)證方案 主要用于評價(jià)評價(jià)同一檢驗(yàn)項(xiàng)目兩種測量方法兩種測量方法之間的偏倚之間的偏倚，并確定其偏倚是否在可接受的范圍內(nèi)。通常新方法稱為實(shí)驗(yàn)方法，與之比較的方法稱為比較方法 驗(yàn)證方案: 1 1、EP9-A2 EP9-A2 2 2、EP15-A2 EP15-A2 3 3、簡易比對、簡易比對 24EP9-A2nCLSI于2002年頒布的EP9-A2文件即用患者樣本進(jìn)行方法學(xué)比對及偏倚評估批準(zhǔn)指南第二版n主要用于確認(rèn)和驗(yàn)證聲明的性能，也可通過該方案獲得檢測系統(tǒng)的分析性能特征n實(shí)驗(yàn)過程繁瑣，統(tǒng)計(jì)過

7、程也比較復(fù)雜，實(shí)用性不強(qiáng)25EP9-A2n國內(nèi)實(shí)驗(yàn)室往往未作評價(jià)前已開始使用該儀器，對初步性能有一定了解n而且許多配套檢測系統(tǒng)的分析性能已得到大量文獻(xiàn)證實(shí)n這種情況下完整而繁瑣的評價(jià)顯然沒有必要26EP15-AnCLSI于2001年頒布的EP15-A文件即用戶對精密度和準(zhǔn)確度性能的核實(shí)實(shí)驗(yàn)批準(zhǔn)指南n用于核實(shí)核實(shí)實(shí)驗(yàn)室的性能與聲明性能的一致性n實(shí)驗(yàn)過程相對簡單，比較常用27EP15-A一、樣本準(zhǔn)備1、來源 新鮮患者標(biāo)本2、儲(chǔ)存 最好是當(dāng)天收集當(dāng)天測定，否則按照待測成分的穩(wěn)定性來選擇儲(chǔ)存條件和時(shí)間。3、樣本數(shù) 每天每天5個(gè)，連續(xù)個(gè)，連續(xù)4天天，共，共20個(gè)樣本個(gè)樣本。4、濃度 應(yīng)分布整個(gè)線性范圍，

8、不易得到的濃度可用混合血清。盡可能在線性范圍內(nèi)均勻分布，覆蓋臨床醫(yī)學(xué)決定水平。2829EP15-A二、實(shí)驗(yàn)方法n每個(gè)系統(tǒng)每天做相同的5個(gè)樣本，做4天各20個(gè)樣本。n每個(gè)系統(tǒng)得20個(gè)數(shù)據(jù)，共獲得20對數(shù)據(jù)。30EP15-A 三、實(shí)驗(yàn)數(shù)據(jù)處理及結(jié)果判斷 計(jì)算20對數(shù)據(jù)之間的偏倚或百分比偏倚，最后計(jì)算得出兩種方法間的平均偏倚或平均百分比偏倚 判斷標(biāo)準(zhǔn)：判斷標(biāo)準(zhǔn)：結(jié)果小于廠家聲明的偏倚或百分比偏倚（或1/2 CLIA88允許總誤允許總誤差差），則兩種方法間的偏倚可接受3132簡易比對n方案實(shí)行前提是系統(tǒng)已做過EP9-A2或EP15-A2方案驗(yàn)證，常用于EQAn樣本要求：5個(gè)樣本，覆蓋測量范圍，包括醫(yī)學(xué)

9、決定水平。n判斷標(biāo)準(zhǔn)：測量結(jié)果偏倚1/2 EQA允允許總誤差許總誤差（允許有一個(gè)結(jié)果偏倚超出可接受限）33精密度驗(yàn)證方案 精密度通常用不精密度不精密度來表示。醫(yī)院實(shí)驗(yàn)室對病人標(biāo)本檢測時(shí)，由于該行業(yè)的沿襲特點(diǎn)，一直是對每份標(biāo)本只作一次每份標(biāo)本只作一次檢測檢測發(fā)出報(bào)告。這也是為什么國際上將不精密度性能列為實(shí)驗(yàn)方法、儀器或試劑盒分析性能的第一位分析性能的第一位的原因。34精密度驗(yàn)證方案n檢測結(jié)果必須具重現(xiàn)性，也即有良好的精密度。標(biāo)準(zhǔn)差標(biāo)準(zhǔn)差S是各重復(fù)測定值對于均值的離散程度離散程度指標(biāo)。n標(biāo)準(zhǔn)差大小反映了該檢測系統(tǒng)的不精密度水平。 n驗(yàn)證方案：1、EP5-A2 2、EP15-A35EP5-A2nNC

10、CLS頒布的EP5-A2文件定量測量方法的精密度性能評價(jià)批準(zhǔn)指南第二版n主要用于確認(rèn)和驗(yàn)證聲明的性能，也可通過該方案獲得檢測系統(tǒng)的分析性能特征n實(shí)驗(yàn)過程繁瑣，統(tǒng)計(jì)過程也比較復(fù)雜，實(shí)用性不強(qiáng)36EP5-A2n國內(nèi)實(shí)驗(yàn)室往往未作評價(jià)前已開始使用該儀器，對初步性能有一定了解n而且許多配套檢測系統(tǒng)的分析性能已得到大量文獻(xiàn)證實(shí)n這種情況下完整而繁瑣的評價(jià)顯然沒有必要37EP15-AnNCCLS于2001年頒布的EP15-A文件即用戶對精密度和準(zhǔn)確度性能的核實(shí)實(shí)驗(yàn)批準(zhǔn)指南n用于核實(shí)實(shí)驗(yàn)室的性能與聲明性能的一致性n實(shí)驗(yàn)過程相對簡單，比較常用38EP15-A 通常廠家都會(huì)給出兩種精密度的聲明批內(nèi)精密度（批內(nèi)精

11、密度（批內(nèi)）批內(nèi)）和總的實(shí)驗(yàn)室內(nèi)總的實(shí)驗(yàn)室內(nèi)精密度（精密度（總）總）。因此本方案主要通過實(shí)驗(yàn)得到估計(jì)的批內(nèi)標(biāo)準(zhǔn)差（S批內(nèi)）和總標(biāo)準(zhǔn)差（S總）并與廠家聲明比較。39EP15-A 一、樣本準(zhǔn)備 1、來源 質(zhì)控物、校準(zhǔn)品、已分析過的患者標(biāo)本以及廠家用于精密度實(shí)驗(yàn)的物質(zhì)都可使用。量要足夠多量要足夠多，因?yàn)橐B續(xù)使用5天。 2、濃度 推薦使用2個(gè)濃度個(gè)濃度。盡可能選擇接近“醫(yī)學(xué)決定水平”的濃度或與廠商性能接近的濃度，也可選擇可報(bào)告范圍上限或下限濃度。40EP15-A二、實(shí)驗(yàn)方法n每天分析1個(gè)批次，2個(gè)濃度，每個(gè)濃度每個(gè)濃度重復(fù)測定重復(fù)測定4次，連續(xù)次，連續(xù)5天天。n每個(gè)濃度水平得20個(gè)數(shù)據(jù)，共獲得40個(gè)

12、數(shù)據(jù)。41EP15-A 三、實(shí)驗(yàn)數(shù)據(jù)處理及結(jié)果判斷 分別計(jì)算兩個(gè)濃度的批內(nèi)不精密度（S批內(nèi)）和總不精密度（S總），與廠家聲明或CLIA88允許誤差作比較。若小于廠家聲明或CLIA88允許誤差，則結(jié)果可接受。42EP15-A 判斷標(biāo)準(zhǔn)：判斷標(biāo)準(zhǔn)：n批內(nèi)的不精密度（批內(nèi)的不精密度（S S批內(nèi)）批內(nèi)）1/4 CLIA881/4 CLIA88，則判斷合格n 總不精密度（總不精密度（S S總）總） 1/3 CLIA880.95 (或r0.975)，斜率b在0.97-1.03范圍內(nèi)，a與0無顯著性差異(截距a接近于0)，則可判斷線性范圍。50參考區(qū)間驗(yàn)證方案n隨著愈來愈多新的檢驗(yàn)項(xiàng)目或方法引入實(shí)驗(yàn)室，要求

13、每個(gè)實(shí)驗(yàn)室，無論其規(guī)模大小，都去建立自己的參考區(qū)間是不現(xiàn)建立自己的參考區(qū)間是不現(xiàn)實(shí)的實(shí)的。因此，臨床實(shí)驗(yàn)室越來越多地依賴其他實(shí)驗(yàn)室或診斷試驗(yàn)生產(chǎn)商建立或提供的參考值數(shù)據(jù)。這就需要我們評估其可接受性可接受性。n驗(yàn)證方案： CLSI C28-A251CLSI C28-A2nCLSI于2000年頒布CLSI C28-A2文件臨床實(shí)驗(yàn)室如何確定生物參考區(qū)間批準(zhǔn)指南n對廠家提供的或者實(shí)驗(yàn)室正在使用的各個(gè)項(xiàng)目的參考范圍進(jìn)行驗(yàn)證驗(yàn)證52CLSI C28-A2一、樣本準(zhǔn)備1、來源 正常體檢人群2、樣本數(shù) 20例3、樣本要求 最好不同年齡段均勻分布二、實(shí)驗(yàn)方法：二、實(shí)驗(yàn)方法： 保證試驗(yàn)系統(tǒng)運(yùn)行正常，依照標(biāo)準(zhǔn)操作程序檢測標(biāo)本。運(yùn)行該20份標(biāo)本，記錄結(jié)果。53CLSI C28-A2三、實(shí)驗(yàn)數(shù)據(jù)處理及結(jié)果判斷 如果20個(gè)參考個(gè)體中不超過2例的檢測值在驗(yàn)證的參考限之外，廠商或提供參考區(qū)間的實(shí)驗(yàn)室報(bào)告的95%參考區(qū)間可以接受。54CLSI C28-A2n如果2例以上超出界限，再選擇20個(gè)參考個(gè)體進(jìn)行驗(yàn)證，若少于或等于2個(gè)觀測值超過原始參考值，則可接受n若還有2個(gè)以上超出參考限，需要重新檢查各種條件，決定是否建立自己的參考區(qū)間建立自己的參考區(qū)間5