檢測(cè)系統(tǒng)性能驗(yàn)證ppt課件

.,.,.,檢測(cè)系統(tǒng)性能驗(yàn)證,倪耿彬,.,主要內(nèi)容,.,相關(guān)概念的介紹,1、檢測(cè)系統(tǒng)2、性能評(píng)價(jià)與性能驗(yàn)證3、正確度、精密度和準(zhǔn)確度4、線性范圍和參考區(qū)間,.,檢測(cè)系統(tǒng),一般認(rèn)為，完成一個(gè)檢驗(yàn)項(xiàng)目的測(cè)定所涉及的儀器、試劑、校準(zhǔn)品、質(zhì)控品、消耗品、操作程序、質(zhì)量控制程序、維護(hù)保養(yǎng)程序等的組合，稱為檢測(cè)系統(tǒng)。如果從更廣義上來(lái)看也可以包括樣品采集器具、檢測(cè)用水等。若是有手工操作步驟，則還應(yīng)包括具體的操作人員。,.,性能評(píng)價(jià),自行研究或開發(fā)了一個(gè)檢測(cè)方法，為了使方法的檢測(cè)結(jié)果符合臨床要求，必須對(duì)方法的性能作詳細(xì)而全面的實(shí)驗(yàn)，這時(shí)的實(shí)驗(yàn)是對(duì)性能的評(píng)價(jià)。通常是生產(chǎn)廠家完成。,.,性能驗(yàn)證,對(duì)他人或廠商的評(píng)價(jià)資料中的幾個(gè)主要性能的核實(shí)。由實(shí)驗(yàn)室自己完成。,.,精密度、正確度和準(zhǔn)確度,精密度好，正確度差,正確度好，精密度差,正確度差，精密度差,準(zhǔn)確度好,.,精密度(precision),在規(guī)定條件下，獨(dú)立測(cè)試結(jié)果間的一致程度精密度與隨機(jī)誤差有關(guān),.,正確度(trueness),由大量測(cè)試結(jié)果得到的平均數(shù)與接受參照值間的一致程度正確度差，表明存在顯著的系統(tǒng)誤差。,.,準(zhǔn)確度(accuracy),測(cè)試結(jié)果與接受參照值間的一致程度與隨機(jī)誤差和系統(tǒng)誤差有關(guān),.,線性范圍,線性范圍即定量檢測(cè)項(xiàng)目的分析測(cè)量范圍。指患者標(biāo)本未經(jīng)任何處理（稀釋、濃縮或其他預(yù)處理），由檢測(cè)系統(tǒng)直接測(cè)量得到的可靠結(jié)果范圍，在此范圍內(nèi)一系列不同樣本分析物的測(cè)量值和其實(shí)際的濃度（真值）呈線性比例關(guān)系。,.,參考區(qū)間,對(duì)一個(gè)參考個(gè)體進(jìn)行某項(xiàng)目測(cè)定得到的的值為該個(gè)體的參考值，所有參考抽樣組的各個(gè)參考值合起來(lái)即為參考值范圍。依據(jù)所有參考值的分布特性以及臨床使用要求，選擇合適的統(tǒng)計(jì)方法進(jìn)行歸納分析后，確定參考值范圍中的一部分為參考區(qū)間，區(qū)間的兩端為參考區(qū)間的限值，分為低參考限和高參考限。,.,參考區(qū)間,一般情況下，常選擇95%分布范圍的大小表示參考值區(qū)間。例如：從2.5%位數(shù)到97.5%位數(shù)所在的區(qū)間。很多地方用“參考范圍”表示“參考區(qū)間”，其實(shí)“參考區(qū)間”只是“參考范圍”的一部分，而不是全體，兩者不能混淆。,.,性能驗(yàn)證方案的介紹,1、為什么要做性能驗(yàn)證2、什么時(shí)候做性能驗(yàn)證3、該做哪些性能驗(yàn)證4、如何做性能驗(yàn)證,.,為什么要做性能驗(yàn)證？,我國(guó)的醫(yī)療機(jī)構(gòu)臨床實(shí)驗(yàn)室管理辦法和國(guó)際標(biāo)準(zhǔn)化組織針對(duì)醫(yī)學(xué)實(shí)驗(yàn)室頒布的ISO15189醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則的國(guó)際標(biāo)準(zhǔn)中都要求，設(shè)備在臨床應(yīng)用之前必須要進(jìn)行性能驗(yàn)證，以確定設(shè)備能達(dá)到所要求的性能指標(biāo)。設(shè)備的性能是否合格，對(duì)檢驗(yàn)的結(jié)果起決定性的作用。,.,什么時(shí)候做性能驗(yàn)證？,方法/系統(tǒng)首次在實(shí)驗(yàn)室使用EQA（室間質(zhì)量評(píng)價(jià)）/PT（能力比對(duì)檢驗(yàn)）結(jié)果未通過(guò)，采取糾正措施后達(dá)到文件規(guī)定周期，一般要求一年一次,.,正確度,精密度,線性范圍,參考區(qū)間,靈敏度,抗干擾性能,正確度,精密度,線性范圍,正確度,精密度,參考區(qū)間,線性范圍,正確度,精密度,.,該做哪些性能驗(yàn)證？,檢測(cè)系統(tǒng)的性能驗(yàn)證應(yīng)至少包括：正確度（accuracy）精密度（precision）線性范圍/可報(bào)告范圍（reportablerange）參考區(qū)間（referenceinterval）,.,1、實(shí)驗(yàn)條件儀器的維護(hù)保養(yǎng)儀器校準(zhǔn)室內(nèi)質(zhì)控試劑、校準(zhǔn)品（有效期、批號(hào)等）人員（SOP）（保證儀器的最佳狀態(tài)）,如何做性能驗(yàn)證？,.,如何做性能驗(yàn)證？,2、驗(yàn)證方法按照CLSI（美國(guó)臨床實(shí)驗(yàn)室標(biāo)準(zhǔn)化協(xié)會(huì)）頒布的指南文件進(jìn)行,.,正確度驗(yàn)證方案,主要用于評(píng)價(jià)同一檢驗(yàn)項(xiàng)目?jī)煞N測(cè)量方法之間的偏倚，并確定其偏倚是否在可接受的范圍內(nèi)。通常新方法稱為實(shí)驗(yàn)方法，與之比較的方法稱為比較方法驗(yàn)證方案:1、EP9-A22、EP15-A23、簡(jiǎn)易比對(duì),.,EP9-A2,CLSI于2002年頒布的EP9-A2文件即用患者樣本進(jìn)行方法學(xué)比對(duì)及偏倚評(píng)估批準(zhǔn)指南第二版主要用于確認(rèn)和驗(yàn)證聲明的性能，也可通過(guò)該方案獲得檢測(cè)系統(tǒng)的分析性能特征實(shí)驗(yàn)過(guò)程繁瑣，統(tǒng)計(jì)過(guò)程也比較復(fù)雜，實(shí)用性不強(qiáng),.,EP9-A2,國(guó)內(nèi)實(shí)驗(yàn)室往往未作評(píng)價(jià)前已開始使用該儀器，對(duì)初步性能有一定了解而且許多配套檢測(cè)系統(tǒng)的分析性能已得到大量文獻(xiàn)證實(shí)這種情況下完整而繁瑣的評(píng)價(jià)顯然沒(méi)有必要,.,EP15-A,CLSI于2001年頒布的EP15-A文件即用戶對(duì)精密度和準(zhǔn)確度性能的核實(shí)實(shí)驗(yàn)批準(zhǔn)指南用于核實(shí)實(shí)驗(yàn)室的性能與聲明性能的一致性實(shí)驗(yàn)過(guò)程相對(duì)簡(jiǎn)單，比較常用,.,EP15-A,一、樣本準(zhǔn)備1、來(lái)源新鮮患者標(biāo)本2、儲(chǔ)存最好是當(dāng)天收集當(dāng)天測(cè)定，否則按照待測(cè)成分的穩(wěn)定性來(lái)選擇儲(chǔ)存條件和時(shí)間。3、樣本數(shù)每天5個(gè)，連續(xù)4天，共20個(gè)樣本。4、濃度應(yīng)分布整個(gè)線性范圍，不易得到的濃度可用混合血清。盡可能在線性范圍內(nèi)均勻分布，覆蓋臨床醫(yī)學(xué)決定水平。,.,.,EP15-A,二、實(shí)驗(yàn)方法每個(gè)系統(tǒng)每天做相同的5個(gè)樣本，做4天各20個(gè)樣本。每個(gè)系統(tǒng)得20個(gè)數(shù)據(jù)，共獲得20對(duì)數(shù)據(jù)。,.,EP15-A,三、實(shí)驗(yàn)數(shù)據(jù)處理及結(jié)果判斷計(jì)算20對(duì)數(shù)據(jù)之間的偏倚或百分比偏倚，最后計(jì)算得出兩種方法間的平均偏倚或平均百分比偏倚判斷標(biāo)準(zhǔn)：結(jié)果小于廠家聲明的偏倚或百分比偏倚（或1/2CLIA88允許總誤差），則兩種方法間的偏倚可接受,.,.,簡(jiǎn)易比對(duì),方案實(shí)行前提是系統(tǒng)已做過(guò)EP9-A2或EP15-A2方案驗(yàn)證，常用于EQA樣本要求：5個(gè)樣本，覆蓋測(cè)量范圍，包括醫(yī)學(xué)決定水平。判斷標(biāo)準(zhǔn)：測(cè)量結(jié)果偏倚1/2EQA允許總誤差（允許有一個(gè)結(jié)果偏倚超出可接受限）,.,精密度驗(yàn)證方案,精密度通常用不精密度來(lái)表示。醫(yī)院實(shí)驗(yàn)室對(duì)病人標(biāo)本檢測(cè)時(shí)，由于該行業(yè)的沿襲特點(diǎn)，一直是對(duì)每份標(biāo)本只作一次檢測(cè)發(fā)出報(bào)告。這也是為什么國(guó)際上將不精密度性能列為實(shí)驗(yàn)方法、儀器或試劑盒分析性能的第一位的原因。,.,精密度驗(yàn)證方案,檢測(cè)結(jié)果必須具重現(xiàn)性，也即有良好的精密度。標(biāo)準(zhǔn)差S是各重復(fù)測(cè)定值對(duì)于均值的離散程度指標(biāo)。標(biāo)準(zhǔn)差大小反映了該檢測(cè)系統(tǒng)的不精密度水平。驗(yàn)證方案：1、EP5-A22、EP15-A,.,EP5-A2,NCCLS頒布的EP5-A2文件定量測(cè)量方法的精密度性能評(píng)價(jià)批準(zhǔn)指南第二版主要用于確認(rèn)和驗(yàn)證聲明的性能，也可通過(guò)該方案獲得檢測(cè)系統(tǒng)的分析性能特征實(shí)驗(yàn)過(guò)程繁瑣，統(tǒng)計(jì)過(guò)程也比較復(fù)雜，實(shí)用性不強(qiáng),.,EP5-A2,國(guó)內(nèi)實(shí)驗(yàn)室往往未作評(píng)價(jià)前已開始使用該儀器，對(duì)初步性能有一定了解而且許多配套檢測(cè)系統(tǒng)的分析性能已得到大量文獻(xiàn)證實(shí)這種情況下完整而繁瑣的評(píng)價(jià)顯然沒(méi)有必要,.,EP15-A,NCCLS于2001年頒布的EP15-A文件即用戶對(duì)精密度和準(zhǔn)確度性能的核實(shí)實(shí)驗(yàn)批準(zhǔn)指南用于核實(shí)實(shí)驗(yàn)室的性能與聲明性能的一致性實(shí)驗(yàn)過(guò)程相對(duì)簡(jiǎn)單，比較常用,.,EP15-A,通常廠家都會(huì)給出兩種精密度的聲明批內(nèi)精密度（批內(nèi)）和總的實(shí)驗(yàn)室內(nèi)精密度（總）。因此本方案主要通過(guò)實(shí)驗(yàn)得到估計(jì)的批內(nèi)標(biāo)準(zhǔn)差（S批內(nèi)）和總標(biāo)準(zhǔn)差（S總）并與廠家聲明比較。,.,EP15-A,一、樣本準(zhǔn)備1、來(lái)源質(zhì)控物、校準(zhǔn)品、已分析過(guò)的患者標(biāo)本以及廠家用于精密度實(shí)驗(yàn)的物質(zhì)都可使用。量要足夠多，因?yàn)橐B續(xù)使用5天。2、濃度推薦使用2個(gè)濃度。盡可能選擇接近“醫(yī)學(xué)決定水平”的濃度或與廠商性能接近的濃度，也可選擇可報(bào)告范圍上限或下限濃度。,.,EP15-A,二、實(shí)驗(yàn)方法每天分析1個(gè)批次，2個(gè)濃度，每個(gè)濃度重復(fù)測(cè)定4次，連續(xù)5天。每個(gè)濃度水平得20個(gè)數(shù)據(jù)，共獲得40個(gè)數(shù)據(jù)。,.,EP15-A,三、實(shí)驗(yàn)數(shù)據(jù)處理及結(jié)果判斷分別計(jì)算兩個(gè)濃度的批內(nèi)不精密度（S批內(nèi)）和總不精密度（S總），與廠家聲明或CLIA88允許誤差作比較。若小于廠家聲明或CLIA88允許誤差，則結(jié)果可接受。,.,EP15-A,判斷標(biāo)準(zhǔn)：批內(nèi)的不精密度（S批內(nèi)）1/4CLIA88，則判斷合格總不精密度（S總）0.95(或r0.975)，斜率b在0.97-1.03范圍內(nèi)，a與0無(wú)顯著性差異(截距a接近于0)，則可判斷線性范圍。,.,參考區(qū)間驗(yàn)證方案,隨著愈來(lái)愈多新的檢驗(yàn)項(xiàng)目或方法引入實(shí)驗(yàn)室，要求每個(gè)實(shí)驗(yàn)室，無(wú)論其規(guī)模大小，都去建立自己的參考區(qū)間是不現(xiàn)實(shí)的。因此，臨床實(shí)驗(yàn)室越來(lái)越多地依賴其他實(shí)驗(yàn)室或診斷試驗(yàn)生產(chǎn)商建立或提供的參考值數(shù)據(jù)。這就需要我們?cè)u(píng)估其可接受性。驗(yàn)證方案：CLSIC28-A2,.,CLSIC28-A2,CLSI于2000年頒布CLSIC28-A2文件臨床實(shí)驗(yàn)室如何確定生物參考區(qū)間批準(zhǔn)指南對(duì)廠家提供的或者實(shí)驗(yàn)室正在使用的各個(gè)項(xiàng)目的參考范圍進(jìn)行驗(yàn)證,.,CLSIC28-A2,一、樣本準(zhǔn)備1、來(lái)源正常體檢人群2、樣本數(shù)20例3、樣本要求最好不同年齡段均勻分布二、實(shí)驗(yàn)方法：保證試驗(yàn)系統(tǒng)運(yùn)行正常，依照標(biāo)準(zhǔn)操作程序檢測(cè)標(biāo)本。運(yùn)行該20份標(biāo)本，記錄結(jié)果。,.,CLSIC28-A2,三、實(shí)驗(yàn)數(shù)據(jù)處理及結(jié)果判斷如果20個(gè)參考個(gè)體中不超過(guò)2例的檢測(cè)值在驗(yàn)證的參考限之外，廠商或提供參考區(qū)間的實(shí)驗(yàn)室報(bào)告的95%參考區(qū)間可以接受。,.,CLSIC28-A2,如果2例以上超出界限，再選擇20個(gè)參考個(gè)體進(jìn)行驗(yàn)證，若少于或等于2個(gè)觀測(cè)值超過(guò)原始參考值，則可接受若還有2個(gè)以上超出參考限，需要重新檢查各種條件，決定是否建立自己的參考區(qū)間,.,Question