方法對比及偏差評估的方法-付紅偉PPT課件

1、2021/3/91 1方法對比及偏差評估的方法方法對比及偏差評估的方法 -介紹介紹NCCLS文件文件EP9-A2報告人：付紅偉報告人：付紅偉醫(yī)大總醫(yī)院醫(yī)大總醫(yī)院醫(yī)學檢驗科醫(yī)學檢驗科2016.07.272016.07.272021/3/92 2NCCLS(NCCLS(美國臨床實驗室標準化委員會）美國臨床實驗室標準化委員會）NCCLS是一個國際性、多學科、非盈利、制定標準、教育型組織，在臨床檢驗界內(nèi)促進標準和指南的使用和發(fā)展。NCCLS制定標準的原則是從質(zhì)量效益和成本效益兩方面考慮，為患者檢驗和臨床檢驗組織服務。大多數(shù)NCCLS文件有“建議”和“批準”兩個層次的認同過程。建議：作為NCCLS的建議

2、標準或指南處在被臨床檢驗界評審的第一階段，此文件需接受廣泛、全面的技術審核，包括對范圍、方法、用途及技術和編寫內(nèi)容的逐行逐字的審核。批準：批準的標準或指南已在臨床檢驗界得到認同。應審核并評價最終文件的有效性，確保達到認同。2021/3/93 3EP9-A2EP9-A2文件內(nèi)容文件內(nèi)容NCCLS文件EP9-A2（用患者標本進行方法比對及偏倚評估；批準指南-第二版）是為實驗室人員和生產(chǎn)廠商制定的。它敘述了測定兩種方法之間相對偏倚的程序，也敘述了采用一分為二的患者樣本設計方法比對試驗時所需要考慮的因素。2021/3/94 4方法學比對具體流程方法學比對具體流程1 1 儀器熟悉階段儀器熟悉階段2.2.

3、質(zhì)量控制分析質(zhì)量控制分析3 3 方法比對試驗方法比對試驗 3.1 實驗樣本的選擇 3.2 實驗樣本的測定4 4 初步數(shù)據(jù)檢查初步數(shù)據(jù)檢查 4.1 方法內(nèi)雙份數(shù)據(jù)的離群值檢驗 4.2 數(shù)據(jù)作圖 4.3 線性相關的目測檢查 4.4 方法間離群值的目測檢查 4.5 X值合適范圍的檢驗5 5 線性回歸線性回歸 5.1 計算 5.2 分散均勻性的目測檢查6 6 計算預期偏倚及其可信區(qū)間計算預期偏倚及其可信區(qū)間 6.1 線性回歸法（當數(shù)據(jù)通過合適范圍及均勻離散度檢查時） 6.2當數(shù)據(jù)未通過合適范圍及均勻離散度檢查時，使用分部偏倚法 6.3 當數(shù)據(jù)有不恒定（可變的）精密度時，用分部殘差計算預期偏倚7 7 結(jié)

4、果解釋以及內(nèi)部性能標準比較結(jié)果解釋以及內(nèi)部性能標準比較2021/3/95 5工作組建議在至少5個工作日內(nèi)最少要分析完40個患者樣本。增加測定樣本數(shù)及測定天數(shù)，可以提高實驗的可靠性及有效性。應盡可能使至少50樣本的測定結(jié)果處于實驗室的參考區(qū)間之外。如果從一個患者得不到所需的樣本量，可以將兩個（但不能多于兩個）病史相同，被測物濃度也大致相近的患者標本混合使用，成為“微混合樣本”。3.1 3.1 實驗樣本的選擇實驗樣本的選擇2021/3/96 6l 分別用兩種方法對待測標本進行雙份重復測定。指定第一次測定順序，按反向順序檢測第二次（雙份）。即：樣品可以按下述順序進行，1、2、3、4、5、6、7、8和

5、8、7、6、5、4、3、2、1。l對于全部標本，均應在兩小時內(nèi)測定完畢。如果可能，最好使用測定當天的標本。如果使用儲存標本，儲存方式必須能確保樣本的穩(wěn)定性，以滿足參比方法和待評方法的要求。3.2 3.2 實驗樣本的測定實驗樣本的測定2021/3/97 74 4 初步數(shù)據(jù)檢查初步數(shù)據(jù)檢查4.1 方法內(nèi)雙份數(shù)據(jù)的離群值檢驗方法內(nèi)雙份數(shù)據(jù)的離群值檢驗 計算每個方法雙份測定的差值絕對值的均值， 取各方法的平均絕對差值的四倍作為每個方法的“可接受”限如果刪除的數(shù)據(jù)超出一個，則需擴大調(diào)查范圍，查找出現(xiàn)偏差的原因。如果能夠找到問題所在并能追蹤到引起偏差的樣品，則應替換這些樣品，且將問題記錄在案。判斷有判斷有

6、2021/3/98 84.2 4.2 數(shù)據(jù)作圖數(shù)據(jù)作圖圖圖1：重復檢測均值散點圖（試驗方法均值對比較方法均值）：重復檢測均值散點圖（試驗方法均值對比較方法均值）4.3 線性相關目測檢測4.4 方法間離群值目測檢測2021/3/99 94.2 4.2 數(shù)據(jù)作圖數(shù)據(jù)作圖4.4 方法間離群值目測檢測圖圖2 ：均值差異與二種方法的均值的偏倚圖：均值差異與二種方法的均值的偏倚圖（試驗方法均值（試驗方法均值比較方法均值）對（試驗方法均值比較方法均值）對（試驗方法均值+比較方法均值）比較方法均值）/25.2 分散均勻性的目測檢查2021/3/91010一般情況下，如果r0.975（或r20.95），則可認為

7、X值取值范圍合適。如果根據(jù)測定數(shù)據(jù)算出的r能滿足上述要求，則可認為X的誤差已被數(shù)據(jù)范圍所抵消。這時就可用簡單的直線回歸來估計斜率和截距。如果r20.95，則必須分析更多的樣品以擴大數(shù)據(jù)濃度分布范圍，然后再重新分析全部數(shù)據(jù)。如果X的取值范圍無法擴大，則可采用6.2節(jié)中描述的分部偏倚法代替回歸方法來評價平均偏倚。4.2 X 4.2 X 值合適范圍的檢驗值合適范圍的檢驗2021/3/911115 5 線性回歸分析線性回歸分析平均Y對平均X值斜率b和截距a的計算公式如下：可用以下方程表示：其中：2021/3/912126 6 計算預期偏倚及其可信區(qū)間計算預期偏倚及其可信區(qū)間6.1 線性回歸法（當數(shù)據(jù)通

8、過適合范圍和均勻離散度的檢查）在給定的醫(yī)學決定水平Xc處的預期偏倚（Bc）的估計值，按以下公式計算：Bc的95%可信區(qū)間（在Xc處的真正偏倚）按以下公式計算：2021/3/913136.2 當數(shù)據(jù)未通過適合范圍檢查時，使用分部個別差異法計算平均偏倚（分部偏倚法）6.3 當數(shù)據(jù)有非恒定精密度時，用分部殘差計算預期偏倚（分部殘差法）6 6 計算預期偏倚及其可信區(qū)間計算預期偏倚及其可信區(qū)間2021/3/914147.7.結(jié)果的解釋以及與內(nèi)部性能標準的比較結(jié)果的解釋以及與內(nèi)部性能標準的比較根據(jù)數(shù)據(jù)的檢查結(jié)果，使用簡單的線性回歸方法估計在醫(yī)學決定水平處的預期偏倚的可信區(qū)間。然后把此評價結(jié)果與廠家聲明或內(nèi)

9、部標準進行比較以判斷方廠家聲明或內(nèi)部標準進行比較以判斷方法是否可以接受（法是否可以接受（CLIA88/2)CLIA88/2)。如果兩種方法不相當，但仍相信候選方法更特異，則不要拒絕新方法，在常規(guī)應用前收集新的臨床數(shù)據(jù)（如建立新的參考范圍）。應注意實驗室要建立兩種應注意實驗室要建立兩種方法之間的允許差異的標準方法之間的允許差異的標準。2021/3/91515實例分析實例分析-1-1結(jié)論：兩種儀器間結(jié)論：兩種儀器間ALTALT測試結(jié)果有顯著差異，不符合測試結(jié)果有顯著差異，不符合CLIA88CLIA88要求，應及時進行校正工作。要求，應及時進行校正工作。R R2 2=0.9970.95=0.9970

10、.95，X X分布范圍合適分布范圍合適預期偏差評估預期偏差評估醫(yī)學決定值醫(yī)學決定值預期偏差預期偏差相對偏差相對偏差CLIA88/2CLIA88/25 50.6110.61112.22%12.22%10%10%4040-0.579-0.579-1.45%-1.45%100100-2.619-2.619-2.62%-2.62%R R2 2=0.995 0.95=0.995 0.95，X X分布范圍合適分布范圍合適預期偏差評估預期偏差評估醫(yī)學決定值醫(yī)學決定值預期偏差預期偏差相對偏差相對偏差CLIA88/2CLIA88/25 55.665.66113.20%113.20%10%10%40408.188

11、.1820.45%20.45%10010012.1512.1512.15%12.15%結(jié)論：兩種儀器間結(jié)論：兩種儀器間ALTALT測試結(jié)果無統(tǒng)計學差異，除低值區(qū)域外偏差測試結(jié)果無統(tǒng)計學差異，除低值區(qū)域外偏差均符合均符合CLIA88CLIA88要求，在可接受范圍內(nèi)。要求，在可接受范圍內(nèi)。2021/3/91616實例分析實例分析-2-2R R2 2=0.889 0.95=0.889 0.95，應擴大樣本量，增加，應擴大樣本量，增加X X分布寬度后再行比對分布寬度后再行比對預期偏差評估預期偏差評估醫(yī)學決定值醫(yī)學決定值預期偏差預期偏差相對偏差相對偏差CLIA88/2CLIA88/2136136-0.0

12、04-0.0040.00%0.00%2mmol/L2mmol/L145145-0.292-0.292-0.20%-0.20%R R2 2=0.6648 0.95=0.6648 =0.95與否與否預期偏預期偏差評估差評估比對實驗比對實驗-小結(jié)小結(jié)17方法間離群點排除方法間離群點排除分散均勻性目測檢查分散均勻性目測檢查2021/3/91818試劑性能指標評價試劑性能指標評價l準確度驗證l精密度驗證l線性范圍驗證l參考范圍制定l干擾實驗驗證2021/3/91919準確度驗證準確度驗證回收實驗回收實驗準確度評估資料是評價檢測系統(tǒng)有效性的重要依據(jù)。定量檢測方法的回收實驗是評估準確度的方法之一，用于評估定

13、量檢測方法準確測定加入純分析物的能力，結(jié)果用回收率表示。10斤蘋果2斤蘋果？2021/3/92020回收實驗具體步驟回收實驗具體步驟2021/3/92121回收實驗數(shù)據(jù)處理及結(jié)果報告回收實驗數(shù)據(jù)處理及結(jié)果報告2021/3/92222實例分析實例分析-1 -1 基礎樣本基礎樣本+C.fas基礎樣本+高值質(zhì)控項目第一次 第二次 第三次 均值第一次 第二次 第三次 均值第一次 第二次 第三次 均值TP68706868.67 73737373.00 73727573.33 ALB42444242.67 47474546.33 46464746.33 GLO26262626.00 26262826.67

14、 27262827.00 ALT18191818.33 28282828.00 30313130.67 AST21212020.67 32323131.67 37363636.33 ALP102103102 102.33 125125126 125.33 124123125 124.00 GGT16171716.67 27272827.33 40414140.67 LDH155156156 155.67 183181182 182.00 184185186 185.00 測定濃度加入濃度回收濃度回收率基本樣本分析樣本1分析樣本2樣本制備：基本樣本： 自制基質(zhì)血清0.9mL + 超純凈水0.1m

15、L分析樣本1：自制基質(zhì)血清0.9mL + C.FAS定標液 0.1mL分析樣本2：自制基質(zhì)血清0.9mL + 高值指控血清 0.1mL分別對上述三種樣本連續(xù)測定三次求均值，并將數(shù)值填入下述表格2021/3/92323生化分析儀準確度驗證試驗生化分析儀準確度驗證試驗項目：血糖項目：血糖 GLUGLU單位：單位：mmol/Lmmol/L驗證方法：回收實驗驗證方法：回收實驗儀器Roche 7600試劑批號658081標準液批號161454操作者付紅偉審核者王倩測定濃度 加入濃度 回收濃度回收率%基礎樣本4.67 分析樣本15.97 1.11 1.30 117.12 分析樣本26.23 1.50 1.

16、56 104.00 平均回收率%110.56 比例系統(tǒng)誤差%10.56 TEa/25%可接受性判斷：可接受性判斷：比例系統(tǒng)誤差大于比例系統(tǒng)誤差大于CLIA88CLIA88允許總誤差的允許總誤差的1/21/2日期：2012-08-06生化分析儀準確度驗證試驗生化分析儀準確度驗證試驗項目：谷丙轉(zhuǎn)氨酶項目：谷丙轉(zhuǎn)氨酶 ALTALT單位：單位：U/LU/L驗證方法：回收實驗驗證方法：回收實驗儀器Roche 7600試劑批號660856標準液批號161454操作者付紅偉審核者王倩測定濃度 加入濃度 回收濃度回收率%基礎樣本18.33分析樣本1288.679.67 111.53 分析樣本230.6711.

17、712.34 105.47 平均回收率%108.50 比例系統(tǒng)誤差%8.50 TEa/210%可接受性判斷：比例系統(tǒng)誤差小于可接受性判斷：比例系統(tǒng)誤差小于CLIA88CLIA88允許總誤差的允許總誤差的1/21/2驗證日期：2012-08-06結(jié)果報告結(jié)果報告2021/3/92424精密度驗證精密度驗證參考參考EP5-AEP5-A文件文件批內(nèi)精密度評估 對低值質(zhì)控血清同一天內(nèi)連續(xù)測定20次，排除離散點后求其均值、SD及CV值與試劑說明書比較，看與試劑盒標注的批內(nèi)精密度是否一致；項目項目第第1 1次次第第2 2次次第第3 3次次 - 第第1919次次 第第2020次次均值均值標準差標準差 SD9

18、5%SD95%置信區(qū)間置信區(qū)間 CV%CV%廠商聲稱廠商聲稱CV%CV%結(jié)論結(jié)論TPTP666666666666 -6565666666.10 66.10 0.79 0.79 0.59 0.59 0.99 0.99 1.19 1.19 0.50 0.50 精密度欠佳精密度欠佳ALBALB484850505050 -4949494950.10 50.10 1.17 1.17 0.87 0.87 1.46 1.46 2.33 2.33 0.90 0.90 精密度欠佳精密度欠佳ALTALT414141414141-4040393940.60 40.60 0.82 0.82 0.62 0.62 1.0

19、3 1.03 2.02 2.02 2.90 2.90 精密度良好精密度良好ASTAST686869696868 -6969696967.90 67.90 0.79 0.79 0.59 0.59 0.99 0.99 1.16 1.16 2.10 2.10 精密度良好精密度良好ALPALP868686868686 -8585868686.35 86.35 0.99 0.99 0.74 0.74 1.24 1.24 1.14 1.14 0.70 0.70 精密度欠佳精密度欠佳GGTGGT444444444444-4343434343.15 43.15 0.67 0.67 0.50 0.50 0.84

20、 0.84 1.55 1.55 0.50 0.50 精密度欠佳精密度欠佳LDHLDH165165162162164164-163163162162 162.60 162.60 1.23 1.23 0.92 0.92 1.54 1.54 0.76 0.76 1.30 1.30 精密度良好精密度良好TBILTBIL23.523.5 20.220.220.620.6 -20.420.420.420.420.59 20.59 0.73 0.73 0.55 0.55 0.92 0.92 3.57 3.57 3.10 3.10 精密度良好精密度良好DBILDBIL14.414.4 14.214.214.6

21、14.6 -141414.214.214.19 14.19 0.38 0.38 0.29 0.29 0.48 0.48 2.70 2.70 0.85 0.85 精密度欠佳精密度欠佳2021/3/92525批間精密度驗證批間精密度驗證方法：參考方法：參考EP5-AEP5-A文件，對質(zhì)控血清連續(xù)測定文件，對質(zhì)控血清連續(xù)測定5 5日，每日測定日，每日測定2 2批次，批次，每批次重復測定每批次重復測定8 8次，得到次，得到8080個數(shù)據(jù)，排除離散點后，求其均值、個數(shù)據(jù)，排除離散點后，求其均值、SDSD及及CVCV值與試劑說明書比較，看與試劑盒標注的批間精密度是否一致；值與試劑說明書比較，看與試劑盒標注

22、的批間精密度是否一致；項目項目日期日期/ /批批次次批批1-11-1 批批1-21-2 批批1-81-8批批2-12-1 批批2-22-2 批批2-72-7 批批2-82-8均值均值 標準差標準差SD 95%SD 95%置信區(qū)置信區(qū)間間CV%CV%廠商聲明廠商聲明CV%CV%結(jié)論結(jié)論ALTALT第一天第一天414142424040404040404141424240.73 40.73 0.81 0.81 0.61 0.61 1.01 1.01 1.99 1.99 3.73.7精密度精密度良好良好第二天第二天4141414140404242404041413939第三天第三天4040404040

23、404242404040404141第四天第四天4242414141414040414141414242第五天第五天4141414140404141404042424141項目項目日期日期/ /批批次次批批1-11-1 批批1-21-2 批批1-81-8批批2-12-1 批批2-22-2 批批2-72-7 批批2-82-8均值均值 標準差標準差SD 95%SD 95%置信區(qū)置信區(qū)間間CV%CV%廠商聲明廠商聲明CV%CV%結(jié)論結(jié)論ASTAST第一天第一天646463636565656564646464646466.46 66.46 1.81 1.81 1.36 1.36 2.26 2.26 2

24、.72 2.72 3.23.2精密度精密度良好良好第二天第二天6868696967676767686869696767第三天第三天6868676768686868676766666868第四天第四天6565656565656464636365656464第五天第五天6868696968686868676766666868項目項目日期日期/ /批批次次批批1-11-1 批批1-21-2 批批1-81-8批批2-12-1 批批2-22-2 批批2-72-7 批批2-82-8均值均值 標準差標準差SD 95%SD 95%置信區(qū)置信區(qū)間間CV%CV%廠商聲明廠商聲明CV%CV%結(jié)論結(jié)論ALP ALP 第一天第一天888888888888888888888787878787.34