檢測(cè)系統(tǒng)分析性能驗(yàn)證及確認(rèn)

1、檢測(cè)系統(tǒng)分析性能驗(yàn)證及確認(rèn),宋鑒清,------《論語·衛(wèi)靈公》,檢測(cè)系統(tǒng)：是指完成一個(gè)檢驗(yàn)項(xiàng)目所涉及的儀器、試劑、校準(zhǔn)品、操作程序、質(zhì)控品、樣品、質(zhì)量控制、保養(yǎng)計(jì)劃、操作者等的組合。檢測(cè)系統(tǒng)的用途：為患者提供準(zhǔn)確的檢驗(yàn)結(jié)果。,,要記?。簡螁我粋€(gè)試劑盒上的所謂分析性能，一定不就是試劑盒的！因?yàn)橹挥性噭]有儀器的合作，就沒有這些分析性能！同樣，儀器廠商宣傳的那些分析性能一定是在該儀器上使用了某個(gè)廠商的試劑盒才具有的！

2、因此所有的分析性能一定是一個(gè)檢測(cè)系統(tǒng)的！不是試劑盒的、也不是某個(gè)儀器的！,常見檢測(cè)系統(tǒng),配套檢測(cè)系統(tǒng)-性能驗(yàn)證： A+A+A 封閉系統(tǒng) A+B+B 配套開放系統(tǒng)自建檢測(cè)系統(tǒng)-性能確認(rèn)： A+B+C 非配套開放系統(tǒng),LDH 乳酸脫氫酶性能特征(羅氏)-1,LDH 乳酸脫氫酶性能特征(羅氏)-2,ISO 15189認(rèn)可準(zhǔn)則的要求,CNAS CL02：2012 5.5.1.3,性能驗(yàn)證與確認(rèn)的區(qū)別,性能驗(yàn)證項(xiàng)目的選擇（一）

3、,5.5檢驗(yàn)方法和程序的分析性能驗(yàn)證內(nèi)容至少應(yīng)包括正確度、精密度和可報(bào)告范圍。 CNAS-CL38：2012《醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床化學(xué)檢驗(yàn)領(lǐng)域的應(yīng)用說明》,5.5檢驗(yàn)方法和程序的分析性能驗(yàn)證內(nèi)容至少應(yīng)包括：檢出限，精密度（包括重復(fù)性和中間精密度）、符合率，并 應(yīng)明確檢驗(yàn)項(xiàng)目的預(yù)期用途，如篩查、診斷、確認(rèn)。CNAS-CL39：2012《醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床免疫學(xué)檢驗(yàn)領(lǐng)域的應(yīng)用說明》,性能驗(yàn)證項(xiàng)目的選擇（

4、二）,5.5尿液干化學(xué)分析儀性能驗(yàn)證的內(nèi)容至少應(yīng)包括陰性和陽性符合率CNAS-CL41：2012《醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則在體液學(xué)檢驗(yàn)領(lǐng)域的應(yīng)用說明》,5.5血液分析儀的性能驗(yàn)證內(nèi)容至少應(yīng)包括正確度、精密度、可報(bào)告范圍等。CNAS-CL43：2012《醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床血液學(xué)檢驗(yàn)領(lǐng)域的應(yīng)用說明》,WS/T 403-2012《臨床生物化學(xué)檢驗(yàn)常規(guī)項(xiàng)目分析質(zhì)量指標(biāo)》WS/T 406-2012《臨床血液學(xué)檢驗(yàn)常規(guī)

5、項(xiàng)目分析質(zhì)量要求》WS/T 408-2012《臨床化學(xué)設(shè)備線性評(píng)價(jià)指南》WS/T 492-2016《臨床檢驗(yàn)定量測(cè)定項(xiàng)目精密度與正確度性能驗(yàn)證》,EP5-A3 .Evaluation of precision of quantitative measurement procedures; approved guideline-third edition. 2014 EP15-A3. User verification of pr

6、ecision and estimation of bias；approved guideline-third edition.2014EP9-A2. Method Comparison and Bias Estimation Using Patient Samples;Approved Guideline—Second Edition EP6 A. Evaluation of the Linearity of Quantita

7、tive Measurement rocedures:A Statistical Approach; Approved GuidelineEP10 A2. Preliminary Evaluation of Quantitive Clinical of Laboratory Methods; Approved Guideline—Second Edition.,性能驗(yàn)證相關(guān)的基本概念,精密度（precision）:在規(guī)定的條件下，

8、對(duì)同一或類似被測(cè)對(duì)象重復(fù)測(cè)量所得示指或測(cè)得值間的一致程度。精密度的度量通常以不精密度（SD、方差或CV）表示。批（Run）：在檢測(cè)系統(tǒng)真實(shí)性和精密度穩(wěn)定的間隔期，一般不超過24小時(shí)或不少于2小時(shí)。正確度(trueness)：無窮多次重復(fù)測(cè)量所得量值的平均值與一個(gè)參考量值間的一致程度。與系統(tǒng)測(cè)量誤差有關(guān)，與隨機(jī)測(cè)量誤差無關(guān)，以偏倚（Bias）表示。準(zhǔn)確度(accuracy)：單次檢測(cè)結(jié)果與參考值間的一致程度，以總誤差（TE）表

9、示。,性能驗(yàn)證相關(guān)的基本概念,線性（linearity）：檢測(cè)樣本時(shí)，在一定范圍內(nèi)可以直接按比例關(guān)系得出分析物含量的能力?？傉`差(total error)：實(shí)驗(yàn)室用某方法在多次獨(dú)立檢測(cè)中分析某樣品所得各個(gè)結(jié)果值與靶值之差在一定置信區(qū)間內(nèi)的最大允許范圍。靈敏度(analytical sensitivity)：校準(zhǔn)曲線的斜率，即對(duì)于規(guī)定量的變化分析程序產(chǎn)生信號(hào)的變化。檢測(cè)限(detection limit)：分析程序具有適當(dāng)?shù)拇_

10、定檢出的分析物的最小濃度或量。檢測(cè)限依賴于空白讀數(shù)大小。,性能驗(yàn)證的實(shí)施過程,對(duì)檢驗(yàn)程序的性能驗(yàn)證涉及到多方面工作，為了得到可靠結(jié)果，實(shí)驗(yàn)室負(fù)責(zé)人或?qū)嶒?yàn)主持人應(yīng)對(duì)此項(xiàng)工作有一個(gè)概括了解，先制定一個(gè)方案，包括如下工作： 1、性能驗(yàn)證項(xiàng)目的選擇、質(zhì)量目標(biāo)確定、性能驗(yàn)證方案制定及實(shí)施工作計(jì)劃； 2、實(shí)驗(yàn)前準(zhǔn)備（人員培訓(xùn)、儀器維護(hù)及校準(zhǔn)、樣本留取及制備）； 3、實(shí)驗(yàn)操作、數(shù)據(jù)收集、處理； 4、結(jié)論。,分析質(zhì)量指標(biāo)的確定

11、,分析質(zhì)量指標(biāo)（analytical quality specifications）;又稱質(zhì)量目標(biāo)（quality goals）、質(zhì)量規(guī)范（quality specification）、質(zhì)量標(biāo)準(zhǔn)（quality standards）和分析性能目標(biāo)（analytical performance goals）。判斷臨床檢驗(yàn)結(jié)果精密度、正確度和準(zhǔn)確度水平高低的指標(biāo)，或臨床檢驗(yàn)結(jié)果應(yīng)達(dá)到的精密度、正確度和準(zhǔn)確度要求，通常用不精密度、偏倚和

12、總誤差來表示。,設(shè)定質(zhì)量目標(biāo)的層次模式和方法,,質(zhì)量目標(biāo),精密度驗(yàn)證,采用2個(gè)濃度的質(zhì)控物，每天分析1個(gè)批次，每個(gè)濃度重復(fù)檢測(cè)4次，連續(xù)5天。數(shù)據(jù)經(jīng)過離群值檢驗(yàn)，收集2×20=40個(gè)有效數(shù)據(jù)，并通過統(tǒng)計(jì)分析評(píng)價(jià)方法計(jì)算總精密度和批內(nèi)精密度，與允許范圍進(jìn)行比較，判斷結(jié)果是否接受。將估計(jì)的批內(nèi)精密度和室內(nèi)精密度與本室規(guī)定的相應(yīng)的允許范圍(CV批內(nèi)<1/4總允許誤差，CV總<行業(yè)標(biāo)準(zhǔn))比較，判斷驗(yàn)證是否通（同時(shí)參考C

13、LIA規(guī)定的TEa、廠商聲明）。 ——參考《臨床檢驗(yàn)方法學(xué)評(píng)價(jià)》EP15-A2WS/T 492-2016,,臨床血液學(xué),批內(nèi)精密度 試驗(yàn)方案批內(nèi)精密度以連續(xù)檢測(cè)結(jié)果的變異系數(shù)為評(píng)價(jià)指標(biāo)，使用1份正常濃度水平的臨床標(biāo)本，按常規(guī)方法重復(fù)檢測(cè)11次，計(jì)算后10次的算術(shù)平均值、標(biāo)準(zhǔn)差及變異系數(shù)，與允許的變異系數(shù)進(jìn)行比較，判斷結(jié)果是否接受?！?/p>

14、參考WS/T 406-2012《臨床血液學(xué)檢驗(yàn)常規(guī)項(xiàng)目分析質(zhì)量要求》）,日間精密度 試驗(yàn)方案日間精密度以室內(nèi)質(zhì)控在控結(jié)果的變異系數(shù)為評(píng)價(jià)指標(biāo)，使用Sysmex配套質(zhì)控品（低值、中值、高值）當(dāng)前批號(hào)累積的變異系數(shù)，與允許的變異系數(shù)進(jìn)行比較，判斷結(jié)果是否接受?！▍⒖糤S/T 406-2012《臨床血液學(xué)檢驗(yàn)常規(guī)項(xiàng)目分析質(zhì)量要求》）,臨床血液學(xué),

15、,臨床案例1,臨床案例1,臨床案例1,鈣更換試劑,A試劑,B試劑,正確度驗(yàn)證,WS/T 406-2012《臨床血液學(xué)檢驗(yàn)常規(guī)項(xiàng)目分析質(zhì)量要求》WS/T 492-2016《臨床檢驗(yàn)定量項(xiàng)目精密度與正確度性能驗(yàn)證》EP9-A3:Measurement procedure comparison and bias estimation using patient samples; approved guideline- third e

16、dition. 2013EP9-A2：Method Comparison and Bias Estimation Using Patient Samples; Approved Guideline - Second Edition，2002EP15-A2：User Verification of Performance for Precision and Trueness ,2005EP15-A3. User verific

17、ation of precision and estimation of bias；approved guideline-third edition.2014,臨床血液學(xué),1試驗(yàn)過程1.1 樣本的準(zhǔn)備選取10份檢測(cè)結(jié)果在參考區(qū)間內(nèi)的新鮮臨床樣本。1.2 試驗(yàn)步驟 ① 10份標(biāo)本分別在該儀器上檢測(cè)2次，記錄各項(xiàng)目20次檢測(cè)結(jié)果，計(jì)算均值；② 相同樣本在臨檢室標(biāo)準(zhǔn)儀器（J-3001-LJ）上同樣檢測(cè)2次，記錄各項(xiàng)目20次檢測(cè)結(jié)果，

18、計(jì)算均值，設(shè)為靶值；③ 該儀器檢測(cè)結(jié)果均值與靶值計(jì)算偏倚。1.3 質(zhì)量控制 整個(gè)試驗(yàn)階段檢測(cè)儀器狀態(tài)正常，各批次質(zhì)控結(jié)果均符合要求。2 試驗(yàn)數(shù)據(jù)分析 各試驗(yàn)數(shù)據(jù)的統(tǒng)計(jì)分析方法參考《臨床血液學(xué)檢驗(yàn)常規(guī)項(xiàng)目分析質(zhì)量要求》。3 試驗(yàn)結(jié)果的判定標(biāo)準(zhǔn)各項(xiàng)目的偏倚應(yīng)符合表6的要求。,,,正確度初步評(píng)價(jià) 先用5個(gè)定值PT樣品進(jìn)行正確度初步評(píng)價(jià)，每個(gè)樣品測(cè)量1次，計(jì)算5個(gè)樣品與靶值之間的平均偏倚，若≤允許偏差（衛(wèi)生行

19、業(yè)標(biāo)準(zhǔn)）初步評(píng)價(jià)通過，直接進(jìn)行正確度確認(rèn)；若不通過則進(jìn)行校準(zhǔn)，初步評(píng)價(jià)通過后再進(jìn)行正確度確認(rèn)。,,,,,,,,,,,檢測(cè)PT樣品5份，每個(gè)樣品重復(fù)測(cè)量3次，計(jì)算每個(gè)樣品均值與靶值的相對(duì)偏倚；檢測(cè)參考方法定值的新鮮血清樣品5份，每個(gè)樣品重復(fù)測(cè)量3次，計(jì)算每個(gè)樣品重復(fù)測(cè)量的均值與靶值的相對(duì)偏倚；用實(shí)驗(yàn)方法和參考方法同時(shí)檢測(cè)40份新鮮樣品，每天測(cè)量10個(gè)樣品，每個(gè)樣品測(cè)量1次，連續(xù)4天。以參考方法結(jié)果為橫座標(biāo)X，實(shí)驗(yàn)方法為縱座標(biāo)Y，繪制散

20、點(diǎn)圖，計(jì)算回歸方程，計(jì)算參考區(qū)間兩端和醫(yī)學(xué)決定水平處的相對(duì)偏倚。 （--EP9-A3）偏倚≤允許偏差，正確度得到確認(rèn)。,確認(rèn)實(shí)驗(yàn)方法,有證參考物質(zhì)（CRMs）：已用參考方法或決定性方法定值，可從美國國家標(biāo)準(zhǔn)局（NIST）或其他國際組織認(rèn)可的提供者獲得;從能力驗(yàn)證試驗(yàn)（PT）中獲得的參考物：如CAP和衛(wèi)生部檢驗(yàn)中心能力驗(yàn)證試驗(yàn)中提供的調(diào)查品;廠商提供的正確度

21、確認(rèn)物或質(zhì)控物;室間質(zhì)量評(píng)價(jià)計(jì)劃中使用的質(zhì)控物;由第三方提供的已用不同方法定值的物質(zhì)。,定值參考物質(zhì)檢測(cè)的回收實(shí)驗(yàn),比 對(duì),試驗(yàn)方案收集樣本20份，其濃度應(yīng)均勻分布整個(gè)分析測(cè)量范圍。采用試驗(yàn)方法和比較方法分別檢測(cè)20份樣本，試驗(yàn)持續(xù)4天，每天測(cè)定5份樣本。每種方法對(duì)于每個(gè)樣本重復(fù)測(cè)定2次，將樣本按1、2、3、4、5的順序進(jìn)行第一次測(cè)定，再按反向順序測(cè)定第二次。順序中的樣本濃度盡量隨機(jī)排列。其測(cè)定結(jié)果經(jīng)過方法內(nèi)、方法間離群值檢驗(yàn)，

22、X值合適范圍檢驗(yàn)，離散度均勻性檢查等步驟，繪制散點(diǎn)圖，粗略分析方法間是否呈線性關(guān)系。通過線性回歸分析估計(jì)在醫(yī)學(xué)決定水平處的預(yù)期偏倚的95%可信區(qū)間大?。换蛘呷鐢?shù)據(jù)離散度均勻，可計(jì)算各濃度的平均偏倚及平均百分比偏倚大小。將兩種偏倚與偏倚的允許范圍進(jìn)行比較以判定是否符合要求?！獏⒖肌杜R床檢驗(yàn)方法學(xué)評(píng)價(jià)》EP9-A2WS/T 407-2012 醫(yī)療機(jī)構(gòu)內(nèi)定量檢驗(yàn)結(jié)果的可比性驗(yàn)證指南,方法內(nèi)離群值檢驗(yàn),方法間離群值檢驗(yàn),X值合適范圍

23、的檢驗(yàn),,,CNAS-CL38：2012《醫(yī)學(xué)實(shí)驗(yàn)室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床化學(xué)檢驗(yàn)領(lǐng)域的應(yīng)用說明》,質(zhì)控?cái)?shù)據(jù)比對(duì)分析,臨床案例2,臨床案例2,,,臨床案例2,,,臨床案例2,,,,臨床案例2,,,,臨床案例2,,,,臨床案例2,,可報(bào)告范圍,臨床可報(bào)告范圍,,分析測(cè)量范圍,線性評(píng)價(jià)方法,目測(cè)法:主觀、粗略、不能確定每個(gè)點(diǎn)的線性程度；改良Doumas方法（平均斜率法）； CAP設(shè)備委員會(huì)（IRC）采用的多項(xiàng)式回歸分析方法(CAP-I

24、RC法)；CLSI EP-6A法（定量檢驗(yàn)方法的線性評(píng)價(jià)）。,樣本來源,病人標(biāo)本；低濃度的標(biāo)本（或推薦的稀釋液）稀釋高濃度標(biāo)本；病人樣本中添加分析物（如CaCl2、Glu)、加入量原則上少于總體積的10%；商業(yè)質(zhì)控物/校準(zhǔn)物/線性驗(yàn)證物質(zhì)。,,線性：0.11-41.6,6.84,19.85,,,？？？,6.84,19.85,平均斜率法評(píng)價(jià)分析測(cè)量范圍（改良Doumas方法）,試驗(yàn)方案選取接近儀器標(biāo)注的分析測(cè)量范圍上限（其樣本

25、濃度不低于標(biāo)定分析范圍上限的85%）和下限的兩個(gè)分析濃度的樣本(H和L)，按照1L、0.8L＋0.2H、0.6L+0.4H、0.4L+0.6H、0.2L+0.8H、1H的比例關(guān)系配制6個(gè)系列濃度的樣本。對(duì)每個(gè)混合樣本進(jìn)行多次(至少2次)檢測(cè)。經(jīng)統(tǒng)計(jì)后擬合回歸線y＝bx+a。試驗(yàn)結(jié)果的判定標(biāo)準(zhǔn)將擬合回歸線的相關(guān)系數(shù)r≥0.975（r2≥0.95），b值在1±0.05范圍作為判斷標(biāo)準(zhǔn)?！糠謪⒖肌杜R床檢驗(yàn)質(zhì)量管理技術(shù)基

26、礎(chǔ)》（馮仁豐）、EP6,,CLSI EP-6A法（定量檢驗(yàn)方法的線性評(píng)價(jià)）,花絮,尿液線性驗(yàn)證：細(xì)菌血白細(xì)胞(高值樣品)-濃縮尿紅細(xì)胞,,,,,,,,,,,,,可視化管理,Visual Management,5S,精益Lean,單件流1 PieceFlow,標(biāo)準(zhǔn)工作Standard Work,拉動(dòng)系統(tǒng)Pull,制造拉動(dòng)式生產(chǎn)Create signals to pull on demand, obvious when so

27、mething is very empty,減少差異和 復(fù)雜性Reduce variation &complexity,邁向單件處理 Move away from batching, backlog and queue,能夠看到 Ability to see,維持流動(dòng)Organized to Flow:1.整理2.整頓3.清掃4.清潔5.素養(yǎng),精益化性能驗(yàn)證-單件流:線性驗(yàn)證，高值樣品？？,設(shè)備性能評(píng)估-1,設(shè)