檢測系統(tǒng)分析性能驗證及確認(rèn)課件

1、檢測系統(tǒng)分析性能驗證及確認(rèn)宋鑒清2022/9/271檢測系統(tǒng)分析性能驗證及確認(rèn)宋鑒清2022/9/241-論語衛(wèi)靈公 2022/9/272-論語衛(wèi)靈公 2022/9/242檢測系統(tǒng)：是指完成一個檢驗項目所涉及的儀器、試劑、校準(zhǔn)品、操作程序、質(zhì)控品、樣品、質(zhì)量控制、保養(yǎng)計劃、操作者等的組合。檢測系統(tǒng)的用途：為患者提供準(zhǔn)確的檢驗結(jié)果。2022/9/273檢測系統(tǒng)：是指完成一個檢驗項目所涉及的儀器、試劑、校準(zhǔn)品、操要記?。簡螁我粋€試劑盒上的所謂分析性能，一定不就是試劑盒的！因為只有試劑沒有儀器的合作，就沒有這些分析性能！同樣，儀器廠商宣傳的那些分析性能一定是在該儀器上使用了某個廠商的試劑盒才具有的！

2、因此所有的分析性能一定是一個檢測系統(tǒng)的！不是試劑盒的、也不是某個儀器的！2022/9/274要記?。簡螁我粋€試劑盒上的所謂分析性能，一定不就是試劑盒的！常見檢測系統(tǒng)配套檢測系統(tǒng)-性能驗證： A+A+A 封閉系統(tǒng) A+B+B 配套開放系統(tǒng)自建檢測系統(tǒng)-性能確認(rèn)： A+B+C 非配套開放系統(tǒng)2022/9/275常見檢測系統(tǒng)配套檢測系統(tǒng)-性能驗證：2022/9/245LDH 乳酸脫氫酶性能特征(羅氏)-12022/9/276LDH 乳酸脫氫酶性能特征(羅氏)-12022/9/246LDH 乳酸脫氫酶性能特征(羅氏)-22022/9/277LDH 乳酸脫氫酶性能特征(羅氏)-22022/9/247IS

3、O 15189認(rèn)可準(zhǔn)則的要求2022/9/278ISO 15189認(rèn)可準(zhǔn)則的要求2022/9/2482022/9/2792022/9/249驗證（verification）確認(rèn)（validation）定義通過提供客觀證據(jù)證明給定項目滿足規(guī)定的要求通過提供客觀證據(jù)對特定的預(yù)期用途或應(yīng)用要求已得到滿足的認(rèn)定。適用范圍配套檢測系統(tǒng)固定組合的檢測系統(tǒng)標(biāo)準(zhǔn)方法。非標(biāo)準(zhǔn)方法、實驗室設(shè)計或制定的方法、超出預(yù)定范圍使用的標(biāo)準(zhǔn)方法和修改過的確認(rèn)方法（自建檢測系統(tǒng)）。完成者臨床實驗室獨立完成廠商，方法的研究和開發(fā)者，或臨床實驗室。性能指標(biāo)精密度，正確度，可報告范圍，有時還有檢出限。精密度，正確度，可報告范圍，檢出

4、限，干擾，攜帶污染等。目的滿足廠商聲明或預(yù)期用途。滿足檢驗預(yù)期用途的特定要求。CNAS CL02：2012 5.5.1.3性能驗證與確認(rèn)的區(qū)別2022/9/2710驗證（verification）確認(rèn)（validation性能驗證項目的選擇（一）5.5檢驗方法和程序的分析性能驗證內(nèi)容至少應(yīng)包括正確度、精密度和可報告范圍。 CNAS-CL38：2012醫(yī)學(xué)實驗室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床化學(xué)檢驗領(lǐng)域的應(yīng)用說明5.5檢驗方法和程序的分析性能驗證內(nèi)容至少應(yīng)包括：檢出限，精密度（包括重復(fù)性和中間精密度）、符合率，并 應(yīng)明確檢驗項目的預(yù)期用途，如篩查、診斷、確認(rèn)。CNAS-CL39：2012醫(yī)學(xué)實驗室質(zhì)量

5、和能力認(rèn)可準(zhǔn)則在臨床免疫學(xué)檢驗領(lǐng)域的應(yīng)用說明2022/9/2711性能驗證項目的選擇（一）5.5檢驗方法和程序的分析性能驗證內(nèi)性能驗證項目的選擇（二）5.5尿液干化學(xué)分析儀性能驗證的內(nèi)容至少應(yīng)包括陰性和陽性符合率CNAS-CL41：2012醫(yī)學(xué)實驗室質(zhì)量和能力認(rèn)可準(zhǔn)則在體液學(xué)檢驗領(lǐng)域的應(yīng)用說明5.5血液分析儀的性能驗證內(nèi)容至少應(yīng)包括正確度、精密度、可報告范圍等。CNAS-CL43：2012醫(yī)學(xué)實驗室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床血液學(xué)檢驗領(lǐng)域的應(yīng)用說明2022/9/2712性能驗證項目的選擇（二）5.5尿液干化學(xué)分析儀性能驗證的內(nèi)容WS/T 403-2012臨床生物化學(xué)檢驗常規(guī)項目分析質(zhì)量指標(biāo)WS/

6、T 406-2012臨床血液學(xué)檢驗常規(guī)項目分析質(zhì)量要求WS/T 408-2012臨床化學(xué)設(shè)備線性評價指南WS/T 492-2016臨床檢驗定量測定項目精密度與正確度性能驗證2022/9/2713WS/T 403-2012臨床生物化學(xué)檢驗常規(guī)項目分析質(zhì)量EP5-A3 .Evaluation of precision of quantitative measurement procedures; approved guideline-third edition. 2014 EP15-A3. User verification of precision and estimation of bias；

7、approved guideline-third edition.2014EP9-A2. Method Comparison and Bias Estimation Using Patient Samples;Approved GuidelineSecond Edition EP6 A. Evaluation of the Linearity of Quantitative Measurement rocedures:A Statistical Approach; Approved GuidelineEP10 A2. Preliminary Evaluation of Quantitive C

8、linical of Laboratory Methods; Approved GuidelineSecond Edition.2022/9/2714EP5-A3 .Evaluation of precisio2022/9/27152022/9/2415性能驗證相關(guān)的基本概念精密度（precision）:在規(guī)定的條件下，對同一或類似被測對象重復(fù)測量所得示指或測得值間的一致程度。精密度的度量通常以不精密度（SD、方差或CV）表示。批（Run）：在檢測系統(tǒng)真實性和精密度穩(wěn)定的間隔期，一般不超過24小時或不少于2小時。正確度(trueness)：無窮多次重復(fù)測量所得量值的平均值與一個參考量值間的一致

9、程度。與系統(tǒng)測量誤差有關(guān)，與隨機測量誤差無關(guān)，以偏倚（Bias）表示。準(zhǔn)確度(accuracy)：單次檢測結(jié)果與參考值間的一致程度，以總誤差（TE）表示。2022/9/2716性能驗證相關(guān)的基本概念精密度（precision）:在規(guī)定的性能驗證相關(guān)的基本概念線性（linearity）：檢測樣本時，在一定范圍內(nèi)可以直接按比例關(guān)系得出分析物含量的能力?？傉`差(total error)：實驗室用某方法在多次獨立檢測中分析某樣品所得各個結(jié)果值與靶值之差在一定置信區(qū)間內(nèi)的最大允許范圍。靈敏度(analytical sensitivity)：校準(zhǔn)曲線的斜率，即對于規(guī)定量的變化分析程序產(chǎn)生信號的變化。檢測限

10、(detection limit)：分析程序具有適當(dāng)?shù)拇_定檢出的分析物的最小濃度或量。檢測限依賴于空白讀數(shù)大小。2022/9/2717性能驗證相關(guān)的基本概念線性（linearity）：檢測樣本時性能驗證的實施過程 對檢驗程序的性能驗證涉及到多方面工作，為了得到可靠結(jié)果，實驗室負(fù)責(zé)人或?qū)嶒炛鞒秩藨?yīng)對此項工作有一個概括了解，先制定一個方案，包括如下工作： 1、性能驗證項目的選擇、質(zhì)量目標(biāo)確定、性能驗證方案制定及實施工作計劃； 2、實驗前準(zhǔn)備（人員培訓(xùn)、儀器維護及校準(zhǔn)、樣本留取及制備）； 3、實驗操作、數(shù)據(jù)收集、處理； 4、結(jié)論。2022/9/2718性能驗證的實施過程 對檢驗程序的性能驗證涉及到多

11、方面工分析質(zhì)量指標(biāo)的確定分析質(zhì)量指標(biāo)（analytical quality specifications）;又稱質(zhì)量目標(biāo)（quality goals）、質(zhì)量規(guī)范（quality specification）、質(zhì)量標(biāo)準(zhǔn)（quality standards）和分析性能目標(biāo)（analytical performance goals）。判斷臨床檢驗結(jié)果精密度、正確度和準(zhǔn)確度水平高低的指標(biāo)，或臨床檢驗結(jié)果應(yīng)達到的精密度、正確度和準(zhǔn)確度要求，通常用不精密度、偏倚和總誤差來表示。2022/9/2719分析質(zhì)量指標(biāo)的確定分析質(zhì)量指標(biāo)（analytical qua層次模式設(shè)定策略協(xié)議條款1評價分析性能對特定床決

12、策的影響特定臨床情況下的質(zhì)量規(guī)范2評價分析性能對一般臨床決策的影響A.基于生物變異的一般質(zhì)量規(guī)范B.基于醫(yī)療觀點的一般質(zhì)量規(guī)范3專業(yè)建議A.國家或國際專家小組指南B.個別或?qū)W會工作組專家指南4由法規(guī)機構(gòu)或室間質(zhì)量評價組織者制定的質(zhì)量規(guī)范A.由法規(guī)機構(gòu)制定的質(zhì)量規(guī)范B.由室間質(zhì)量評價組織者制定的質(zhì)量規(guī)范5已發(fā)表的當(dāng)前技術(shù)水平數(shù)據(jù)A.已發(fā)表的能力驗證和室間質(zhì)量評價的數(shù)據(jù)B.已發(fā)表的特定的方法學(xué)設(shè)定質(zhì)量目標(biāo)的層次模式和方法2022/9/2720層次模式設(shè)定策略協(xié)議條款1評價分析性能對特定床決策的影響特定質(zhì)量目標(biāo)2022/9/2721質(zhì)量目標(biāo)2022/9/2421精密度驗證 2022/9/2722精密

13、度驗證 2022/9/2422采用2個濃度的質(zhì)控物，每天分析1個批次，每個濃度重復(fù)檢測4次，連續(xù)5天。數(shù)據(jù)經(jīng)過離群值檢驗，收集220=40個有效數(shù)據(jù)，并通過統(tǒng)計分析評價方法計算總精密度和批內(nèi)精密度，與允許范圍進行比較，判斷結(jié)果是否接受。將估計的批內(nèi)精密度和室內(nèi)精密度與本室規(guī)定的相應(yīng)的允許范圍(CV批內(nèi)1/4總允許誤差，CV總行業(yè)標(biāo)準(zhǔn))比較，判斷驗證是否通（同時參考CLIA規(guī)定的TEa、廠商聲明）。 參考臨床檢驗方法學(xué)評價EP15-A2WS/T 492-20162022/9/2723采用2個濃度的質(zhì)控物，每天分析1個批次，每個濃度重復(fù)檢測4次方法精密度分析方案結(jié)果匯總儀器名稱：日立7600-21

14、0項目濃度水平濃度水平精密度CV%允許范圍判定結(jié)果驗證值判定結(jié)果精密度CV%允許范圍判定結(jié)果驗證值判定結(jié)果CACV批內(nèi)0.77%1.25%通過0.0621 通過CV批內(nèi)1.20%1.25%通過0.0783 通過CV總1.41%2.0%通過0.1254 通過CV總1.77%2.0%通過0.1258 通過PCV批內(nèi)1.20%2.50%通過0.0444 通過CV批內(nèi)1.17%2.50%通過0.0579 通過CV總1.38%4.0%通過0.0584 通過CV總2.01%4.0%通過0.1130 通過MGCV批內(nèi)1.59%3.75%通過0.0678 通過CV批內(nèi)1.24%3.75%通過0.1008 通過

15、CV總2.56%5.5%通過0.1261 通過CV總2.43%5.5%通過0.2103 通過2022/9/2724方法精密度分析方案結(jié)果匯總儀器名稱：日立7600-210臨床血液學(xué)批內(nèi)精密度 試驗方案批內(nèi)精密度以連續(xù)檢測結(jié)果的變異系數(shù)為評價指標(biāo)，使用1份正常濃度水平的臨床標(biāo)本，按常規(guī)方法重復(fù)檢測11次，計算后10次的算術(shù)平均值、標(biāo)準(zhǔn)差及變異系數(shù)，與允許的變異系數(shù)進行比較，判斷結(jié)果是否接受。（參考WS/T 406-2012臨床血液學(xué)檢驗常規(guī)項目分析質(zhì)量要求）2022/9/2725臨床血液學(xué)批內(nèi)精密度 2022/9/27262022/9/2426日間精密度 試驗方案日間精密度以室內(nèi)質(zhì)控在控結(jié)果的變

16、異系數(shù)為評價指標(biāo)，使用Sysmex配套質(zhì)控品（低值、中值、高值）當(dāng)前批號累積的變異系數(shù)，與允許的變異系數(shù)進行比較，判斷結(jié)果是否接受。（參考WS/T 406-2012臨床血液學(xué)檢驗常規(guī)項目分析質(zhì)量要求）臨床血液學(xué)2022/9/2727日間精密度 2022/9/27282022/9/2428臨床案例12022/9/2729臨床案例12022/9/2429臨床案例12022/9/2730臨床案例12022/9/2430臨床案例1鈣更換試劑A試劑B試劑2022/9/2731臨床案例1鈣更換試劑A試劑B試劑2022/9/2431正確度驗證 2022/9/2732正確度驗證 2022/9/2432WS/T

17、 406-2012臨床血液學(xué)檢驗常規(guī)項目分析質(zhì)量要求WS/T 492-2016臨床檢驗定量項目精密度與正確度性能驗證EP9-A3:Measurement procedure comparison and bias estimation using patient samples; approved guideline- third edition. 2013EP9-A2：Method Comparison and Bias Estimation Using Patient Samples; Approved Guideline - Second Edition，2002EP15-A2：User

18、 Verification of Performance for Precision and Trueness ,2005EP15-A3. User verification of precision and estimation of bias；approved guideline-third edition.20142022/9/2733WS/T 406-2012臨床血液學(xué)檢驗常規(guī)項目分析質(zhì)量要臨床血液學(xué)1試驗過程1.1 樣本的準(zhǔn)備選取10份檢測結(jié)果在參考區(qū)間內(nèi)的新鮮臨床樣本。1.2 試驗步驟 10份標(biāo)本分別在該儀器上檢測2次，記錄各項目20次檢測結(jié)果，計算均值； 相同樣本在臨檢室標(biāo)準(zhǔn)儀器

19、（J-3001-LJ）上同樣檢測2次，記錄各項目20次檢測結(jié)果，計算均值，設(shè)為靶值； 該儀器檢測結(jié)果均值與靶值計算偏倚。1.3 質(zhì)量控制 整個試驗階段檢測儀器狀態(tài)正常，各批次質(zhì)控結(jié)果均符合要求。2 試驗數(shù)據(jù)分析 各試驗數(shù)據(jù)的統(tǒng)計分析方法參考臨床血液學(xué)檢驗常規(guī)項目分析質(zhì)量要求。3 試驗結(jié)果的判定標(biāo)準(zhǔn)各項目的偏倚應(yīng)符合表6的要求。2022/9/2734臨床血液學(xué)1試驗過程2022/9/24342022/9/27352022/9/24352022/9/27362022/9/24362022/9/27372022/9/2437正確度初步評價 先用5個定值PT樣品進行正確度初步評價，每個樣品測量1次，計

20、算5個樣品與靶值之間的平均偏倚，若允許偏差（衛(wèi)生行業(yè)標(biāo)準(zhǔn)）初步評價通過，直接進行正確度確認(rèn)；若不通過則進行校準(zhǔn)，初步評價通過后再進行正確度確認(rèn)。2022/9/2738正確度初步評價2022/9/2438檢測PT樣品5份，每個樣品重復(fù)測量3次，計算每個樣品均值與靶值的相對偏倚；檢測參考方法定值的新鮮血清樣品5份，每個樣品重復(fù)測量3次，計算每個樣品重復(fù)測量的均值與靶值的相對偏倚；用實驗方法和參考方法同時檢測40份新鮮樣品，每天測量10個樣品，每個樣品測量1次，連續(xù)4天。以參考方法結(jié)果為橫座標(biāo)X，實驗方法為縱座標(biāo)Y，繪制散點圖，計算回歸方程，計算參考區(qū)間兩端和醫(yī)學(xué)決定水平處的相對偏倚。 （-EP9-

21、A3）偏倚允許偏差，正確度得到確認(rèn)。確認(rèn)實驗方法2022/9/2739檢測PT樣品5份，每個樣品重復(fù)測量3次，計算每個樣品均值與靶有證參考物質(zhì)（CRMs）：已用參考方法或決定性方法定值，可從美國國家標(biāo)準(zhǔn)局（NIST）或其他國際組織認(rèn)可的提供者獲得;從能力驗證試驗（PT）中獲得的參考物：如CAP和衛(wèi)生部檢驗中心能力驗證試驗中提供的調(diào)查品;廠商提供的正確度確認(rèn)物或質(zhì)控物;室間質(zhì)量評價計劃中使用的質(zhì)控物;由第三方提供的已用不同方法定值的物質(zhì)。定值參考物質(zhì)檢測的回收實驗2022/9/2740有證參考物質(zhì)（CRMs）：已用參考方法或決定性方法定值，可從比 對 2022/9/2741比 對 2022/9/

22、2441試驗方案收集樣本20份，其濃度應(yīng)均勻分布整個分析測量范圍。采用試驗方法和比較方法分別檢測20份樣本，試驗持續(xù)4天，每天測定5份樣本。每種方法對于每個樣本重復(fù)測定2次，將樣本按1、2、3、4、5的順序進行第一次測定，再按反向順序測定第二次。順序中的樣本濃度盡量隨機排列。其測定結(jié)果經(jīng)過方法內(nèi)、方法間離群值檢驗，X值合適范圍檢驗，離散度均勻性檢查等步驟，繪制散點圖，粗略分析方法間是否呈線性關(guān)系。通過線性回歸分析估計在醫(yī)學(xué)決定水平處的預(yù)期偏倚的95%可信區(qū)間大?。换蛘呷鐢?shù)據(jù)離散度均勻，可計算各濃度的平均偏倚及平均百分比偏倚大小。將兩種偏倚與偏倚的允許范圍進行比較以判定是否符合要求。參考臨床檢驗

23、方法學(xué)評價EP9-A2WS/T 407-2012 醫(yī)療機構(gòu)內(nèi)定量檢驗結(jié)果的可比性驗證指南2022/9/2742試驗方案2022/9/2442 皮肌炎是一種引起皮膚、肌肉、心、肺、腎等多臟器嚴(yán)重?fù)p害的，全身性疾病，而且不少患者同時伴有惡性腫瘤。它的1癥狀表現(xiàn)如下： 1、早期皮肌炎患者，還往往伴有全身不適癥狀，如-全身肌肉酸痛，軟弱無力，上樓梯時感覺兩腿費力；舉手梳理頭發(fā)時，舉高手臂很吃力；抬頭轉(zhuǎn)頭緩慢而費力。皮肌炎圖片皮肌炎的癥狀表現(xiàn) 皮肌炎是一種引起皮膚、肌肉、心、肺、腎等多臟器嚴(yán)重方法內(nèi)離群值檢驗實驗方法差值絕對值的均值：0.19 接受限為前者4倍：0.77 實驗方法相對差值絕對值的均值：0

24、.02 接受限為前者4倍：0.07 比較方法差值絕對值的均值：0.21 接受限為前者4倍：0.85 比較方法相對差值絕對值的均值：0.02 接受限為前者4倍：0.08 方法間離群值檢驗E值：0.22 E的控制限=4*E=0.878E值：0.0146 E的控制限=4*E=0.0585 X值合適范圍的檢驗2022/9/2744方法內(nèi)離群值檢驗實驗方法差值絕對值的均值：0.19 接受限為2022/9/27452022/9/2445CNAS-CL38：2012醫(yī)學(xué)實驗室質(zhì)量和能力認(rèn)可準(zhǔn)則在臨床化學(xué)檢驗領(lǐng)域的應(yīng)用說明2022/9/2746CNAS-CL38：2012醫(yī)學(xué)實驗室質(zhì)量和能力認(rèn)可準(zhǔn)則在質(zhì)控數(shù)據(jù)

25、比對分析臨床案例22022/9/2747質(zhì)控數(shù)據(jù)比對分析臨床案例22022/9/2447臨床案例22022/9/2748臨床案例22022/9/2448臨床案例22022/9/2749臨床案例22022/9/2449臨床案例22022/9/2750臨床案例22022/9/2450臨床案例22022/9/2751臨床案例22022/9/2451臨床案例22022/9/2752臨床案例22022/9/2452臨床案例22022/9/2753臨床案例22022/9/2453可報告范圍臨床可報告范圍分析測量范圍2022/9/2754可報告范圍臨床可報告范圍分析測量范圍2022/9/2454線性評價方法

26、目測法:主觀、粗略、不能確定每個點的線性程度；改良Doumas方法（平均斜率法）； CAP設(shè)備委員會（IRC）采用的多項式回歸分析方法(CAP-IRC法)；CLSI EP-6A法（定量檢驗方法的線性評價）。2022/9/2755線性評價方法目測法:主觀、粗略、不能確定每個點的線性程度；2樣本來源病人標(biāo)本；低濃度的標(biāo)本（或推薦的稀釋液）稀釋高濃度標(biāo)本；病人樣本中添加分析物（如CaCl2、Glu)、加入量原則上少于總體積的10%；商業(yè)質(zhì)控物/校準(zhǔn)物/線性驗證物質(zhì)。2022/9/2756樣本來源病人標(biāo)本；2022/9/2456項目名稱線性范圍水平1質(zhì)控均值水平2質(zhì)控均值鉀1.5-10.0 4.017

27、.519鈣0.05-52.413.24血糖0.11-41.66.8419.85肌酐92總蛋白1-13052.2760.95丙氨酸氨基轉(zhuǎn)移酶4-100083195.3肌酸激酶3-2300233.1623.9低密度脂蛋白0.026-18.103.0794.57淀粉酶3-1500130.9262.5膽固醇 0.13-20.77 4.8117.3132022/9/2757項目名稱線性范圍水平1質(zhì)控均值水平2質(zhì)控均值鉀1.5-10.線性：0.11-41.66.8419.85？6.8419.852022/9/2758線性：0.11-41.66.8419.85？6.8419平均斜率

28、法評價分析測量范圍（改良Doumas方法）試驗方案選取接近儀器標(biāo)注的分析測量范圍上限（其樣本濃度不低于標(biāo)定分析范圍上限的85%）和下限的兩個分析濃度的樣本(H和L)，按照1L、0.8L0.2H、0.6L+0.4H、0.4L+0.6H、0.2L+0.8H、1H的比例關(guān)系配制6個系列濃度的樣本。對每個混合樣本進行多次(至少2次)檢測。經(jīng)統(tǒng)計后擬合回歸線ybx+a。試驗結(jié)果的判定標(biāo)準(zhǔn)將擬合回歸線的相關(guān)系數(shù)r0.975（r20.95），b值在10.05范圍作為判斷標(biāo)準(zhǔn)。部分參考臨床檢驗質(zhì)量管理技術(shù)基礎(chǔ)（馮仁豐）、EP62022/9/2759平均斜率法評價分析測量范圍（改良Doumas方法）試驗方202

29、2/9/27602022/9/2460方法分析測量范圍分析方案結(jié)果匯總儀器名稱：日立7600平均斜率法編號項目廠商標(biāo)注的測量范圍實驗室驗證的測量范圍驗證結(jié)果1ALKP112000.00 931.50 呈線性2TG0.0111.290.05 13.49 呈線性3TC0.1320.770.00 8.32 呈線性4GGT210002.00 992.00 呈線性5DBIL0.7342.10.60 301.50 呈線性2022/9/2761方法分析測量范圍分析方案結(jié)果匯總儀器名稱：日立7600平均CLSI EP-6A法（定量檢驗方法的線性評價）2022/9/2762CLSI EP-6A法（定量檢驗方法的線性評價）2022/92022/9/27632022/9/24632022/9/276420