精密度和正确度方法学评价-赵海舰资料.pdf

精密度和正确度确认精密度和正确度确认 卫生部临床检验中心 赵海舰 杭州 2015.06.16 如何使检验结果准确？如何使检验结果准确？ ---陈文祥 2 1 使用好的检验方法使用好的检验方法 2 做好质量控制做好质量控制 关于确认关于确认(Validation):(Validation):关于确认关于确认(Validation):(Validation): iso15189:2012定义：通过提供客观证 据对待定的预期用途或应用要求得到满 足的认定 给出主要方法性能： ―正确度(trueness) ― 精密度(precision) ―特异性(specificity) ―检测限和定量限(LOD and LOQ, “灵敏度“) ― 线性(linearity) ― 生物参考区间 ―耐变性(robustness) . . CNAS-CL38 医学实验室质量 和能力化学认可准则在临床 化学检验领域的应用说明 关于确认关于确认(Validation):(Validation):关于确认关于确认(Validation):(Validation): ISO 15189:2012 5.5.1.3检验程序的确认：  非标准方法  实验室设计或制定的方法  超出预期范围使用的标准方法  修改过的确认方法 关于确认关于确认(Validation):(Validation):关于确认关于确认(Validation):(Validation): 卫生行业标准：WS/T 420-2013 (临床实验室对商品定量试剂盒分析性能的验证）  临床实验室建立的新方法或试剂盒  对我国食品药品监督管理局（FDA）批 准的检验方法或试剂盒进行重要修改 与精密度和正确度相关的确认文件与精密度和正确度相关的确认文件 精密度 Westgard方 法 EP5 正确度 Westgard方 法 EP9 陈文祥、申子瑜、郭健、杨振华,临床检验量值溯源中的重要术语与概念及有关问题临床检验量值溯源中的重要术语与概念及有关问题 中华检验医学杂志2005年2月第28卷第2期 准确度、正确度和精密度？准确度、正确度和精密度？ 准确度准确度(accuracy): 一次测量的结果与被测量真值的 接近程度。

一次测量的结果与被测量真值的 接近程度 正确度正确度(trueness): 真实度，无限多次测量的均值与真 值的接近程度 真实度，无限多次测量的均值与真 值的接近程度一般用一般用10-12次测定结果的均值计算次测定结果的均值计算 精密度精密度 (PRECISION) : 在规定条件下获得的独立测量 结果之间的接近程度 在规定条件下获得的独立测量 结果之间的接近程度 重复性：重复性：是指在相同条件(时间、校准、操作者、仪 器等)下获得的精密度,即所谓的批内精密度; 中间精密度：中间精密度：是指在一种或几种条件因素发生变化, 但在同一实验室内获得的精密度; 重现性：重现性：则是在不同实验室、不同条件下获得的精 密度,故又称实验室间精密度 实验室内精密度实验室内精密度：同一实验室内，使用同样的设备 ，由不同操作者在不同时间内获得的精密度，以前 曾被称为总精密度 精密度精密度 准确度、正确度和精密度？准确度、正确度和精密度？ [ISO 5725-1: 1994] 准确度准确度准确度准确度(ACCURACY)(ACCURACY) 不确定度不确定度不确定度不确定度(UNCERTAINTY)(UNCERTAINTY) 重复测量结果之间的接近程度 随机误差 标准差(SD)/变异系数（CV） 重复测量结果之间的接近程度 随机误差 标准差(SD)/变异系数（CV） 精密度精密度 (PRECISION) 均值与真值的接近程度 系统误差 偏倚(BIAS) 均值与真值的接近程度 系统误差 偏倚(BIAS) 正确度正确度 (TRUENESS) 误差 的类型 性能 特性 性能特性的 定量表达 系统误差正确度偏倚（bias） （总）误差准确度 精密度 测量不确定度 随机误差 标准差 变异系数 精密度、正确度、准确度？精密度、正确度、准确度？ WestgardWestgard确定不精密度的方确定不精密度的方 法法 实验周期 •批内批内 •日间日间 •实验室内不精密度（总不精密度）实验室内不精密度（总不精密度） 样本基质 •标准溶液标准溶液 •控制溶液控制溶液 •患者样本患者样本 样本浓度 •关键是医学决定水平关键是医学决定水平 •两个水平两个水平 •三个水平三个水平 WestgardWestgard确定不精密度的方确定不精密度的方 法法 样本个数 • 至少至少20个个 • 更多更好 • 考虑成本和时间考虑成本和时间 数据计算 • 均值均值 • 标准差标准差 • 变异系数变异系数 接受指标 • 建议使用建议使用CLIA可接受标准 批内 可接受标准 批内/日内日内CV1/4TEa 实验室内实验室内CV1/3TEa 定量测定方法精密度性能评价定量测定方法精密度性能评价 NCCLS EP5-2A: Evaluation of Precision Performance of Clinical Chemistry Devices; Approved Guide 15 该文件适用于体外诊断仪器或试剂制造商以期望 建立自己产品精密度性能。

还适用于临床实验室 期望建立自己所用检测系统（不配套的检测系统 ）的精密度性能 适用范围适用范围 仪器熟悉阶段 实验用的试剂、校准物 仪器熟悉阶段 实验用的试剂、校准物、、 质控物均应为同一批号 先作一个初步的批内 精密度测定质控物均应为同一批号 先作一个初步的批内 精密度测定 评价前的准备评价前的准备 评价方案熟悉阶段评价方案熟悉阶段 实验方法实验方法实验方法实验方法 每天分2批测定样本 各批实验间隔至少2小时以上 每批测定2个浓度样本，每个样本重复测定2次 共测定20天 17 离群值的检查离群值的检查离群值的检查离群值的检查 标准：重复测定的绝对差值超出5.5倍的初步批内 精密度评价的标准差 数量：5% 情况1：如果发现了离群值，需要寻找问题的原因， 并重复该批号样本 情况2：如果超出了5%的数据被拒绝，同时没有 发现可归属的原因，操作者考虑仪器性能不稳定 18 精密度确认实验需要计算的统计量精密度确认实验需要计算的统计量  B A 天 数 (I) 第一批（上午）第二批（下午） Xi11Xi12Xi1Xi11- Xi12 Xi21Xi22Xi2Xi21-Xi22 1 2 … … 20 i X 数据记录表格数据记录表格数据记录表格数据记录表格 20 举例举例- -TGTG精密度评价精密度评价 材料 试剂：上海复兴长征公司甘油三酯试剂 盒 校准品：上海复兴长征公司 仪器：日立7170A自动分析仪 样本：Roche公司质控血清（正常和病理） 举例举例- -TGTG精密度评价精密度评价 步骤：2个标本每天测定2次，双份测定， 共测定20天。

（两次测定间隔大于8小时时要重新作质控） 离群点的检查：如每次双份测定的差值超过 初步精密度时5.5标准差，该组数据为“离 群点”，应弃去或重做 使最终收集到的数据不少于80个 实验结果实验结果 天 数 天 数 j=1批批j=2批批 Xij1Xij2Xi1Xij1-Xij2(Xij1-Xij2)2Xij1Xij2Xi2Xij1-Xij2(Xij1-Xij2)2 10.960 0.950 0.9550.0100.00010.990 0.9800.9850.0100.00010.978 20.920 0.930 0.925 -0.0100.00011.010 1.0101.0100.0000.00000.968 30.986 1.014 1.000 -0.0280.000784 1.010 0.9600.9850.050.00250.992 …… 180.948 0.920 0.9340.0280.000784 0.955 0.9370.9460.0180.0003240.940 190.908 0.936 0.922 -0.0280.000784 0.890 0.9170.904-0.0270.0007290.913 200.889 0.944 0.917 -0.0550.003025 0.901 0.9200.910-0.0190.0003610.914 结果计算结果计算 1.批内不精密度 I=总试验天数（一般为20天） J=每天测定的批次（一般为2批） Xij1=第i天j批实验第一次结果 24 2. 批间不精密度 I=试验天数 Xi1=第i天第一批实验结果的平均值（通常重复2次） Xi2=第I天第二批实验结果的平均值（通常重复2次） 25 I = 实验天数 =第i天全部实验结果的平均值 =所有结果的平均值 ix 3.日间不精密度 26 4.总不精密度 27 举例举例举例举例- -TGTG精密度评价结果精密度评价结果精密度评价结果精密度评价结果 批内CV为2.23% 批间CV为2.46% 日间CV为3.48% 总CV为4.19% 评价评价 标准标准 评价评价 标准标准 卫生行业标准卫生行业标准 室间质量评价1/3TEa室间质量评价1/3TEa 依据生物学制定依据生物学制定 方法决定图方法决定图 EP5EP5- -A2 A2 注意事项注意事项注意事项注意事项 样本的稳定性 校准物的正确保存 试剂的正确保存、使用 仪器的正常维护 离群值 29 • 参考方法 • 决定性方法 • 配套系统的常规方法 可比较实验方法 • 至少40份 • 覆盖方法的可报告范围 患者样本的数量 • 单次/双份 • 至少5天 • 2小时内完成实验方法与比对方法的测定 测定次数及时间周期 Westgard确定偏倚的方法Westgard确定偏倚的方法 • 参考方法 • 差值图 • 比对图 图形显示数据 • 偏倚 • 相关系数r • 总误差 计算适当的统计量 • 与CLIA允许总误差比 可接受性能标准 Westgard确定偏倚的方法Westgard确定偏倚的方法 • T检验 • 计算的t值与临界t值 比较 如果厂家的声明 没有偏倚 • 确定实验室估计偏倚的置信区间 • 看厂家声明是否在置信区间内 • 公式=实验室的偏倚±t.SD/N1/2 如果厂家的声明 有偏倚 Westgard验证偏倚的方法Westgard验证偏倚的方法 用患者样本进行方法对比及偏倚评估用患者样本进行方法对比及偏倚评估 EP9-3A： Methods Comparison and Bias Estimation Using Patient Samples; Approved Guideline, Third Edition 33 此文件为用户提供了设计一个评价试验和选择方 法的指南，用于量化患者标本测定方法之间的系 统测量误差(偏倚或差异)。

该指南的目的用户为体 外诊断试剂的制造商以及监管机构和临床实验室 人员 适用范围适用范围 CLSICLSI EP9EP9- -A3A3修改及修改及新新增内容增内容 回归分析：包括加权、Deming回归和 Passing-Bablok方法（新增） 使用不同统计图分析偏倚（新增） 临床决定水平的偏倚分析（修改） 所有参数的置信区间计算（修改） 用extreme studentized deviate（极端 学生化偏差法）进行异常值检测（修改） …… 熟悉仪器操作及保养程序熟悉仪器操作及保养程序熟悉仪器操作及保养程序熟悉仪器操作及保养程序 准备足够同一批号的试剂准备足够同一批号的试剂准备足够同一批号的试剂准备足够同一批号的试剂/ /校准品校准品校准品校准品 整个实验过程必须有质量控制整个实验过程必须有质量控制整个实验过程必须有质量控制整个实验过程必须有质量控制 进行精密度实验进行精密度实验进行精密度实验进行精密度实验 待评方法待评方法/仪器（仪器（Y）） 对仪器进行一次完。