医疗保健实验室的工具、技术和培训

客人的文章

CLSI EP15-A3:精度验证和偏差估计

我们很高兴有一篇客座文章解释方法验证的最新内容,特别是CLSI指南EP15关于方法验证的最新版本。对于寻求快速检查以确保其方法符合制造商规格的实验室,EP15可能是正确的选择

CLSI EP15-A3的新特性:精度的用户验证和偏差估计核准指引-第三版


R. Neill Carey博士
2015年7月

介绍

CLSI EP15于2014年9月作为A3文件发布。这是它的第四次迭代,虽然它保留了许多原始方法,但在A3版本中有一些重大变化。

最重要的变化是创造了一个相对简单的实验,可以对测量过程的不精确性及其偏差给出可靠的估计。在EP15之前的所有版本中,都有实现这一目标的基本要素,但在EP15- a3中,它们被提炼和组合成一个单一的实验。下面是协议的简要说明。

可接受性能说明

在做其他事情之前,用户应该指定总允许误差,并从中得出允许的标准偏差(或%CV)和允许的偏差。在开始评估之前,用户应确定候选测量程序的不精度符合允许不精度的标准。如果出版物中报告的测量程序的不精密度不符合标准,例如制造商声明的不精密度,则不适合采用EP15-A3中描述的精度验证程序。作为一个有限的实验,它不如CLSI EP5-A3中描述的实验严谨,更合适。

精度验证

EP15首先描述了一个精度验证实验。如果用户正在评估一个程序,其中有制造商的精度声明,或使用CLSI EP5开发的已公布的精度结果,则用户可以在长达五天的实验中验证已公布的精度。
患者样品、参考材料、熟练度测试样品或对照材料可作为测试样品,只要有足够的样品材料,每次运行5至7个运行,对每个样品进行5次测试。应在不同医疗决策点浓度下用两种或更多样品材料进行精度测试。实验产生至少25个重复,在至少5天内收集每个样品材料。

重复性(以前称为“运行内”)和实验室内(以前称为“总”)标准偏差是通过方差分析技术(ANOVA)计算的,该技术适当地解释了运行内和运行间对测量程序总体不精确性的贡献。用户需要访问软件来进行ANOVA计算,但是在Excel、Minitab、Analyze-it和其他进行统计计算的软件包中都可以使用这些软件。然后将重复性和实验室内的标准偏差与声称或公布的标准偏差进行比较。如果计算的标准差小于公布的值,则用户已经验证了该权利要求。

有时计算的标准差可能超过公布的值,但真实的标准差小于公布的值。例如,如果真实的标准偏差实际上与声称的标准偏差完全相等,那么在验证实验中,计算出的标准偏差将超过公布的标准偏差的50%。为了允许这种可能性,用户根据公布的标准偏差和用户实验的大小计算“验证限制”。如果计算出的标准差小于验证限,则不存在统计学上的显著性大于公布的标准差,用户对公布的精度进行了验证。如果计算精度超过验证限制,则计算标准差在统计上显著大于公布的标准差,用户无法验证公布的不精度。该文件包括简化验证限度计算的表格。

偏倚估计

由于精密实验在数天内收集了如此多的重复测量结果,因此精密实验的结果可用于可靠地估计测量程序相对于实验中使用的样品材料的指定(目标)值的偏差。唯一的要求是分配的值必须是可用的。材料的选择取决于用户估计偏置的目的。在精密实验中,应测试两种或两种以上合适的材料。

如果使用者对估计相对于能力测试同伴组的偏差感兴趣,并且想要估计测量程序如何在能力测试中表现良好,那么具有被评估的测量程序同伴组值的能力测试材料是合适的。
对于相对于质量控制对等组的偏差,测量程序中具有对等组值的质量控制材料是合适的。“测定的”质量控制材料是不合适的,除非可以获得同行组的信息。通常,没有办法估计“分析”值的不确定性,这是确定计算偏差在统计上是否显著所需要的。

国际公认的高阶参考材料,如美国国家标准与技术研究所的材料,或来自检验医学可追溯性联合委员会的材料,或来自类似组织的材料,如果用户希望估计相对于这些材料指定浓度的偏差,可能是合适的。这些材料的使用对于建立测量程序的可追溯性很重要。

如果使用者有兴趣估计相对于该测量程序的偏倚,则使用与被评估的测量程序基本等同的测量程序反复分析的患者样品或对照材料可能是合适的。这可能是有用的,例如,如果实验的目的是估计系统中一个实验室相对于另一个实验室的偏差,或系统中实验室的平均值。

如果样品材料是合适的,并且目标浓度是可用的,用户可以估计精度实验中计算的平均浓度相对于每种材料的目标浓度之间的偏差。

为了确定从实验中计算的平均浓度与目标浓度之间是否存在统计学上显著的偏差,用户在目标浓度周围计算一个“验证区间”。验证区间的宽度取决于参考物质目标值的不确定度和实验计算的平均浓度的标准误差。验证间隔的计算将是复杂的,但委员会通过提供基于每次运行的重复测量次数、运行次数和目标值的不确定性的难以计算的数量的表格,大大简化了它。

如果用户实验的平均浓度在验证区间内,则不存在统计学上显著的偏差。


如果用户实验的平均浓度超出验证区间,则存在统计学上显著的偏差。用户必须评估估计偏差和允许偏差。如果估计偏差小于允许偏差,则该偏差是可接受的。如果估计偏差超过允许偏差,则不可接受。

病人样本比较实验怎么了?

先前版本的EP15包括一个小型比较实验,涉及20个患者样本,用于验证制造商声称的偏差。这种方法有两个问题。首先,用户很少有机会接触到制造商(或出版物作者)使用的测量程序,作为发表偏倚的比较方法。有时制造商只是一般地确定比较测量程序。其次,大多数制造商只提供回归统计数据作为比较实验的结果,而不提供偏差声明,因此用户必须从提供的回归统计数据中计算预期的偏差(并且对这种估计偏差的不确定性知之甚少)。EP15-A3委员会认为患者比较实验本身价值不大,需要进行患者比较实验的用户应参考CLSI EP9-A3《使用患者样本的测量程序比较和偏倚估计》。

EP15-A3指南的好处

EP15-A3使用户能够验证所声称的不精度,并在单个实验中估计测量过程的偏差,持续时间仅为5天。当用户希望验证精度和估计相对于同类组或目标浓度的偏差时,这是有价值的。当传统的方法比较实验难以获得患者样本时,它可能特别有用。

感谢委员会成员

EP15-A3文档开发委员会是一个由专家组成的团队,团队合作默契。主要作者是:Walter Hauck, Paul Durham, Anders Kallner, Marina Kondartovich, Jonathan Guy Middle, Merle Smith, James F. Pierson-Perry和Aparna Srinivasan, CLSI工作人员Ron Quicho提供了有力的帮助。

标签:CLIAEP15,CLSI,验证,方法验证

Joomla SEF url由Artio提供