临床化学设备的精密度评价

临床化学设备的精密度评价前言目前临床化学文献包含了大量产品评估的实例。这些评估使用了多种不同的实验和统计方法，而其中有些使用是不恰当或错误的。目前几乎没有用于体外诊断设备的评估的指导原则。有时由于文献中的评估缺乏足够的数据和描述而无法重现结果。针对这一需求，委员会根据用户、厂商代表、统计学家、化学家、实验室人员和医务人员的经验编写了这一指导原则。由于目前可用的体外诊断设备种类繁多，单一的实验设计显然不适于所有的设备。因此，我们提出了指导原则这一框架，对可广泛适用于不同分析物和设备的时间、程序、材料、数据总结及解释技术提供了主要的概念性指导。我们用一个典型实验设计的例子力图阐明评估的每个步骤。在编写这个草案的每一步中，我们在许多推荐的时间，质控的内容和确定精密度组分的方法中认真选择。我们力求在实验及公式的复杂性和操作的简便性之间建立平衡。我们提供了附录（附录C），它可为修改设计和计算提供指导。EP5早期的版本被实验室社团广泛的评论，并产生了不同的评论。委员会感谢所有评论者的建议。我们认真回顾了每一种意见并在文件中做了适当的修改。但并非采纳了所有的意见。对EP5-T的意见和小组委员会的回答都包含在附录D中。欢迎对本版批评指正。关键词：评价草案，实验设计，医学设备，离群点，精密度，质量控制。1.0序言1.1目的本文件是为评价临床化学设备的精密度而提供的指导原则。在很多情况下，这些技术可用于化学以外的其他领域。当设备被修整后再与要求的精密度性能比较是无效的。典型修整的例子有，不同试剂，校准液，控制品的使用，或操作程序与制造商标示的不同。1.2一般精密度评价实验的概述1.2.1一般指导原则（1）有足够的时间熟悉设备的操作和保养的原理。（2）有足够的时间熟悉评价草案的步骤。（3）整个评价期间设备需保养及做质控。（4）应选择适当的样品进行适当长时间的实验，以得到足够的数据，来反应仪器在日常工作中长期真实的性能。1.2.2设备熟悉期对设备的全面熟悉，包括原理、操作、设定、保养、故障处理等内容。1.2.3草案熟悉期精密度实验的前5个操作日用于熟悉草案本身。在实验实践过程中，应发现设备的任何严重问题，收集在实验结束时有用的数据，进行精密度和在本指导原则中未提到的其他工作特性如线性，漂移等的初步可接受性测试。1.2.4精密度评价实验精密度评估实验推荐最少20个操作日。因为日间精密度是分析中最常见的变异源，对性能的评价应持续足够长的时间，以确保总精密度得到适当的评价。实验中的每一天应分别进行两批分析，每批应有两种样本，每种样本至少两个浓度水平。除测试样本外，每批还应至少分析一个质控品。推荐在评价期间仪器使用常规的质量控制程序和质控品（如果适当）。1.2.5完成精密度实验草案熟悉期之后，实验应持续15天或以上。每5个操作日结束后，应在质控图上重新计算控制限，并检查所有数据的可接受性。精密度实验完成后，应对数据进行适当的统计计算。1.2.6与传统的精密度评价实验的比较传统的精密度评价方法：单批测试20次作为批内精密度；对一个给定浓度的样本每天进行一次（或几次）测试，共测10天或20天得出总不精密度（通常被错误的计算和误称为day-to-dayprecision日间精密度）。这种方法有严重的缺陷，本草案特别不推荐。用单批评价批内精密度存在很大的风险，因为实际上单批测试时的操作条件可能并不反应通常的操作参数，这对评价有不利影响。进一步说，无法确定单批实验是否具有代表性。因此，本文件推荐批内精密度评估由多批批内性能合并得到，这样可确保评估更有说服力和代表性，可推知在将来多种日常条件下的特性。对于总精密度，虽然这里推荐的程序需要一些繁琐的计算，但不依赖于评价的天数和一天内的批数（与传统的方法不同）。它可正确的合并精密度组成部分批内、批间和日间的影响（相对大小因方法而异），并可避免对总不精密度使用错误的术语（如day-to-dayprecision日间精密度）。1.3精密度评价的统计功效1.3.1精密度和可信度在设计一个评价实验时，必须预先决定怎样确定设备的真实精密度。每次执行一定的精密度方案，就能获得一个设备真实精密度的评估。在同一个实验室用一台受控的设备重复运行相同的草案，尽管真实精密度是一样的，却可得到不同的精密度评估结果。可以料想到，这些精密度的评估分散在真实精密度的周围，并且从更多组观察中得到的评估将更紧密的围绕在真实精密度的周围。在某种意义上，更可信的评估需要更多数量的观察。评估越可信，对异于要求的性能的检测越有统计功效。1.3.2与制造商的统计学比较用这个精密度评估实验，可将评估结果和制造商提供的批内和总精密度比较。这个比较的统计功效可以计算，即根据评估的自由度计算评估与要求的性能在统计上有多大的差异。这个极其重要的概念可以用来说明一个自由度为100的批内精密度评估与要求的性能有很小的偏离。同样，一个自由度为10的批内精密度评估将检测到与要求的性能较大的差异，这样的精密度评估只有很低的统计功效。如果评估的自由度为40，则其有较大的统计功效，并且评估可以检测到与要求的性能较小的差异，尽管这种差异在临床上仍然重要。这在任何评估实验的设计中都是很重要的异方面。1.4一般防护措施所有的患者血液标本均存在潜在的感染性，必须预先处理。美国疾病控制中心和NCCLS都有相关的指导文件。2.0设备熟悉期2.1目的必须学习所需的操作，维护程序，样本准备方法，及定标和监控功能。大多数临床化学设备制造商提供操作培训。尽管这种培训是必须的，设备还是应当在各实验室建立并运行足够长的时间，以便理解涉及到的所有程序，并避免在实际性能评价中出现问题。应当分析现有的样本，包括混合血清，控制品，残留血清（如果合适）和适合设备的所有任何其他实验物。应当监控所有在日常操作中可能发生的意外（例如错误标志，错误修正，校准等）。本期不应收集数据。设备熟悉期应持续到使用者确信可操作设备为止。2.2时间推荐熟悉期为5天。可根据设备的简单或复杂程度，适当增减。3.0草案熟悉期3.1目的评价实验经常涉及到一些在日常实验条件下通常不会遇到的步骤。为了避免这些不熟悉的步骤给评价实验的结果带来不利影响，在草案开始前应进行几次实验。本期可确保对草案的理解。实验应当使用实验室常规使用的实验物和质控品，并按下节所述的方案进行。3.2时间草案熟悉期应持续至获得数据无操作困难后至少5个操作日。复杂设备如必要可适当延长时间。3.3数据的使用在这5天内（或更长时间内）操作无困难的情况下收集的数据，可与执行草案时收集的数据合并使用。所有数据应符合下述质量控制可接受性检查。3.4质量控制程序本期应对设备进行常规质量控制。本期数据收集完成后应计算实验控制限，并应满足用质控品测试的结果或生产商对设备的性能要求。若不满足则应联系厂商调整该设备。3.5附加评价本期还可对设备的线性、回收率等其他性能进行测试，以便发现设备是否存在其他严重的问题。若有应联系厂商查找原因，并解决问题。3.6初步精密度实验在本期结束或即将结束时，进行一次初步批内精密度测试。连续测定一种适当的测试物20次（或小于20次的一个完整的批），计算SD和CV，与期望值比较。严重不符应联系厂商解决问题后再进一步实验。应该强调的是，用单批测试来判断设备的可接受性是不充分的，它仅用于确定继续评估前应当解决的问题。3.7检测离群点精密度评价实验必须定义离群点的检测标准。检测标准用于确定操作问题，不能歪曲结果数据和精密度评估。假定适当的质量控制程序将用于实验中，建议用一个相当不充分的实验检定数据中明显错误的离群点。离群点测试来源于初步精密度实验中收集的数据。精密度评估实验中收集到的每批数据均是成对的，应用下列方法检测。1）如果一对数据差的绝对值5.5倍初步批内精密度实验SD时，此对数据作废，应补做。2）如果发现离群点，应查找原因，并重复此批。数值5.5来源于99.9％以上分布概率。注意：此实验在初步精密度测试物浓度和评估测试物浓度接近时才采用。4.0精密度评价实验4.1精密度的内容精密度评估实验的目的是评价设备的总精密度。总精密度是设备在一个不定的长时间内的变异性。一些变异源在一定程度上影响长期精密度。通常在不必决定每个来源或组分相对大小的情况下，设计这样一个实验是充分的，以便所有的变异源影响总精密度评估。用于描述与时间相关的总精密度内容的术语包括：1）批内2）批间3）日内4）日间其中批内精密度和总精密度是最重要的。本节描述的实验被设计用于实验室操作中设备总精密度和批内精密度的评估。在本实验中没有合并可能很重要的变异源如校准物和试剂批号的不同，技术员/操作者的不同，但是建议生产厂商包含这些内容。影响精密度的其他一些不需逐项评价的因素（样本预处理，测试物稳定性，携带率和漂移等）包含在内。4.2试剂与校准物实验中应使用同一批号的试剂和校准物。使用多批号的这些物质将增加观察到的变异性，而实验并不能将这些因素的影响分离。4.3试验物4.3.1基质应与新鲜的临床病人标本性能接近。可用稳定的、商品化的、蛋白质基质。如果合适，稳定的冷冻混合血清是首选。4.3.2浓度应根据一些准则认真选择试验物。推荐两个浓度（也可更多）。浓度应尽量选择横跨设备可测范围中有意义的部分。如用2个以上的浓度时，增加的浓度应尽可能接近实验室“医学决定水平”。如果为了将评估的结果和公布的性能要求比较，应选择符合要求水平的浓度。4.4实验次数和天数4.4.1一般指导原则这里描述的实验和计算是评估设计的一个实例。也可采用其他设计，但需要的计算和统计处理将有所不同。精密度实验需要充足的数据，以便精密度评价能恰当的反应设备的真实精密度。为了获得这样的结果，精密度评价实验至少需要20个可接受的操作日。在实验开始的最初5天，实验者应熟悉如3.0节所述的草案。短批方法在2小时以内完成一批，而长批方法（例如RIA）通常每做一次转换需要更长的时间。对长批方法，应该使用附录C所示的每天一批的程序；对于短批程序，评估样本可置于批内的任何位置测试。4.4.2特殊规程每天应采取以下步骤：1）分析2批或2个批号；2）如有一批因质控规程或操作困难必须舍弃时，应增加1批；3）在1批实验或1个批号中，对使用的每个浓度的实验物两等分分析；4）每批实验均应包含常规质控样品；5）每批实验改变试验物和质控品的分析次序；6）模拟实际操作，每批至少加入10个患者的样品；7）一天内如做多批时，各批实验之间要至少间隔2个小时。4.5数据记录附录A为用于总结数据的样本数据记录表。这种类型的小结对以下所述的统计分析很有用。如果批数，天数或观察数变了，可以创建类似的表格，将结果数据转入其中，并且相应调整必要的计算。4.6质量控制程序4.6.1一般指导原则正常的质控应贯穿整个评价实验。每批实验中至少有一个适当浓度的质控品。如果通常使用两个或以上浓度的质控品，这种方法应持续整个评价实验。4.6.2统计学质控图在草案熟悉期结束时应建立设备的统计质控图（如可接受的精密度数据收集期的前5天）。按下列程序进行。1）根据通常的惯例从最初的数据中计算中线、警戒限、失控限；2）在图上绘出随后所有的质控数据；3）若有任何一点失控，应确定原因并重做该批；4）每收集5天的数据后，由所有迄今收集的可接受数据重新计算每个图的中线、控制限；5）假如原来可接受的结果现在不能被接受的话，继续精密度实验直到获得适当的天数；6）保留舍弃批数据记录。4.7精密度的统计计算将数据收集并转移到适当的表格后，应当进行本节所述的计算。附录B为一个完成的样本数据记录表及相关计算的实例。每一个浓度应分别计算，并且所有的数据应检查是否符合3.7节中叙述的离群点基准。4.7.1批内精密度评价计算公式：IXXSIijijijwr4)(121221；(公式1)I＝总天数（通常为20）；j＝一天内的批数（1或2）；Xij1＝第i天第j批重复第一次的结果；Xij2＝第i天第j批重复第二次的结果。用上面的公式需要每天两批测试的两个结果。如果某天只有一批可用，该批就不能用上面的公式。（参见附录C每天只有一批或混合