体外诊断试剂分析性能评估(准确度方法学比对)

准确度评估资料是评价拟上市产品有效性的重要依据,也是产品注册所需的重要申报资料之一。定量检测方法的方法学比对试验是评估准确度的方法之一,可以与参考方法或临床公认质量较好的已上市产品进行比对。

本指导原则基于国家食品药品监督管理局《体外诊断试剂注册管理办法(试行)》的有关要求,参考CLSI有关标准,对采用方法学比对进行准确度评估的实验方法和数据处理方法进行了原则性要求。其目的是为生产企业采用方法学比对进行准确度评估并准备准确度评估资料提供原则性指导,也为注册管理部门审核该部分分析性能评估资料提供技术参考。

由于体外诊断试剂产品发展速度快、专业跨度大,国家食品药品监督管理局将根据体外诊断试剂发展的需要,适时对本指导原则进行修订。

二、适用范围

本指导原则适用于首次申请注册、申请许可事项变更的用于定量检测的体外诊断产品。因体外诊断产品评价是将仪器、试剂、质控品、校准品等作为一个系统进行评价,因此方法学比对的评价采用系统的概念进行描述。如特殊产品不适用于本指导原则,可进行详细说明并采用适当的方法进行准确度评价。

三、基本要求

(一)方法学比对实验的基本要求

1.操作者应熟悉待评价系统和比对系统的操作。

2.编写系统标准操作规程,其中包括校准程序和室内质控程序,采用合适的校准品、质控品并保持仪器处于正常状态。

3.比对系统的选择

比对系统应具有以下条件:

(1)具有比待评价系统更好的精密度;

(2)同待评价系统检测结果具有相同的单位;

(3)如有参考方法应具有与参考方法已知的偏差。

比对系统应该选择正确性经过验证的系统,根据实际条件,选择的顺序如下:参考方法、原装系统、配套系统、经过验证的非配套系统。

4.待评价系统的处理

(二)方法学比对实验的评估及数据处理方法

1.实验样本的基本要求

(2)样本应来自于不同患者,并且此患者所患疾病对于被测组分的影响应该是已知的,样本不应含有干扰此方法的组分。

(3)样本浓度应在方法的线性范围内,并覆盖医学决定水平。通常基本从线性范围的低限到线性范围的高限(应至少有50%的样本在参考范围以外,但在线性范围内)。分析样本的浓度应尽可能在线性范围内均匀分布。商品质控物或者校准物可能存在基质效应,应避免使用。

2.实验过程

(1)每天选择8个临床患者样本,按1到8的顺序编号。用两种方法同时进行实验,按照1,2,3,4,5,6,7,8,8,7,6,5,4,3,2,1的样本顺序进行测定。

(2)以上实验至少重复5天,即至少分析40个不同的临床患者样本。每天实验必须进行校准和室内质控,只有在室内质控合格的情况下,当天的实验室数据才有效。

3.数据处理及结果报告

(1)记录测定结果(Xij和Yij),

Xij为比对系统测定值

Yij为待评价系统测定值

i为测定样本的序号(1、2、3…40)

j为同一样本同一天测定的次序(1、2)

(6)检查批内离群点:计算样本重复测定间差值(DXi和DYi)的平均数,

样本重复测定间差值超出该平均数4倍时,则判断为离群点,如离群点超过1个时,整组数据应舍弃,寻找原因后重新进行评价。如离群点为1个,可以补充数据后重新进行统计。

(7)检查批间离群点:计算两种方法测定结果间均值差值(│-│)的平均数,如两种方法测定结果间均值差值超出该平均数4倍时,则判断该样本为离群点,如离群点超过1个时,整组数据应舍弃,寻找原因后重新进行评价。如离群点为1个,可以补充数据后重新进行统计。

如果r2<0.95,那么必须通过分析另外一些样品以扩大数据范围,然后再检查全部数据系列,如仍然r2<0.95,则应寻找待评价方法存在的缺陷,纠正后重新进行试验。

对于某些免疫项目,可适当放宽标准,原则上r2≥0.90,则认为数据范围适合,数据满足要求。

(9)回归计算:利用所有样本双份测定的有效数据,计算两个方法间的线性回归方程:Y=bX+a。

(10)偏差估计:在医学决定水平,利用回归方程计算预期偏差,预期偏差Bx=a+(b-1)X,相对偏差=Bx/X。

四、其他应注意的问题

(一)采用的患者样本对于被测组分的影响应该是已知的,样本不应含有干扰此检测方法的组分。

(三)实验前必须对待评价系统进行精密度及线性的评价,评价合格后方可进行实验。

五、名词解释

(一)待评价系统:拟进行性能评估的产品。

(二)比对系统:参考方法(系统)或临床公认质量较好的已上市产品。

六、参考文献:

EP9-A2:Methodcomparisonandbiasestimationusingpatientsamples;ApprovedGuideline-SecondEdition.

THE END
1.www.stats.gov.cn/zsk/snapshoot?reference=d466cfa12a8d807d0知识库 知识分类:|知识来源: |发布日期:https://www.stats.gov.cn/zsk/snapshoot?reference=d466cfa12a8d807d0c267a76a75d1e42_F95CF7913DA8CAEE0AF3356838E95DC6&siteCode=tjzsk
2.模型评价方法分别画图举例,要说出应用场景,例如什么情况用什么评价标准。 混淆矩阵 accuracy(准确率) precision(精准度),recall(召回率),F1-score(宏观,微观) ROC曲线图 python代码实现,例子。 (有视频参考) 5.2 项目实例运用 模型评价方法介绍 为了对模型的效果进行评估,需要好的评估方法,还需要衡量模型泛化能力的评价标准。评价https://www.jianshu.com/p/b4d40760156c
3.多分类回归模型的评估多分类模型的评价标准对于二类分类器/分类算法,评价指标主要有accuracy, [precision,recall,F-score,pr曲线],ROC-AUC曲线,gini系数。 对于多类分类器/分类算法,评价指标主要有accuracy, [宏平均和微平均,F-score]。 对于回归分析,主要有mse和r2/拟合优度。 二分类模型的评估 https://blog.csdn.net/pipisorry/article/details/52574156
4.准确度的好坏用什么衡量准确度的高低常以误差的大小来衡量。 指在一定实验条件下多次测定的平均值与真值相符合的程度,以误差来表示。它用来表示系统误差的大小。在实际工作中,通常用标准物质或标准方法进行对照试验。 在无标准物质或标准方法时,常用加入被测定组分的纯物质进行回收试验来估计和确定准确度。在误差较小时,也可通过多次平行测定https://edu.iask.sina.com.cn/jy/2qNhewDUTGh.html
5.关于公开征求《个体化用药基因检测试剂临床评价注册审查指导原则可通过申报产品与测序结果或已上市同类产品进行方法学比对研究,评价申报产品的准确度;也可通过检测参考品(盘)分析申报产品检测结果与经确认结果的符合情况,评价申报产品的准确度。 评价准确度的样本应由若干份临床样本组成,样本类型应与产品适用范围一致,包含不同浓度水平。 https://www.ciopharma.com/supervise/35307
6.一致性评价重磅参考资料:(USP1092)溶出度试验的开发和验证1. 前期评估(对产品发展以及溶出度方法开发的前期研究评估) 在方法开发之前,对用以评价剂型的溶出行为的滤膜、溶出介质、介质体积和溶出设备进行筛选是非常重要的。 1.1滤膜相容性研究 在获得准确试验结果中,过滤是一个样品制备的关键步骤。过滤的目的是为了去除溶出液中未溶解的药物和辅料。如果不把未溶解的药物和辅http://www.bkmdkj.com/a/gongsixinwen/259.html
7.药物分析方法验证思路依然很乱!这篇文章拿走不谢方法验证的评价应围绕验证目的进行,同时关注方法验证内容的全面性和试验方案的系统性和合理性,以及验证过程的规范性。 2.2方法验证需要关注的问题 2.2.1杂质定量方法验证 杂质定量试验要验证方法的专属性、检测限、定量限、线性、范围、准确度、精密度等。为考察方法能否有效检出原料药或制剂中的杂质,可采用原料药尚未https://www.canbigou.com/index.php/d/623.html
8.体外诊断检验系统性能评价方法:检出限与定量限鉴于定量限定义的灵活性,当报告定量限估计时,要求包括其确定时的准确度目标。准确度目标应以不确定表示,当不确定度不宜获得时,准确度目标优先设定为总误差目标。在某些情况下,如无法在合适的低水平待测物浓度下确定不确定度或总误差目标,可采用其它合理的替代方法建立定量限,例如研究试剂精密度达到固定要求时的最低http://www.caclp.com/article/?detail_12140.html
9.体表损伤与瘢痕的三维测量方法应用评估方法对比分析直尺法、结构光三维扫描法和单相机摄影测量法对86处尸体损伤的测量结果;对比分析结构光三维扫描法、单相机摄影测量法、Photoshop套索像素法、PDF阅读软件法对13处活体模拟块状瘢痕面积的测量结果,并记录所耗时间;以贴纸的已知规格信息作为标准值,比较直尺法、结构光三维扫描法和单相机摄影测量法的测量准确度,http://www.huao3d.com/display/398818.html
10.YY∕T1789.2《YY∕T1789.2-2021体外诊断检验系统性能评价方法第2部分:正确度》摘要:文章介绍了YY∕T1789.2-2021体外诊断检验系统的性能评价方法,并对比了不同技术的应用效果。关键词:体外诊断检验系统,性能评价,准确性,国家药品监督管理局 ICS11.100.10 c30 中华人民共和国医药行业标准 https://m.book118.com/html/2024/0502/7200035020006103.shtm