首页
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
更多
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
AUC这个指标,对IVD产品来说有什么价值?
文摘
2024-11-03 08:01
广东
对于体外诊断试剂来说,检测效能是指什么?
它可能是灵敏度,是特异性,是精密度,是准确性,是检测限,是定量检测限,或者是前面这些参数的合集。
当然,在更多的时候,当我们说到检测效能的时候,指的是
ROC曲线下面积
,也就是AUC。
AUC可以用来评估
定性体外诊断试剂
这样二分类模型的性能,它的值在0.5到1之间,其中,0.5表示试剂的性能等同于随机猜测,而1表示试剂具有完美的分类性能。
所以,如果AUC值越大,说明试剂的分类能力越强,也就是越能有效地区分阳性样本和阴性样本。
在实际应用当中,AUC值是可以帮助我们理解试剂在
不同临界值设置
下的表现。
一个高AUC值意味着,当我们随机选择一个阳性样本和一个阴性样本的时候,试剂对阳性样本的检测结果,更有可能大于阴性样本的检测结果。
当然,如果是负相关的话,这也是成立的,只不过要做一些数学上的处理,比如取绝对值之类的。
所以啊,我们可以这么去理解AUC值,那就是,如果你各挑选一个阳性样本和阴性样本,那么,你的试剂对阳性样本的检测结果,应该会大于阴性样本的检测结果。
AUC就是这么一个指标,它并不依赖于你为你的诊断试剂确定的临界值,当然更不包括参考区间,所以呢,反而可以更全面的来评估试剂的性能。
对于AUC研究来说,一般情况下是
120例左右
的样本,阴阳性样本各半就可以了。
但要注意一点,现在很多朋友谈到试验的时候,就直接文,多少例样本合适?其实这是很不对的。
因为光谈样本量没有价值,样本组成是同样需要注意的问题,这一点,我之前在《
五分钟弄懂样本量
》当中做过详细的阐述。
如果只是为了通过药监的审评,那么只谈样本数量也没有用,基本上现在的指导原则当中,都会增加对不同样本的需求;而如果你的目标是为了真正评价自己的产品是否满足市场需求,那就更需要对样本组成进行精心设计了。
那么,我们能不能通过AUC这个指标,来
指导产品开发
呢?
答案是不能,因为当你需要做ROC的研究的时候,也就意味着你的试剂盒,已经
定型
了。
为什么?
原因就是我上面谈到的,用于ROC研究的这套参考品,它不仅样本量不算少,而且可能还要包括很多不同类型的样本,这也就意味着,这套参考品的
成本不低
。
同时,至少120例样本的实验做下来,人力、时间、设备、试剂、耗材的成本都不会太少,这样的实验只能用来对你已经定型的产品进行评估,而不能用来作为你开发思路的验证指导,毕竟,
地主家也没有余粮啊
!
最后,我说一个最近遇到的很有趣的问题,“能不能用AUC对
定量试剂的一致性
进行评估?”
答案当然是
不能
。
原因就是我前面说到的,AUC只能用于定性试剂这样的二分类模型性能评估,而定量试剂本身就不是二分类模型。
而且,就算是对于定性试剂而言,也不能将AUC用于定性试剂的临床一致性评价当中,因为AUC评估是不考虑试剂的临界值设定的,但是,临床一致性评价,是
需要把试剂的临界值纳入的
。
所以,定性试剂的临床一致性评估还是应该用2x2格表,定量试剂还是得用B-A法。
关注我,降低产品上市认知门槛。
*个人观点,仅供参考。
品牌推广
|
培训合作
|
商业咨询 | 资料商店
| 转载开白
请在公众号后台回复
合作
诊断科学
诊断科学,产品和合规咨询顾问,打造了《IVD上市课》等系列课程,曾为多家国内外诊断公司提供战略咨询服务,提倡“从概念到市场”的理念,为诊断厂家提供产品和合规规划的参考方向,一起更早看到未来。使命:降低产品上市认知门槛。
最新文章
幽门螺杆菌基因突变检测试剂盒审评报告发布!
基因检测和免疫检测临床性能相当,结直肠癌筛查面临‘消费降级’
临床设计与实施:鼻咽癌新血清学标志物
刘博:在设计样本入排标准的时候,需要考虑哪些统计问题?
【11月22日】HPV分型、生殖道多重、基因多态性、肿瘤标志物等38个IVD产品获批上市
【11月22日】一款新冠抗原检测试剂不予注册!
【11月22日】6款IVD产品终止注册,基因检测试剂占一半
“免临床试验”项目组合的联检试剂,能不能免临床试验?
【11月21日】一款IVD设备,进入“优先审批”!
2024年,也许是未来十年内最好的一年
2024年第三次医疗器械产品分类界定结果汇总
如何区分检测限和最低检出限?
医疗器械临床试验应该怎么做?要注意哪些要点?
IVD的临床意义到底是什么?对市场又有怎样的影响?
对于二代测序来说,建库试剂能不能单独申报?
刘博:在探索性统计分析当中,会用到哪些参数?
《免于临床试验目录》当中写“体液样本”的,是不是所有样本类型都可以免临床试验?
IVD运输稳定性的保存条件,到底该怎么设定?
【11月13日】广东润鹏注销去年获批实时荧光PCR仪注册证
7项IVD产品审评报告发布!
对于胶体金这样目视判读的试剂,临界值应该怎么确定?
两项IVD产品指导原则公开征求意见!
如何理解医疗器械同品种比对?它又该怎么做?
特朗普二进宫,会给全球医药行业带来怎么样的冲击?
刘博:临床试验要计算样本量,那每家机构的样本量又该怎么算呢?
对于IVD临床实验来说,临床机构可不可以在同一个市内?
试剂先注册还是设备先注册?这个问题也许和你想的不一样
医药代表的愤怒之火,正在烧向阿斯利康的高管们
关于公开征求对免于临床试验体外诊断试剂目录的通知
12项IVD指导原则征求意见!
什么时候可以不做临床实验,临床评价呢?
国家药监局综合司公开征求《关于进一步明确进口医疗器械产品在中国境内企业生产有关事项的公告(征求意见稿)》意见
科研试剂,要不要去拿个注册证?
AUC这个指标,对IVD产品来说有什么价值?
刘博:什么是定性变量?定量变量呢?它们之间能转化么?
2024年第二次医疗器械产品分类界定结果汇总
同源样本对比的临床试验,应该怎么做?
IVD产品成品检验,是否要包括技术要求中的所有项目?
免费观看丨11月诊断科学课程菜单
国家药监局关于江苏为真生物医药技术股份有限公司、新疆利康祥运生物科技有限公司飞行检查情况的通告
对于定量试剂而言,应该如何选择溯源?
【10月29日】肺癌、肝癌、膀胱癌…多款肿瘤检测产品获批上市!
图文详解!医疗器械临床评价要怎么做?
卷入肿瘤药物骗保旋涡,睿昂基因实控人被刑拘
实例解析,呼吸道多重试剂的临床试验应该怎么设计?
刘博:发生频率,描述性统计最重要的工具
【10月25日】呼吸道、登革热、EB病毒、基因检测等24款产品获批上市!
3个心法,帮你避开器械注册检验的那些坑
风险管理,到底在医疗器械企业中扮演了一个怎样的角色?
畅谈一下,未来需要什么样的阿尔兹海默血检产品?
分类
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
原创标签
时事
社会
财经
军事
教育
体育
科技
汽车
科学
房产
搞笑
综艺
明星
音乐
动漫
游戏
时尚
健康
旅游
美食
生活
摄影
宠物
职场
育儿
情感
小说
曲艺
文化
历史
三农
文学
娱乐
电影
视频
图片
新闻
宗教
电视剧
纪录片
广告创意
壁纸头像
心灵鸡汤
星座命理
教育培训
艺术文化
金融财经
健康医疗
美妆时尚
餐饮美食
母婴育儿
社会新闻
工业农业
时事政治
星座占卜
幽默笑话
独立短篇
连载作品
文化历史
科技互联网
发布位置
广东
北京
山东
江苏
河南
浙江
山西
福建
河北
上海
四川
陕西
湖南
安徽
湖北
内蒙古
江西
云南
广西
甘肃
辽宁
黑龙江
贵州
新疆
重庆
吉林
天津
海南
青海
宁夏
西藏
香港
澳门
台湾
美国
加拿大
澳大利亚
日本
新加坡
英国
西班牙
新西兰
韩国
泰国
法国
德国
意大利
缅甸
菲律宾
马来西亚
越南
荷兰
柬埔寨
俄罗斯
巴西
智利
卢森堡
芬兰
瑞典
比利时
瑞士
土耳其
斐济
挪威
朝鲜
尼日利亚
阿根廷
匈牙利
爱尔兰
印度
老挝
葡萄牙
乌克兰
印度尼西亚
哈萨克斯坦
塔吉克斯坦
希腊
南非
蒙古
奥地利
肯尼亚
加纳
丹麦
津巴布韦
埃及
坦桑尼亚
捷克
阿联酋
安哥拉