目视检查人员资质确认的三重一致性研究设计与Kappa判定门槛
目视人员资质:同一块板今天合格明天不合格
OurGMP以问答形式说明目视检查人员资质确认应走属性一致性分析,需同时考察重复性、再现性和与标准比对的准确度,而非只凭签字放行。方案要求覆盖所有参与放行的人员,每人至少完成三轮平行试验,样品含洁净样、VRL浓度加标脏污样以及水痕、划痕、抛光不均等假阳性对照样。
属性一致性分析,三重Kappa
小轩:谢老师,我们目视检查资质确认做完了,三个人看同一批试片,签字都在,是不是可以放行了?
谢老师:先别急着签。我问你一句——同一块板,今天判合格、明天判不合格,这个人算不算有资质?
小轩:这……不算吧。
谢老师:那你的方案里,测了这一项吗?
一、先搞清数据类型
量具R&R分两类。
连续型适配含量、重量、厚度这类连续数值;
属性型适配合格与不合格、洁净与脏污这类分类属性。
目视检查常规输出的就是合格或不合格的二元判定,属于典型属性数据,所以要走属性一致性分析,而不是连续型那套方法。
二、三重一致性,缺一不可
第一重是重复性,自己跟自己——同一个人多次判同一块板,结果是否一致。这一项最容易被漏掉,因为大家只盯着人和人之间对不对得上。
第二重是再现性,跟别人——不同人判同一块板,结果是否一致。
第三重是准确度,跟标准——每个人的判定与已知真值是否一致,也就是有没有把脏的判成净的、把水痕当成残留。
三、研究怎么设计
样品要三类齐全:洁净样、VRL浓度的加标脏污样、假阳性对照样,后者包括水痕、划痕、抛光不均。
检查人员要覆盖所有参与放行的人员,一个都不能少。每人至少完成三轮平行试验,用来抵消日间操作波动带来的影响。
样品顺序随机化,检查人员不知道真值,逐人、逐轮、逐样品登记判定结果。
四、怎么算通过
判定标准只有一条:当所有人员都能正确识别出VRL浓度的加标脏污替代物表面时,资质确认才算通过。
落到数值上,Kappa大于0.90算优秀,0.75到0.90可接受,0.40到0.75是边缘、必须整改,小于0.40不合格、立即停用。
说明一句:这套门槛来自AIAG MSA第四版的行业通行判据,不是药典强制规定。
五、三个最容易做错的地方
一是只做一轮就放行,日间波动没抵消,结果不可复现。
二是样品只有脏和净,缺假阳性对照样,训不出区分水痕与残留的能力。
三是只看人与人的一致,漏了重复性——同一个人今天明天判得都不一样。
资质确认不是考一次试,是证明这个人每次都判得准。
后台回复回复AAA,领人员资质确认Excel模板。
目视检查资质确认规范 (8)如何对目视检查人员进行资质确认?
来源:OurGMP · mp.weixin.qq.com