我院处方点评软件的应用性评价

2015-03-09 14:48蔡琳玲陈燕华葛卫红南京大学医学院附属鼓楼医院药学部南京0008东南大学附属中大医院药学部南京0009
中国药房 2015年31期
关键词:不合理灵敏度药师

汪 浩,蔡琳玲,陈燕华,葛卫红(.南京大学医学院附属鼓楼医院药学部,南京 0008;.东南大学附属中大医院药学部,南京 0009)

原卫生部为规范医院处方行为,要求医院建立处方点评制度,通过对处方书写的规范性及药物临床使用的适宜性进行评价,发现存在或潜在的问题,制订并实施干预和改进措施,用以提高临床药物治疗学水平[1-2]。但对医院药学部门来说,日常的药品供应与调剂工作强度给药师带来的负荷已经很大,因此,这项工作总是令药师疲于应付。随着信息化水平的不断提高,部分医药软件公司根据原卫生部的上述要求研发了基于医院信息系统(HIS)的控件嵌入式软件,使药师可借助软件进行相关工作,缩减了以前耗时费力的手工分拣处方的工作,同时实现随机化的、更科学的处方抽取方式。但由于这些软件的逻辑算法比较单一,后期的升级费用较为昂贵,以及数据库中大量信息需要维护,造成这些软件的实用性降低。笔者拟应用筛检试验的方法对我院使用的处方点评软件进行应用性评价,评价其真实性及可靠性,从而为后续处方点评软件的改善及优化提供参考信息。

1 资料与方法

1.1 点评软件

临床用药决策支持软件(上海大通医药信息技术有限公司,版本号V1.2.02)。

1.2 处方数据

利用“临床用药决策支持软件”(以下简称软件)随机抽取本院门诊2014年9-10月600张处方。

1.3 纳入标准

处方前记、正文、后记等内容均完整、无缺项。

1.4 排除标准

(1)退药处方;(2)草药处方;(3)做CT、MRI所需造影剂处方;(4)做胃镜所需局部麻醉药处方;(5)做肠镜所需泻药处方;(6)静脉输液中缺少溶剂的处方。

1.5 点评处方数据

排除48张处方,实际有效处方552张。

1.6 研究方法与统计学分析

1.6.1 一致性检验 由两位相同学历、相同年资的药师共同完成,采用双盲法研究。先将纳入的处方数据随机编号,分别交给两位药师。甲、乙两位药师均为三级甲等医院药房药师,其中甲药师兼职处方点评工作,乙药师则专职窗口调剂工作。甲、乙两位药师在无任何信息提示的情况下,分别在相同时间、相同条件下对552 张处方进行独立点评,对处方是否合理进行评判,将判断结果录入表格。4周后甲药师再重复对这552张处方进行点评,用于评价甲药师的一致性。将甲药师第一次的点评结果称为初评结果,第二次的点评结果称为再评结果。分别对乙药师点评结果与软件点评结果、软件点评结果与甲药师初评结果、甲药师初评结果与乙药师点评结果的一致性进行Kappa 一致性检验。以Kappa 值>0.80 表明一致性的强度为最强,0.60<Kappa值≤0.80表明具有高度一致性,0.40<Kappa 值≤0.60 表明具有中度一致性,Kappa 值≤0.40表明一致性差[3]。

1.6.2 效度评价 软件的算法逻辑一旦确定,该软件的灵敏度和特异度即确定,若想进一步提升处方筛选的灵敏度和特异度,可采用联合试验的方法,即进行系列试验(两个主体对处方的判定结果均为合理才算合理处方,其中一个主体判定为不合理即为不合理处方)和平行试验(两个主体对处方的判定有一个主体认为合理即为合理处方,均判定为不合理才为不合理处方)。以甲药师的初评结果作参照,分别将软件的点评结果、乙药师的点评结果以及乙药师与软件进行联合试验的点评结果与其比较,计算出软件、乙药师以及联合试验的灵敏度(Sensitivity)、特异度(Specificity)及约登指数(Youden index)。其中,灵敏度=(两者共同判定为不合理的处方数/甲药师初评判定的不合理处方数)×100%;特异度=(两者共同判定为合理的处方数/甲药师初评判定的合理处方数)×100%;约登指数=(灵敏度+特异度)-1。

1.6.3 信度检验 将甲药师的再评结果与初评结果进行比较,计算Kappa值。

1.6.4 统计学检验方法 对处方点评结果的数据比较使用χ2检验,P<0.05为差异有统计学意义。

2 结果

2.1 一致性

将甲药师对552张处方的初评结果分别与乙药师、软件的点评结果比较并计算Kappa值,结果:(1)乙药师与软件点评结果比较,两者同时判定为不合理的处方数为69张,软件判定为合理而乙药师判定为不合理的处方数为34 张,软件判定为不合理而乙药师判定为合理的处方数为299张,两者均判定为合理的处方数为150 张,计算得Kappa=0.002 0,差异有统计学意义(P<0.001),表明两者点评一致性差。(2)甲药师初评结果与软件点评结果比较,两者同时判定为不合理的处方数为70张,软件判定为合理而甲药师判定为不合理的处方数为40张,软件判定为不合理而甲药师判定为合理的处方数为298 张,两者均判定为合理的处方数为144 张,计算得Kappa=0.020 2,差异有统计学意义(P<0.001),表明两者点评一致性差。(3)甲药师初评结果与乙药师点评结果比较,两者同时判定为不合理的处方数为93 张,乙药师判定为合理而甲药师判定为不合理的处方数为17 张,乙药师判定为不合理而甲药师判定为合理的处方数为10张,两者均判定为合理的处方数为432张,计算得Kappa=0.843 0,差异无统计学意义(0.1<P<0.25),表明两者点评一致性强。

2.2 效度

软件、乙药师以及联合试验的灵敏度、特异度及约登指数结果见表1。

表1 效度评价结果Tab 1 Results of validity evaluation

由表1可以看出,该软件灵敏度、特异度均较差(理想的灵敏度、特异度应该为100%);平行试验灵敏度较高,特异度无明显变化,Kappa=0.130 2,差异有统计学意义(P<0.001),与甲药师的初评结果相比一致性差;系列试验则在灵敏度稍降的同时特异度大幅提高,Kappa=0.610 6,与甲药师的初评结果比较差异有统计学意义(P<0.005),但其能够将实际上合理的处方更多地筛选出来,这是其Kappa值提高的原因。在两个试验中,以甲药师的初评结果作参照,约登指数均有不同程度的提高,但均未超过乙药师点评的结果。

2.3 信度

将甲药师的再评结果与初评结果进行比较,甲药师初评与再评同时判定为合理的处方数为440张,初评为合理但再评为不合理的处方数为2张,初评为不合理但再评为合理的处方数为3 张,两次均判定为不合理的处方数为107 张。计算得Kappa=0.971 4,表明甲药师初评与再评结果具有一致性,按照评价原则,点评一致性最强,差异无统计学意义(0.5<P<0.75)。

3 讨论

Kappa 值是评价不同主体之间对相同处方进行合理性判定的一致性指标,常常采用两两比较的方法,由于其考虑了机遇因素对一致性的影响并加以校正,从而提高了判定的有效性[3]。

目前,建立处方点评制度、开展处方点评已经成为医疗机构的一项重要工作,尤其是在近几年的医院等级质量评估检查中,处方点评越来越成为一项重要的考核指标[4]。“临床用药决策支持软件”中的处方点评模块可用于我院药学部门对门、急诊处方进行点评,相较以往的手工点评模式,可以减轻药师的工作量、提高工作效率和管理效能[5],对促进临床合理用药起到了积极的作用,但目前尚缺少对点评软件进行应用性评价的相关文献。本研究应用筛检试验的方法对我院使用的处方点评软件进行应用性评价,评价其真实性及可靠性,为处方点评软件的改善及优化提供了参考信息。

由于该软件的算法编程与逻辑判定是由专业的软件工程师编写,药师很难参与其中进行深度研发,其灵敏度、特异度均较低,不仅不容易将不合理的处方筛选出来,而且更容易将处方判定为不合理而形成误判。点评药师往往需要针对软件的判定结果进行分析、整理,剔除错误数据后再进行点评,使软件整体的真实性较差,这与李勤等[6]的使用评价结果一致。笔者通过将乙药师的点评结果与软件的点评结果进行联合,模拟医院药师在一线调剂窗口结合软件审方、核对的过程,结果发现药师与软件的联合并不能有效提高审方灵敏度及特异度,特别是对药品的适应证与临床诊断相符性的判断准确性差,导致软件点评的假性不合理处方增加,不仅增加了一线药师的工作量,还容易分散其注意力导致调剂差错。

到目前为止,大多数医院所安装的点评软件大多只是作为实时调取用量、在线抽取处方、生成统计报表等的工具[7],未能发挥其最重要的在线预警与回顾筛查的功能。其中,软件的智能性不高、综合处理用药信息的能力比较差是其中一个重要原因。如果能在软件的设计、开发、实施和运营中强调药师的主导作用[8],重视计算机程序对处方用药适宜性审核的保证作用[9],可使点评结果更具可信度,最终实现动态监测[10],提高医务人员的合理用药及诊疗水平。

[1]卫生部.处方管理办法[S].2007-02-14.

[2]卫生部.医院处方点评管理规范:试行[S].2010-02-10.

[3]徐飚.流行病学基础[M].上海:复旦大学出版社,2011:157、159.

[4]李亚昙,林伊梅.我院2013 年门急诊处方点评及不合理用药分析[J].中国药房,2015,26(8):1 050.

[5]古今,蔡乐.利用医院信息系统加强处方点评工作[J].中国药业,2012,21(2):58.

[6]李勤,唐修芳,刘基炎.临床用药决策支持软件对门诊处方监测结果的分析[J].上海医药,2014,35(16):14.

[7]宁俊红,吴志刚,张若梅.利用信息技术进行处方点评[J].药学服务与研究,2010,10(6):474.

[8]刘皈阳.产品化的PIS,医院药学信息化的整体解决方案[J].中国信息界:e医疗,2014(9):52.

[9]朱亚兰,包云光,郭佳奕,等.我院处方点评模式构建与实践[J].中国医药导报,2014,11(8):158.

[10]赵育新,李达,胡欢.以合理用药动态监测为例浅析一般管理决策的实现过程[J].医疗卫生装备,2013,34(7):95.

猜你喜欢
不合理灵敏度药师
药师“归一”
基于机电回路相关比灵敏度的机电振荡模式抑制方法
药师带您揭开华法林的面纱
基于灵敏度分析提升某重型牵引车车架刚度的研究
我院2018年抗生素不合理处方分析
复合数控机床几何误差建模及灵敏度分析
穿甲爆破弹引信对薄弱目标的灵敏度分析
向“不合理用药”宣战
一张图揭发公务员工资制度
药师与患者间沟通的实践与思考