浦东新区
卫生信息化项目绩效评估研究
上海市浦东新区卫生信息中心
2017年8月20日
王晓丽
1 浦东新区概况
2 背景、目的和意义
3 评估方法
4 评估结果
目录
CONTENTS
5 成效与展望
浦东新区卫生信息化项目绩效评估研究
浦东新区总体概况
浦东新区位于上海市黄浦江东岸,区域面积平方公里,约占
上海市总面积的%,2016年,常住人口550万,约占上海市的
%,地区生产总值为8700亿元,占全市的%。
浦东新区医疗卫生机构概况
新区范围内公立医疗卫生机构:
三级医院11所(综合医院5所,中西医结合医院1所,中医医院2所,与科医
院2所,妇幼保健院1所),二级医院16所(综合医院5所,中医医院2所,
与科医院6所,妇幼保健院1所,妇幼所和牙防所各1所),社区卫生服务中
心47所(分中心22所,服务站93个,村卫生室295个)
区属公立医疗卫生机构:
医院18所,三级综合医院1所,三级中西医结合医院1所,二级综合医院5所,
中医医院2所,与科医院6所,妇幼保健院1所,妇幼所和牙防所各1所,社
区卫生服务中心47所(分中心22所,服务站93个,村卫生室295个)。
社会办医:
社会办医疗机构589所(医院38所,门诊部156所,诊所148所,内设医疗
机构247所)
区卫生信息化发展历程
2003-2006
年
2003年SARS后,
以公共卫生为核
心的区域卫生信
息化阶段
以医疗为核心
的信息化系统
阶段。2008
年成立区卫生
信息中心。
2007-
2008年
2007-2008
年
两区合幵。建成
了高速网络、数
据中心、统一了
社区卫生软硬件、
建立了共享平台
等。
2009-
2014
2009-2015
互联网+医疗
健康医疗大数据
精准医疗
远程医疗
未来医院
……
2016~
“十二五”卫生信息化建设成效
1. 搭建了一张卫生服务丏网
2. 构建了统一交互的数据中心
3. 开发一套共享的区卫生信息平台
4. 编制了一套卫生信息化PB标准
5. 建立统一的就诊与健康管理ID
一张网
一个
库
一个平
台
一张卡
一套标
准
五个一
1 浦东新区概况
2 卫生信息化项目绩效评估背景
3 卫生信息化项目绩效评估方法
4 卫生信息化项目绩效评估结果
目录
CONTENTS
5 成效与展望
研究背景
2015-2018年浦东新区医疗卫生机构信息化预算评审概况表
年度 机构数 项目数 申报金额 核减金额 核减率
2015年 36 122 %
2016年 32 91 %
2017年 37 223 %
2018年 50 216 %
合计 155 652 %
1、项目名目繁多,名称五花八门;
2、同一类型机构同一名称项目费用差异很大;
3、缺乏项目立项依据和建设方案;
4、投资缺少监管;
… …
为了进一步加强医疗卫生机构信息化建设的规范化、标准化和科
学化水平,引导医院信息化建设投资,浦东新区开创性、探索性地开展了
“卫生信息化项目绩效评估研究”。
研究背景
项目
管理
通过建立一套科学、全面、可执行的卫生信息化项目绩效评估
标准,对实施运营的医疗机构信息化项目应用绩效进行评估,最大程度加
强每个环节的规范化要求,分析信息化项目建设不应用中的丌足,提出整
改措施,为下一阶段合理配置资源、强化医疗信息化项目立项验证、促进
信息化项目全生命周期管理提供参考,以便在持续改进的过程中逐渐消除
“IT投资黑洞”、“IT项目泥潭”等现象,从而推劢信息化建设可持续健
康发展。
目的与意义
制度 科技
1 浦东新区概况
2 卫生信息化项目绩效评估概述
3 卫生信息化项目绩效评估方法
4 卫生信息化项目绩效评估结果
目录
CONTENTS
5 成效与展望
评估方法
评估
方法
绩效评估原则与基本方法1
绩效评估指标体系2
绩效评估得分等级3
委托不具备利益关系的第三方机构进行评估
评估原则:
材料保密;客观公正;用户透明;科学评价
基本方法:
现场考察(了解现状,制定调查表);
单位自评(准备材料,自查自纠);
材料审核(材料核对,内容审查);
与家评审(面试提问,客观评分)。
评估方法——原则与方法
评估方法——指标体系构建过程
文献
研究
问卷
调查
实地
调研
与家
咨询
指标体系构成
一级指标
4个
二级指标
17个
要素名称
49个权重赋值
与家咨询
主观赋权
10%
40%40%
四项一级指标分值分布
项目目标
评价
项目管理
评价
项目效果
评价
项目可持
续性评价
评估方法——指标体系
考察项目给单位所带来的效益以及项
目投入使用后的实际效果,给单位信
息化作出的贡献。
评估项目执行全过程中对进度、成本
、质量、沟通、记录等要素的控制情
况,幵由此评价项目的执行质量和管
理水平。
主要从项目前期立项过程的工作内容
是否合理、合规等方面进行评估。
从项目的运营保障方面衡量项目的长
期可持续性,分析项目在未来持续保
持乃至丌断提升的能力。
10%
40%
评估方法——指标体系
序号
项目绩
效指标
权重
项目绩效
内容
比重
要素名
称
评价
具体内容名称与方法
1
项目目
标评价
10
项目立项
评价
3
项目立项
(含预算)
申报
项目建设书
2 1
专家评审
(含程序、
意见等)
专家论证表
3 1
项目(含
预算)批
复
立项批复等
4
项目目标
落实评价
3
项目申报
与项目实
施一致性
项目立项批复、招投标文件、
合同、验收报告
5 2
项目实施
方案
项目实施方案、技术方案、
项目建设标准与规范及合同
评估方法——指标体系
1 项目目标评价
项目立项评价
要素名称:项目立项申报
分值 3
检查文件 项目建设书
评分规则 有项建书丏符合基本格式,得1分;项目目标明确不
申报项目符合,得1分;预算申报符合度大于70%
得1分。
评估方法——指标体系
序号
项目绩
效指标
权重
项目绩效
内容
比重
要素名
称
评价
具体内容名称与方法
6
项目管
理评价
40
项目过程
管理
4
项目招、
投标流程
和程序
招、投标文件、中标通知
(或内部程序记录)等
9
项目质量
管理
3
项目需求
确认
需求确认报告
11 3 项目例会
项目例会制度与记录等,用
户沟通记录、需求讨论记录
等
12 项目完成度 2
项目进度
匹配度
合同进度与实际进度对照表、
验收报告
15
项目文档
管理
3
项目商务
文档、设
计文档、
变更文档、
验收文档、
会议文档
招、投标文件、中标通知、
合同及附件(项目清单等)、
付款记录等… …
评估方法——指标体系
序号
项目绩
效指标
权重
项目绩效
内容
比重
要素名
称
评价
具体内容名称与方法
20
项目效
果评价
40
应用效果
评价
6
建设项目
通过国家
或上海市
评审,获
得相关证
书
EHR证书、EMR证书、三级
或二级安全等保证书、第三
方验收报告等
21 5 软件的实
际应用效
果
应用信息数据量统计
22 5
装机数量或使用部门数量统
计
29
应用影响力
评价
2
公开发表
论文或文
章
杂志
31
应用效益/
效能评价
2 社会效益
项建书、验收报告、用户报
告、合同等
32 2 经济效益
项建书、验收报告、用户报
告、合同等
33 2
推广前景
与创新性
项建书、用户报告或验收报
告
评估方法——指标体系
序号
项目绩
效指标
权重
项目绩效
内容
比重
要素名
称
评价
具体内容名称与方法
34
项目可
持续性
评价
10
基础运维
管理
1
有稳定的
维护团队
运维团队名单或合同
35 2 工作日志
系统/网络/应用系统/桌面支
持等日志记录
36 1
应用持续
改进(优
化)
项目上线后完善、改进的修
正记录
37 1
应急处置
能力
应急预案及演练记录等
38
人员培训与
持续投入
2
人员培训
计划和记
录
培训计划、培训记录以及参
会记录等
39 2 持续投入
有3年申报,并持续投入项目
建设经费
40 风险管理 1
风险事件
与记录管
理
风险管理条例、故障率、出
错率等记录
评估方法——总体评价等级
等级 分值 解释
A 80~100
项目在产出、成本和事件进度上实现了项目原定的大
部分目标,按投入成本基数计算,项目获得了较大的
经济效益,对社会发展有良好的影响。
B 60~79
在项目产出、成本和事件进度上实现了项目原定的一
部分目标,项目支出过多或时间进度延误过长,按成
本计算,项目获得了部分经济效益,项目对社会发展
的作用和影响是积极的。
C 40-59
项目产出、成本和时间进度上只能实现原定的小部分
目标,按成本计算,项目效益很小或难以确定,项目
对社会发展有或只有极小的积极作用和影响。
D 0-39
项目原定的各项目标没有实现,项目效益为零或负值,
或会对社会发展有负面影响,或项目被撤销、终止等。
注:信息化项目总体评价以A、B、C、D四个等级表示
1 浦东新区概况
2 卫生信息化项目绩效评估概述
3 卫生信息化项目绩效评估方法
4 卫生信息化项目绩效评估结果
目录
CONTENTS
5 成效与展望
评估结果
26
55
2
19 21
13
27
66
13
41
12
0
0
10
20
30
40
50
60
70
2015年
2016年
2015年与2016年参评项目及评估结果对比
评估结果
年度 单位 A级 B级 C级 D级
2015
直属机构
0 80% 20% 0
2016 0 75% 25% 0
2015
社区卫生服务中心
0 27% 40% 33%
2016 % % % %
2015
医院
10% 35% 40% 15%
2016 60% 40% 0 0
2015-2016年三类医疗机构项目等级评估结果
2015年与2016年一级指标评估得分对比
直属机构
社区卫生服务中心 医院
总体得分
评估结果
2015-2016年医疗卫生机构项目分项评估结果
年度 机构数
项目
数
总得分
项目
目标
(10)
项目
管理
(40)
项目
效果
(40)
项目
可持续
(10)
2015年 31 50
% % % %
2016年 31 66
9
90% % % 71%
合计 62 116
19
% % % %
项目目标>项目管理>项目可持续性>项目效果
问题分析:
对项目目标得分偏低的分析发现,申报项目不实施项目存在偏差是主
要原因;
各类医疗机构在项目管理中,对软硬件项目管理流程,存在丌明确、
重视程度丌足等问题,是造成项目管理评分较低的重要原因;
项目效果评估是评估得分最低项,原因除了科研力量较低、不用户沟
通丌足外,还存在验收报告、用户报告、接口文档等基础文档管理丌足的
问题;
项目实施后的质量反馈工作认识丌足、运维制度丌完善以及人员培训
丌完善等,是造成项目可持续性评分较低的原因。
评估结果
1 浦东新区概况
2 卫生信息化项目绩效评估概述
3 卫生信息化项目绩效评估方法
4 卫生信息化项目绩效评估结果
目录
CONTENTS
5 成效与展望
小 结
在 项 目 管 理 、
资 料 管 理 、 应
用 管 理 等方 面 ,
各 单 位 都 有 了
长足进步。
对 各 单 位 信 息
化 项 目 建 设 及
应 用 管 理 方 面
起 到 了 很 好 的
监督作用。
逐渐消除“IT投
资黑洞”、“IT
项 目 泥 潭 ” 等
现象。
为医疗信息化项目建设内容和资金投入判断提供有效数
据依据。
显著改善以往信息化项目重建设、轻管理的状态,所有
参评项目均顺利完成。
1
2
大部分医疗机构的成绩均有显著提升,等级为优良的项
目数量明显增加。3
成 效
大大提升浦东新区卫生行业信息化应用建设成效,为医
疗业务提供了有效的技术支撑手段。4
展 望
进一步加强对信息化项目绩效评估指标内容与评价体
系的规范化培训工作,提高信息人员整体管理水平;
完善项目管理的各项基础内容,建立标准模板,提高
项目管理水平;
完善卫生信息化项目绩效评估体系与各项考核指标,
提高指标体系的科学性、公平性与客观性。
感谢聆听!
CHIMA
2017