2017 年安全生产资格考试考核经费绩效评价报告.pdf
2017年上海市 安全 生产 科学研究所 财政支出 绩效 评价报告 项目名称: 2017年 安全生产资格考试考核经费 预算 单位: 上海市安全生产科学研究所 主管部门 : 上海市安全生产监督管理局 委托单位:上海市安全生产科学研究所 评价机构:上海浩丞管理咨询有限公司 二零一 八 年 六 月 二十 五 日 目 录 一、项目基本情况 . 1 (一)概况 . 1 1、项目设立背景 . 1 2、项目设立目的 . 2 3、项目资金及使用情况 . 2 4、项目管理情况 . 5 5、项目实施情况 . 11 (二)绩效目标 . 14 1、总目标 . 14 2、年度目标和绩效目标 . 14 二、绩效评价工作情况 . 15 (一)绩效评价目的 . 15 (二)绩效评价原则、依据 . 16 1、评价原则 . 16 2、评价依据 . 16 ( 三 )评价 方法和实施过程 . 17 1、绩效评价工作方案制定过程 . 18 2、数据采集方法及过程 . 18 3、绩效评价报告形成过程 . 19 三、评价结论和绩效分析 . 19 (一)评价结论 . 19 (二)绩效分析 . 20 1、项目决策 . 20 2、项目管理 . 21 3、项目绩效 . 23 四、主 要业绩和经验 . 28 五、存在的问题和建议 . 29 (一)存在的主要问题 . 29 (二)建议和改进措施 . 29 1 2017年 安全生产资格考试考核经费 财政支出 绩效评价报告 根据 市财政局对市级预算单位 开展专项 支出绩效评价 的工作 要 求,受上海市安全生产科学研究所委托,上海浩丞管理咨询有限公 司对 2017年度“安全生产 资 格考试考核 经费”项目进行绩效评价。 一 、 项目基本情况 (一) 概况 1、项目设立背景 项目主要依据安全生产培训管理办法(国家安全生产监督管 理总局令第 44 号)、安全生产资格考试与证书管理暂行办法(安 监总培训 2013104 号)、特种作业人员安全技术培训考核管理规 定(国家安全生产监督管理总局令第 30 号)、上海市安全生产条 例等文件要求而设立,实施内容是为特种作业人员、 高危行业生 产、经营单位主要负责人及安全生产管理人员 提供上海地区的考试, 并对考试合格人员发放相关证书。 特种作业是指容易发生人员伤亡事 故,对操作者本人、他人及 周围设施的安全有重大危害的作业,直接从事特种作业的人员称为 “特种作业人员”。目前上海市安全生产监督管理部门所承担的考核 发证的特种作业工种主要有电工作业(低压电工、防爆电气)、焊接 与热切割作业、制冷与空调作业、高处作业等。根据相关规定,上 述特种作业人员必须经过专门培训,并取得特种作业资格方可上岗 作业,特种作业操作证每 3年须复审 1次。 高危行业包括非煤矿山、危险化学品、金属冶炼等行业。近年 2 来,部分高危企业生产安全事故时有发生,暴露出企业主要负责人 及安全管理人员 的 安全生产管理知识欠缺,安全 生产意识不强,安 全管理能力不足。为进一步推动高危企业落实安全生产主体责任, 严格规范高危行业企业主要负责人和安全管理人员安全生产知识、 管理能力考核,国家安全监管总局提出“高危行业生产、经营单位 主要负责人和安全生产管理人员必须经安全生产培训、考核合格”。 本 项目设立程序符合上海市财政局对部门预算和专项资金的立 项要求,项目预算单位为上海市安全生产 科学研究所 ,经申请已取 得 2017年度预算批复 ,项目资金专门用于安全 生产资格考试 相关的 考核 费用支出 。 2、 项目设立目的 项目设立的主要目的是 为了规范特种作业 及 高危行业生产、 经 营单位主要负责人及安全生产管理人员 的安全技术考核工作, 通过 建立 和完善必要的考核环节 ,保障从业人员能具备 必要 的 实务知识 和操作 技能, 提高作业 及管理 人员的 安全意识和 安全技术水平, 从 而尽最大可能地 预防 伤亡事故。 3、项目资金及使用情况 ( 1)经费来源、用途、支付方式 项目经费由 市 级 财政 承担 , 主要用于特种作业人员、 高危行业 生产 、 经营单位主要负责人 、 安全生产管理人员 相关的考核费用及 农民工证书采购费 。根据支出内容的不同,有两种拨付方式。 其中 属于政府采购范围的,经过招投标 (或集市采购) 流程签订合同后, 由财政 直接拨付; 其他 费用 由预算单位自主拨付,即根据实际使用 3 需求,经内部付款审核后,自行对外拨付 。 ( 2) 2017年预算安排及执行情况 2017年度 预算 总额为 1,126.37万元, 实际支出 1,089.03万元 , 预算执行率 96.68%。 表 1 2017年度预算及执行情况表 (单位: 万 元) 序 号 子项目 年初预算 预算调整 比重 实际支出 预算 执行率 预算 调整率 1 特种作业考核费 1,056.45 1,035.45 91.93% 1,004.96 97.06% -1.99% 2 危 化安全干部考核费 64.92 85.92 7.63% 79.80 92.88% 32.35% 3 农民工证书采购费 5.00 5.00 0.44% 4.26 85.30% 0.00% 合计 1,126.37 1,126.37 100.00% 1,089.03 96.68% 0.00% 说明 : 特种作业考核 (单位:万元) 序 号 支出内容 年初预算 预算调整 比重 支出金额 执行率 预算 调整率 1 考核费用 900.00 879.00 84.89% 859.66 97.80% -2.33% 2 证书制作费 74.80 74.80 7.22% 65.38 87.41% 0.00% 3 设备购置 1.40 1.40 0.14% 0.00 0.00% 0.00% 4 其他支出 80.25 80.25 7.75% 79.92 99.60% 0.00% 合计 1,056.45 1,035.45 100.00% 1,004.96 97.06% -1.99% 考核费 : 即 考点 费用 ,是指在电工作业和金属焊接与热切割作 业两项理论考试 和实际操作考 试, 支付给各 特种作业(电工、焊工) 考试点 , 支付标准为 60元 /人 /次 , 支付 数量按照考试人次计算,资 金按 月 结算 拨付 。 2017 年考核费用实际结算期为 2016 年 12 月至 2017年 11月。考核费预算与执行差异是由于年度报名考试人次存 在不确定性,无法完全准确估算造成。 证书制作费 : 指制证过程中消耗 的 主要素材,包括 IC 卡和打 印耗材, 采用 集中采购 方式购入 。 4 设备购置 费 : 指 用于制证的打印 设备, 本年计划购入 IC 卡 打 印 机 一台,因招投标发生流标,故未予执行 。 其他支出 : 指与本项目相关的其他费用, 包括 项目 制证耗材、 绩效评价 、 考试系统 技术服务 、考场维护费等 。其中绩效评价 、系 统技术服务因单价未达 20万而 采用三方比价 甄选供应商,考场维护 采用 招投标方式甄选供应商。 说明: 危化安全干部考核 (单位:万元) 序 号 支出内容 年初 预算 预算 调整 比重 支出 金额 执行率 预算 调整率 1 考点考核费 60.00 81.00 94.27% 76.17 94.04% 35.00% 2 安全干部证书制作费 3.00 3.000 3.49% 2.48 82.74% 0.00% 3 其他支出 1.92 1.92 2.23% 1.15 59.77% 0.00% 合 计 64.92 85.92 100.00% 79.80 92.88% 32.35% 考核费 :即 考点费用,是指在高危行业生产、经营单位主要负 责人及安全生产管理人员理论考试 , 支付给各 高危行业 安全生产资 格考试 点 计算机考场 的 费用,支付标准为 50元 /人 /次,支付数量按 照考试人次计算,资金按月结算拨付。 2017年考核费用实际结算期 为 2016 年 11 月至 2017 年 11 月。考核费预算与执行差异是由于 年度报名考试人次存在不确定性,无法完全准确估算造 成。 证书制作费 : 指制证过程中消耗的主要素材,包括 IC 卡和打 印耗材, 采用集中采购方式购入。 其他支出:指与本项目相关的其他费用,主要是制证耗材 , 按 实际发生 额 申请拨付。 5 说明:农民工证书采购 (单位:万元) 序号 支出内容 年初预算 预算调整 比重 实际支出 预算 执行率 预算 调整率 1 农民工证书采购费 5.00 5.00 0.44% 4.26 85.30% 0.00% 证书采购费是指 农民工证书的制作采购费用,通过公开招投标 完成采购并按照合同约定 拨付资金。 ( 3)近三年 项目 预算及 支出 情况 表 2. 2014-2016 项目预算及支出情况表 ( 单位: 万元 ) 所属 年份 年初预算 批复金额 年度预算 调整数 年终预算金额 实际支出数 执行率( %) 2014 1,285.70 -1,75.05 1,110.65 857.19 77.18% 2015 1,209.95 1,209.95 867.91 71.73% 2016 1,075.28 1,075.28 7,76.91 72.25% 相比以前年度, 2017年项目预算管 理和 执行率方面有很大 提高。 4、 项目 管理 情况 项目实施多年,管理方面积累了一定的工作经验,已形成了 常态化的操作模式。项目组织管理架构和主要制度、措施如下: ( 1)组织分工 项目主要涉及三个职能部门,自上而下 形成 直线型管理 模式 : 6 上海市安全生产监督管理局是项目主管单位,主要职责 是政策解读、监管指导、对市区考试机构(考试点)资格管理。 上海市安全生产科学研究所是项目预算和实施部门,亦 是市安监局授权的市级考试机构。主要职责是全面落实上海市区 域内的安全生产考试管理工作,并对考试点进行业务指导和监督 管理。日常考核发 证工作开展由市安科所考核发证室主持,具体 包括考试工作流程制定、考试日程安排、远程监考和质量监管、 制证发证管理等方面。 考试点主要负责执行日常考试工作,包括考前资料准备、 考生信息核对、考场监考人员安排、考场秩序维护和考试情况上 报等,目前全市共有 23 个考试点, 其中特种作业(电工、焊工) 考试点为 12个。 ( 2)制度情况 本项目是根据国家安全监管总局和上海市安全生产监督管理 局相关文件设立的,项目制度主要以国家 、 市安监局发布的 制度 文件为标准和实施依据。同时,结合实际操作和业务管理需求, 市安科所进行了细化、补充和完善, 形成了 适用本市 的操作流程 和实施 规范 ,内容涵盖安全生产考试报名、考场管理、领证发证、 专项资金管理等活动环节。目前执行中的制度主要有: 业务管理方面 特种作业人员安全技术培训考核管理规定( 国家 安全生产 监督管理总局令第 30号) ; 7 安全生产培训管理办法( 国家 安全生产监督管理总局令第 44号); 安全生产资格考试与证书管理暂行办法(安监总培训 2013 104号) ; 上海市安全生产培训考核考场规则、上海市安全生 产培训考核监考人员职责(上海市劳动保护科学研究所 沪劳科 所 2005 14号) 上海市 特种作业人员安全生产资格考试点管理办法(上海 市安全生产科学研究所编写) 考核发证室工作流程(上海市安全生产科学研究所 考核发证室) 市安全监管局关于进一步做好本市安全生产培训考试 考核工作的通知沪安监宣培【 2016】 31号 资金管理 方面 上海市物价局、市财政局关于核定本市部分特种作业人员安 全技术考试费等有关问题的通知 ( 沪价费 2008 001号 ) ; 上海市安全生产科学研究所财务管理制度(上海市安 全生产科学研究所 2010.8.9 制定)(包含:预算管理制度、预 算资金和专项资金管理制度) ( 3) 主要 实施标准 和考核发证流程 考核 的 对象 、内容和 方式 特种作业考核 : 主要 针对 电工作业、焊接与热切割作业 等 2 项 8 工种开展, 制冷与空调作业以及 高处 作业尚没有考核费。 考试类型 分为理论考试和实际操作考试, 两个模块 均通过者认定为考试合格, 方可发放证书。 其中, 由于落实了考核费, 目前电工作业和焊接与 热切割作业 理论考试 采用了计算机无纸化考试, 实际操作考试分为 计算机考试和实际操作 ,但是 制冷与空调作业和 高处 作业 理论考试 仍旧采用纸质考试。 高危行业安全干部考核 : 目前 主要针对 危险化学品 生产、经营 单位主要负责人及安全生产管理 人员安排考试发证, 考试类型为理 论考试, 全部 采用计算机无纸化考试。 农民工证书采购与发放: 主要针对农民工发放的免费证书, 目 的是 提高安全意识。发放途径由培训机构组织人员派发 ,市安科所 根据申请清单发放至各培训机构,由培训机构下发给申请人。 考核发证 一般流程 目前,考试流程已基本实现信息化、无纸化,考试报名、考 试日程安排、考场分派、考试成绩公布、发证通知等工作全部通 过“上海市安全生产资格考试管理系统”统一网上操作和管理。 实施流程如下: 9 考试报名:由各培训机构登陆网上系统,进行考试报名 登记; 考试安排:由考试系 统自动编排,生成考试日期、考场 场次; 现场考试:统一采用计算机机考,考题随机生成。各考 点指派专门人员负责现场监考;市安科所对各考场考试情况实施 远程视频监控并录像,以协助现场监考人员公共维护考场秩序。 发现有考场违规情况的立即电话通知现场监考人员进行及时处 置。考试结束后,监考人员需做好考场记录和视频监控记录。 考试成绩公布:考试结束后当场公布考试成绩; 通知发证:通过考试成绩合格人员,自考试成绩公布 20 个工作日后,通知发证,领证工作由各培训机构代办。 考题配置和考试合格标准 计算机机考环节采用的考题 初训约 80%来源国家题库、 约 20% 来源于上海市题库, 复训约 50%来源国家题库、约 50%来源于上海 市题库, 考题类型为是非题、单项选择题、多项,考试时间为 100 分钟,满分为 100 分, 80 分以上为合格。考试不合格的允许当场 补考一次。 考试机构资质和设备配置标准 2017年全市共有考试点 23个,应具备的设施、设备标准如下: 配备不少于 5 名考务工作人员 办公场所面积不少于 40平方米 10 设置不少于 1 个计算机考试考场,每间计算机考场要求 至少安装两台网络摄像头,同时接入国家监控平台,网络接入应 当配备不小于 2 兆的光纤;考试用计算机不少 于 30台 设置公示板,公布考试点管理规定、考试规则、考试科 目时间表、考生注意事项等 考试违纪管理标准 考生违反考试纪律行为 考生违纪行为是指携带违禁物品进入考场、吸烟喧哗、未经 允许离开考场、考试期间各种作弊行为、伪造证件、冒名顶替等。 考生有上述违反考试纪律行为的,视其情节、后果,分别予 以口头警告、责令离开考场并取消本考场考试成绩、一年内不得 报名参加考试,并在一定范围内公告。 监考人员违反考试纪律行为 监考人员违纪行为是指:擅自改变考试开始或结束时间、纵 容或参与他人作弊、未认证履行职责造成考场秩序混乱或出 现较 大范围作弊、利用考试工作之便索贿、受贿等。 监考人员有上述情形的,停止其参与考试工作,并视情节轻 重给与或者建议所在单位给与相应处分,直至开除或者解聘;构 成犯罪的,依法追究刑事责任。 考试点违反考试纪律行为 11 考试点违反考试纪律行为是指:以不正当手段协助他人取得 考试资格;未认真履行职责,考场存在安全隐患,考试准备工作 不到位;协助考生作弊、参与考场内外串通作弊等。 考试点有上述情形,视情节轻重给与警告并责令改正,直至 取消考试点考试资格,构成犯罪的,依法追究相关人员刑事责任。 考场 监考人员职责 监考人员由考试 点安排,监考时佩戴统一制发的工作证 件 严格执行考试程序,严肃考场纪录,发现异常情况要及 时处理并报告考试机构 严格核查考生准考证及规定的其他证件 监督考生按规定考试,制止考试违纪行为 考试结束,组织核对、纪录和整理考试情况 5、项目实施情况 ( 1)年度总体计划 安排 与 工作 落实情况 与项目有关的特种作业、高危行业安全干部考核均按照考核发 证流程循序渐进开展,进度安排和执行情况汇总如下: 序 号 主要环节 业务描述 计划进度安排 执行情况 评价 说明 1 考试报名 网上报名、资格审核 1-12月循序开展 好 由培训点代理网上申请, 资格审核后予以报名,手 续规范,执行良好 2 考试准备 考试日期、考场次确定 1-12月循序开展 好 系统安排,执行良好 3 考试 监考、视频远程监控、巡考 1-12月循序开展 好 监考和视频监控按考场次执行良好 4 发证 制证和发证 1-12月循序开展 好 按时制作( 10天内完成),及时发证,执行良好 12 ( 2) 子项目完成业绩情况 特种作业考核 发证工作 2017年计划完成 15万人员 的考核发证工作, 实际当年度接受考 试报名 217,262人,参加考试 204,572人 ,考试通过 181,546人, 按 规定( 10 日) 完成考核发证 160,796 人。实现年度考核发证人次计 划完成率 107.2% ( 160,796/150,000 )、 参 考 率 94.16% ( 204,572/217,262)、考试通过率 88.74%( 181,546/204,572)。 高危行业 安全干部考核 发证工作 2017 年 计划 完成 1.2 万人员的考核发证工作, 实际当年度接受 考试报名 15,626 人,参加考试 13,297 人 ,考试通过 11,473 人, 按 规定( 10日) 完成考核发证 11,398人。实现年度考核发证人次计划 完成率 94.98%( 11,398/12,000)、参考率 85.10%( 13,297/15,626)、 考试通过率 86.28%( 11,473/13,297)。 农民工证书采购 与发放 工作 按计划 完成 证书采购,当年度按需发放 52,750本,期末库存尚 有结余证书近 30万本。 13 表 3. 2017年度安全生产考核发证情况明细表 项 目 与数量 特种作业(人次) 危化生产单位、经营单位 农民工培 训(人次) 电工 作业 金属焊 接与热 切割作 业 制冷与 空调作 业 登高作业(人 次) 小计 危化生 产单位 负责人 危化生 产单位 安全管 理人员 危化经营 单位负责 人 危化经营 单位管理 人员 小计 电力登 高 墙面 清洗 架子 工 井架 拆装 施工升 降机拆 装 小计 01月份 4,624 3,678 462 858 161 246 16 - 1,281 10,045 12 66 167 253 498 1,244 02月份 1,926 666 40 351 40 - - - 391 3,023 1 43 110 132 286 718 03月份 5,889 4,885 816 429 420 714 - 27 1,590 13,180 50 216 447 637 1,350 2,650 04月份 6,583 4,665 558 912 392 565 - 22 1,891 13,697 40 162 380 583 1,165 6,877 05月份 7,581 5,142 948 1,539 152 614 6 - 2,311 15,982 53 217 374 501 1,145 6,799 06月份 7,504 6,468 713 1,034 630 419 9 - 2,092 16,777 35 228 435 586 1,284 8,839 07月份 8,078 6,572 812 1,320 222 498 - 25 2,065 17,527 40 208 319 406 973 4,642 08月份 5,831 4,431 546 743 366 536 - - 1,645 12,453 23 145 275 372 815 9,678 09月份 7,356 5,499 506 808 466 293 - - 1,567 14,928 50 135 398 513 1,096 2,076 10月份 6,818 4,500 626 523 165 352 - - 1,040 12,984 19 79 104 203 405 3,478 11月份 7,260 5,683 787 648 469 380 21 16 1,534 15,264 55 192 412 720 1,379 2,972 12月份 7,970 4,899 527 988 296 256 - - 1,540 14,936 45 171 294 492 1,002 2,777 合计 77,420 57,088 7,341 10,153 3,779 4,873 52 90 18,947 160,796 423 1,862 3,715 5,398 11,398 52,750 14 (二)绩效目标 1、总目标 规范安全生产资格考试及证书管理工作,保障 从业人员能具备 必要的实务知识和操作技能,提高作业及管理人员的安全意识和安 全技术水平, 为全市安全生产工作提供基础保障 。 2、年度目标和绩效目标 按相关安全技术培训考核管理规定,落实特种作业、高危行业 生产、经营单位主要负责人及安全生产管理人员日常考 核的发证管 理工作, 2017年度特种作业考核发证人次预计为 15万人(电工作业、 焊接与热切割作业、制冷与空调作业、高处作业),高危行业生产、 经营单位主要负责人及安全生产管理人员考核发证人次预计为 1.2 万人。 围绕上述目标,市安科所结合绩效目标管理的思路,分别从 管理、产出、效果、社会评价和可持续性方面对目标进行分解和 细化,后经跟踪管理进一步梳理调整后最终形成了本项目 2017 年 度绩效指标。 表 4. 2017年度绩效指标 一级指标 二级指标 三级指标 指标解释 目标值 管理 目标 资金管理 预算执行率 预算资金执行的准确性 计算:预 算支出数 /调整后预算数 *100% 95% 资金使用合规 性 资金支出的合规性 100%合规 产出目标 特种作业考核 年度考核发证人次 年度目标的完成情况 15万人次 考官出勤率 考察应会考试考官到岗情况 100% 发证及时性 是否按规定时间,及时制证并发证 100%( 10 个工作日内 ) 15 一级指标 二级指标 三级指标 指标解释 目标值 计算机机考执行率 考试安排情况 100% 考点设施配置完整性 考察各区(县)考试中心设施配置是否达 到管理要求 100% 监考执行 率: ( 1)现场监考执行率 ( 2)远程监控执行率 ( 3)飞行检查执行率 监考人数的合规性以及监考工作的执行 情况。 100% 违纪案件处置率 对发现的违纪案件是否及时处置、合理处置 100% 危化安全干部考 核 年度考核发证人次 年度目标的完成情况 1.2万人次 发证及时性 是否按规定时间,及时制证并发证( 10个工作日) 100% 计算机机考执行率 考试安排情况 100% 监考执行率: ( 1)现场监考执行率 ( 2)远程监控执行率 ( 3)飞行检查执行率 监考人数的合规性以及监考工作的执 行 情况。 100% 违纪案件处置率 对发现的违纪案件是否及时处置、合理处置 100% 农民工证书采购 采购计划完成率 是否按计划完成采购工作 100% 采购及时性 是否按规定时间,及时完成采购 100% 验收合格率 验收入库合格情况 100% 效果目标 特种作业、危化 安全干部 考题配置达标率 考题配置是否达标,本市题库 80%、全国题库 20% 100%(本市 题库 80%、全 国题库 20%) 教考分离执行率 考试流程是否公允,符合考教分离要求。 100% 社会评价 考生满意率 考生 综合满意度 90% 影响力目 标 人员保障度 考官资格达标率 检查应会考试考官资格胜任能力 100% 信息化管理 从 业人员信息化管理率 特种作业从业人员信息化管理情况 100% 外部协作保障度 培训机构考试平均通过率 考察培训机构的协作能力 90% 二、绩效评价工作情况 (一)绩效评价目的 评价主要目的是反应项目 经费落实情况、考试执行管理情况和 16 执行效果。评价关注重点有 :( 1)资金的执行效率,资金的投入是 否必要,使用与管理是否合规;( 2)考试管理是否规范。考试方式 和考试流程设计是否科学统一,监考过程 是否有效,能否保证考试 结果的公允;市考试机构对考试点是否建立了必要的指导和监管; 对违反考场规定组织考试或参与取证的单位和人员,是否进行严肃 处理;( 3)项目效益是否得到体现,通过加强监管、规范考试管理, 特种作业和管理人员的安全意识和安全技术水平是否得到提高, 对 其日常主持安全生产管理工作是否有切实的帮助作用。同时,通过 绩效评价来总结经验和教训,发现亮点和问题,为今后进一步完善 安全生产资格考试与发证管理工作提供意见、建议和参考。 (二)绩效评价原则、依据 1、评价原则 根据财政部财政支出绩效评价管理暂行办法、 上海市财政 支出绩效评价管理暂行办法(沪府办发 20111 号)和上海市预 算绩效管理实施办法(沪财绩 201422号)相关规定, 本次绩效评 价秉承科学规范、公平公正、分级分类、绩效相关等原则,按照从 投入、过程到产出、效果和影响力的绩效逻辑路径,结合 2017年安 全 生产 考核经费项目的实际开展情况,运用定量和定性分析相结合 的方法,总结经验做法,反思项目实施和管理中的问题,以切实提 升财政资金管理的科学化、规范化和精细化水平。 2、评价依据 本次绩效评价所依据的主要政府文件包括: 17 关于印发 的通知(沪财绩 201422号) 安全生产培训管理办法(国家安全生产监督管理总局令第 44号); 国家安全监管总局关于废止和修改劳动防护用品和安全培 训等领域十部规章的决定(国家安全生产监督管理总局第 80号令) 安全生产资格考试与证书管理暂行办法(安监总培训 2013 104号); 上海市安全生产培训考核考场规则、上海市安全生产培训 考核监考人员职责(上海市劳动保护科学研究所 沪劳科所 2005 14号) 上海市特种作业人员安全生产资格考试点管理办法(上海 市安全生产科学研究所 编写) 考核发证室工作流程(上海市安全生产科学研究所 考核发 证室) 关于规范本市安全生产培训收费行为的通知(沪安监管法 规 200849号) 上海市安全生产科学研究所财务管理制度(上海市安全生 产科学研究所 2010.8.9制定) (三)评价方法和实施过程 自 2018年 4月项目启动以来,评价小组在前期调研的情况下, 完成了项目绩效评价工作方案,于 5月 25日进行方案专家论证。期 18 后,评价小组严格按照工作方案,经过了数据采集、问卷调查、访 谈、数据分析和报告撰写等环节,顺利完成绩效评价报告编制,于 6 月 22日通 过报告评审。 1、绩效评价工作方案制定过程 评价小组研读了项目相关文件,安排走访相关单位,包括上海 市安全生产科学研究所考核发证室、财务室、部分考点,对 2017年 度项目实施情况进行预调研。经内部多次研讨后,初拟了工作方案、 指标体系、问卷及访谈内容,于 2018年 5月 25日召开专家评审会, 由专家评审组提出修改意见。会后评价小组根据评审意见对方案进 行修改并完善,最终于 2018 年 5 月 29 日确定绩效评价方案、指标 体系、问卷及访谈内容。 2、数据采集方法及过程 数据采集是通过发放数据采集表、开展问卷调查和访谈、现场 勘察核 对来实现,并应用数据复核计算、分析性符合等方式对信息 进行验证。 ( 1) 数据采集填报: 2018年 5月 7日 -17日、 6月 2-8日, 由上海市安全生产科学研究所根据基础数据调查表及所需提供的资 料清单 、补充清单 ,进行自行填报和资料准备,包括业务数据和财 务数据; ( 2) 社会调查: 2018 年 6 月 6 日 -2018 年 6 月 12 日,评价 小组 在预算单位协助下 分别对区县考试点、考生开展满意度问卷调 查,对相关部门业务负责人进行访谈(市安科所),获取项目实施情 19 况和社会反馈信息; ( 3) 现场核查核对: 2018年 6月 8日 -2018年 6月 9日,评 价小组分别前往项 目单位现场查阅项目资料和管理痕迹记录,核查 核对已提供的业务数据与财务数据,并应用数据复核计算、分析性 符合等方式对信息进行必要的验证。 ( 4) 统计资料分析: 2018年 6月 10日 -2018年 6月 15日, 评价小组对回收的数据资料、问卷、会议记录,进行汇总统计,通 过整理分析后将信息归集到评价工作底稿,从而形成初步评价结论。 3、绩效评价报告形成过程 评价小组根据调研、分析结果编制了评价报告,经内部审核、 征询相关业务科室负责人意见后,向市安科和专家提交报告初稿, 接受评审。 2018年 6月 22日 获取专家评审意见回函后,评价小组 对 报告内容进一步修改和完善, 于 2018年 6月 25日出具正式报告。 三、评价结论和绩效分析 (一)评价结论 运用由评价小组研发并通过专家组论证的评价指标体系及评分 标准,经过数据采集、问卷调查及访谈程序,对 2017年度上海市安 全 生产资格考试考核 经费项目绩效进行客观评价,最终评分结果: 总得分为 88.22分,评价等级“良”。 指标 A.项目决策 B.项目管理 C.项目绩效 合计 权重 10 32 58 100 得分 9 26.5 52.72 88.22 得分率 90.00% 82.81% 90.90% 88.22% 20 (二)绩效分析 1、项目决策 项目决策指标总分 10分,得分 9分。共设置 2个二级指标,战 略目标适应 性考察项目与预算 部门 目标、 职能的 适应 性;立项合理 性是对项目立项依据、绩效目标设定的考察。 一级指标 二级指标 三级指标 权重 得分 A项目决策 A1战略目标适应性 A11项目与预算部门战略目标的适应性 3 3 A2立项合理性 A21立项依据的充分性 3 3 A22绩效目标的合理性 4 3 合 计 10 9 A11战略目标适应性,权重 3分,得分 3分 项目目标适应性好。 落实 中华人民共 和国安全生产法、上 海市安全生产条例、国家安监总局安全生产资格考试与证书管理 暂行办法相关规定 ,向本市特种作业人员和危化单位管理人员提 供考核培训工作,与市安科所、市安监局的职能 完全 相符。 A21立项依据充分性,权重 3分,得分 3分 项目 立项依据充分。 完全遵循 安全生产培训管理办法(国家 安全生产监督管理总局令第 44号)、安全生产资格考试与证书管理 暂行办法(安监总培训 2013 104号 )等国家级 文件要求实施。 A22绩效目标的合理性,权重 4分,得分 3分 项目绩效目标质量较好。已建立了较为完整的目标体 系,但效 果类指标略有欠缺,定性判断为主,不足以全面反映项目实施效果。 21 有些指标因统计数据缺乏而影响其应用,比如复训覆盖率(年度复 训人数 /本市从业人员应复训人数)、本市持证上岗率,今后随着从 业人员数据联网、统计质量的提高,还需逐步完善。 故本 指标扣 1 分。 2、项目管理 项目管理指标总分 32分,得分 26.5分。共设置 3个二级指标, 从投入管理、财务管理、实施管理三个方面进行考察。 一级指标 二级指标 三级指标 权重 得分 B项目管理 B1投入管理 B11预算编制的合理性 4 4 B12预算执行率 4 3 B2财务管理 B21财务管理制度健全性 2 2 B22资金使用合规性 5 5 B3实施管理 B31项目计划合理性 3 1.5 B32项目管理制度健全性 4 3 B33制度执行情况 10 8 合 计 32 26.5 B11预算编制的合理性,权重 4分,得分 4分 预算编制合理性高。项目预算内容与项目相关,编制流程规范, 申报和审批程序合规。预算标准来源于政策依据、市价比较,因为 经常性项目故数量估算参考历史业务数据,预算编制方式合理。 B12预算执行率,权重 4分,得分 3分 预算执行率总 体较高,但个别子项存在调整不及时情况。 2017 年项目预算总体执行率为 96.68%,表现优异,较以前年度平均 75% 有很大的提高。不足之处是个别子项执行率偏低,如:设备购置执 行率为 0%,系招投标流标所致 ,未及时调整预算 ;危化考核费 -其他 支出预算执行率为 59.77%,系不可预计偏差所致 ,未及时调整预算 。 22 根据评分标准,本指标扣 1分。 B21财务管理制度健全性,权重 2分,得分 2分 项目财务管理制度健全,依据上海市安全生产监督管理局、上 海市物价局关于规范本市安全生产培训收费行为的通知(沪安监 管法规 200849号 )、安科所建立了上海市安全生产科学研究所财 务管理制度(上海市安全生产科学研究所 2010.8.9制定),包含预 算管理制度、预算资金和专项资金管理制度,财务制度健全,与 本项目相适用。 B22资金使用合规性,权重 5分,得分 5分 项目资金使用合规性良好。 经核查安科所财务账册和凭证记录, 资金用途与预算申报 相 一致,支付审批手续齐全, 金额与合同相符, 未见不符情况。 B31项目计划合理性,权重 3分,得分 1.5分 项目为经常性项目, 围绕考核、发证已建立了较标准 化的操作 流程,形成了常态化管理, 评价未见书面年度工作计 划,亦未对年 度“飞行检查”频次做具体规划。根据评分标准,本指标扣 1.5分。 B32项目管理制度健全性,权重 4分,得分 3分 项目管理制度和措施比较完善,能够保障考试流程的公允性、 可控性,不足之处是对区县考点考场记录要求不够统一和规范, 影 响数据回收和统计。根据 评分标准 ,本指标 扣 1分。 B33制度执行有效性,权重 10分,得分 8分 评价小组对各项制度执行情况进行了痕迹抽查,发现考点监考 23 记录的完整性有待进一步提高,对于查处的违纪情况记录有 缺失。 根据 评分标准扣 ,本指标扣 2分。 3、项目绩效 项目绩效指标总分 58分,得分 52.72分。共设置 4个二级指标, 从产出、结果、社会评价和可持续性四个方面进行考察。 ( 1) 项目产出 二级指标 三级指标 权重 得分 C1项目产出 C11年度考核发证人次计划完成率 5 5 C12发证及时性 3 3 C13计算机机考率 3 3 C14监考执行情况 6 6 C15农民工证书采购计划完成率 3 3 合 计 20 20 C11年度考核发证人次计划完成率,权重 5分,得分 5分 本指标主要考察年度考核发证计划完成情况,指标完成情况良好。 经统计, 2017 年度特种作业年度考核发证人次 计划完成率 107.2% ( 160,796/150,000 )、危化安全干部年度计划完成率 94.98% ( 11,398/12,000),预测偏差均在 5%震幅内 ,根据评分标准本指标得满 分。 C12发证及时性,权重 3分,得分 3分 本指标主要考察市安科所制证发证工作是否及时,按照规定需在考试 通过后 10个工作日内发放证书。评价小组通过对 2017年度发证记录和考 试系统合格记录进行比对核查,发现所有证书均在规定时间内完成制证和 发放,根据评分标准本指标得满分。 C13计算机机考率,权重 3分,得分 3分 24 经核查 2017年度“安全 生产 资格 ”考点数为 23个,已根据考点相应 要求全部实施计算机考试,实际机考率达到 100%,符合项目管理规定 , 根据评分标准本指标得满分。 C14监考执行率,权重 6分,得分 6分 监考执行情况好,均按照制度规定的要求严格执行监考程序,经 远程 监控记录表痕迹抽查和监考人员名册资格核对 , 现场监考人数符合制度规 定、监考人员均具有监考证、 未发现监考人员违规情况,现场监考出勤率 100%、远程视频监控监考覆盖率 100%, 根据评分标准本指标得满分。 C15农民工证书采购计划完成率,