2018 年度知识库系统建设绩效评价报告.pdf

财政项目支出绩效评价报告 项目名称： 2018 年度知识库系统建设 项目单位：上海图书馆（上海科学技术情报研究所） 委托单位：上海图书馆（上海科学技术情报研究所） 评价机构：上海社会科学院政府绩效评估中心 2019 年 5 月 1 目 录 摘 要 .2 前 言 .7 一、项目基本情况 .7 （一）项目概况 .7 1、项目立项背景及目的 .7 2、预算资金来源及使用情况 .8 3、项目实施情况 .9 4、项目组织及管理 .12 （二）项目绩效目标 .14 1、总目标 .14 2、阶段性目标 .14 二、绩效评价工作情况 .16 （一）绩效评价目的 .16 （二）绩效评价设计过程 .16 （三）绩效评价框架 .17 （四）证据收集方法 .21 （五）绩效评价实施过程 .21 （六）本次绩效评价的局限性 .22 三、评价结论和绩效分析 .22 （一）评价结论 .22 （二）具体绩效分析 .23 四、主要经验及做法、存在的问题和建议 .33 （一）主要经验及做法 .33 （二）存在的主要问题 .36 （三）建议和改进举措 .37 2 摘 要 为推进新型科技智库建设， 上海图书馆 （上海科学技术情报研究 所） 设立 知识库系统建设 专项 。 2018 年度知识库系统建设专项 由 9 个 子项目构成， 分别由文献提供中心 、 协调辅导处 、信息咨询与服务中 心 负责实施。 2018 年度知识库系统建设专项资金 预算 3,424,600.00 元，实际支出 3,390,335.39 元，年度余额 34,264.61 元 ，预算执行率 为 99%。 知识库系统建设 专项资金由市级财政预算安排，纳入上海图书 馆部门预算。 一、 评价结论 和绩效分析 2018 年度上海图书馆知识库系统建设专项绩效评价总得分 91.9 分，绩效评级为 优 。其中项目决策得分 9 分，项目管理得分 21.9 分， 项目绩效得分 61 分。 绩效目标完成情况： （ 1）投入目标： 2018 年度上海图书馆知识库系统建设专项全年财 政拨款预算经费总额 3,424,600.00 元，预算执行率 99.0%。资金使用 与预算相符。专项的财务管理制度和实施管理制度得到较有效执行， 财政资金使用的合规性情况良好。（ 2）产出目标： 2018 年度知识库系 统建设专项 9 个子项目，产出完成情况良好，项目产出质量需进一步 提高，所有子项目均按计划如期完成。（ 3）效益及影响力目标：知识 库系统建设专项实施，有利于上海图书馆知识服务能力建设，有力地 推动了为行业服务、为决策服务的目标实现，专项在为高层决策提供 支撑服 务、强化优势领域能力建设 方面取得进展，较好地支持新型科 技智库建设 ，但专项的整体 定位、子项目优化调整的 机制 需进一步发 挥作用 ，知识库系统的核心能力建设需不断提高。 二、 主要 经验 和做法 1、专项立项依据充分，立项规范，与馆所 新型科技智库 建设目标 相适应。 3 为实现上海图书馆上海科学技术情报研究所 2016-2020 年发展 规划发展目标：着力打造 “ 支撑创新，支持决策 ” 的新型科技智库 ， 提供以科技、产业和文化为重点的情报服务。馆所夯基础重拓展，探 索新型 科技智库 建设，以情报知识库平台、专职情报研究队伍为核心， 推动科技智库支撑体系建设。加快国际大都市数据库、新兴产业专利 数据库、企业竞争情报数据库为重点的情报知识库建设，打造针对国 内外科技 创新 、国际大都市竞争力跟踪、预警及监测研究平台 。 设立 知识库系统专项，立项依据充分，立项有完整的批复资料，流程规范。 2、上图专递系列内参呈现出成果频出的发展势头，为高层决 策服务效果显著。 2018 年，上图专递内参系列延续了前两年高批示率现象，围绕 城市群和科技创新中心建设，充分发挥研究团队的信息敏锐性 、 依托 馆所丰富的文献数据资源，组织编写了一批内参，全年共计有 12 次领 导批示。其中，市委书记李强批示 1 次，市长应勇批示 4 次，尹弘副 书记批示 1 次、政协主席董云虎批示 1 次，多位副市长批示 5 次。中 心参与市委办公厅起草的“京津冀、粤港澳、长三角三大城市群比较 分析与相关建议”的内参，获得了李强书记“转市委研究室、发改委、 长三角合作办阅”；上图专递 65 期“智库报告 ： 美国市长推进区域创 新之经验”、上图专递 77 期“北京：顶尖的科技创新城市进行时”、上 图专递 4 期“牛津经济研究院预测世界经济中心东移，上海成全球第 五大城市”、上海科 技简报 1 期 “人工智能人才告急”等得到了应勇 市长批示。此外“上海在全球城市创业生态系统版图中形象模糊”、“海 外绿色金融概要”、“普华永道笔下的上海”、“纽约的城市雨洪管理” 等简报分别得到周波、翁铁慧、吴清等副市长批示。 3、发挥知识库系统优势，拓展政府决策咨询，技术竞争情报服务 上海重大科研项目。 4 专项在提升新兴产业专利数据库、企业竞争情报数据库为重点的 情报知识库建设基础上，加强政府决策咨询领域项目开拓影响力。 2018 年成功竞标获得了 5 项上海市科技基金项目、 1 项文创基金项目、 1 项 决策咨询重点项目、 1 项国家重点 研发计划的子课题等 8 个省部级项目。 和同济大学合作，承接了科技部国家重点研发计划课题“区域分布式 科技服务平台关键技术及标准规范研究”（课题编号： 2017YFB1401601）， 中心作为该项目子课题长三角城市群综合科技服务平台研发与应用 示范的负责单位。完成的上海科技发展基金项目“生物医药热点技 术领域知识产权评议 中药高通量筛选领域”研究报告撰写的简报 “加快发展高通量筛选技术 推动上海生物医药产业优化升级”得 到了市委副书记尹弘的批示，完成的市政协年度重点研究项目“建设 卓越的全球城市，应加快建立具有国际水准 、上海特点的评价指标体 系调研报告”得到了市政协主席董云虎的高度肯定和批示。“前沿技术 发展研究中心”软科学研究基地今年完成了 22 份 报告 ，被市科委录用 了 10 篇。在上情所 60 周年研讨会上，中心发布的两个智库报告 2018 国际大都市科技创新能力评价和 2018 全球科技前沿热点研 究，充分体现了中心融合了专业的情报方法和多元大数据开展的国际 大都市对标研究和前沿技术跟踪两个核心方向。技术竞争情报深耕服 务上海重大科研项目， 2018 年 1 月 8 日公布的 2017 年度国家科技奖 名单中，有 10 个项目 由中心提供过技术查新服务 。 服务国家和上海的 大飞机战略，和中国商飞上海飞机制造公司进行了深度合作，承担了 包括上飞公司整体专利战略、到大型客机复合材料专利研究等 4 个重 大项目，为国家大飞机顺利研制提供了 良 好支撑。 4、上海城市形象媒体测评项目以委办局需求为导向，积极主动， 用户满意度达 100%。 凭借在外媒舆情服务出色的专业能力和良好口碑，为市外宣办、 5 外办等多家涉外单位承担了首届中国国际进口博览会外媒舆情监测的 重大任务，安排精兵强将，每天摘编外媒重要舆情报送市领导；与市 委宣传部舆情处合作， 4 月开始推出打响“上海文化”品牌参考信息， 以半月 刊的形式及时搜集、编写、提供国内外文化品牌建设案例和最 新动态。 2 月提供的 2017 上海城市形象媒体测评年报获得应勇市 长批示； 4 月报送的“开天辟地 中华创世神话”文艺创作与文化 传播工程舆情月报获得上海市委常委、时任宣传部部长董云虎同志 批示肯定。 2018 年收录媒体涉沪报道 59700 篇，媒体分析报告 82 份。 监测报告内容涉及上海城市形象媒体测评报告 (3 份 )、上海影视双节 （ 19 份）、外媒舆情报告（周报 48 份，月报 12 份，年报 1 份）。监测 结果提供市委宣传部、市新闻办、市外办、市建交委、市文广局等有 关部门，用户满 意度达 100%。 三、 存在的主要问题 1、专项的绩效目标需优化，专项子项目的设计需完善。 专项总体绩效目标需要进一步调整和优化 ,更加适应 新型 公共 科技 智库 建设目标，专项 9 个子项目的功能、目标、考核指标的设计也需 要调整和完善。目前部分子项目的考核指标有重叠、功能较模糊，如 行业情报联盟推进工程研究、上海行业情报发展联盟建设、专利竞争 情报研究子项目的内容有交叉、边界不清晰，考核指标难以准确拆分。 2、部分子项目遇到发展瓶颈，需重新定位和调整。 情报服务网站功能老化，服务功能单一，延伸服务、创新服务不够， 用户新需求得不到满足等问题，需重新定位和调整，以适应新型科技 智库建设和服务的需要。专利竞争情报研究、行业情报联盟推进工程 研究、上海行业情报发展联盟建设 3 个子项目的内容有关联，执行过 程中定位不清晰，阻碍项目进一步发展，需重新定位和调整。 四、 建议和改进举措 6 1、围绕 智库 建设目标，优化完善专项绩效目标和子项目设计。 建设新型公共 科技智库 目标已经明确，知识库专项的绩效目标需服 从这一发展战略，进一步优化和完善。充分理解情报知识库平台的功 能定位，实现“加快国 际大都市数据库、新兴产业专利数据库、企业 竞争情报数据库为重点的情报知识库建设，打造针对国内外科技 创新 、 国际大都市竞争力跟踪、预警及监测研究平台”这一发展目标。子项 目的设计紧紧围绕发展目标统筹考虑，做到功能明确、边界清晰、考 核指标不重复。 2、重新定位和调整情报服务网站，优化调整情报相关子项目。 针对情报服务网站面临发展瓶颈的情况，积极整合馆所资源及时调 整，重新适应行业发展需求。专利、竞争情报是中心的优势和长项， 相关的竞争情报核心能力培育、专利竞争情报研究、行业情报联盟推 进工程研究、上海行业情报发展联盟建设 4 个子项目可以考虑重新定 位，从系统的观点来分析子项目，以“新兴产业专利数据库、企业竞 争情报数据库”建设为着力点，优化调整项目定位和分工。 7 前 言 为贯彻财政支出预算绩效管理思想，强化预算支出责任理念，受 上海图书馆 （上海科学技术情报研究所）委托，上海社会科学院 （政 府绩效评估中心） 作为第三方绩效评价中介机构，承担上海图书馆 2018 年度知识库系统建设专项资金 绩效评价工作。本次评价方式为绩效后 评价，绩效评价工作按照上海市预算绩效管理实施办法（沪财绩 201422 号）的要求展开。 一、项目基本情况 （一）项目概况 1、 项目 立项背景 及目的 “十三五”时期，是全球图情行业创新驱动发展的重要时期。以大数 据、云计算、物联网、移动互联网和信息物理系统等为代表的新一代 信息通信技术掀开人类信息化进程的新篇章，无处不在的信息社会正 在到来。以互联、智能、高效、便捷为主要特征的图书馆智慧化进程 已经开启，对现在和未来的公共图书馆服务形态、服务模式、服务内 容起着深刻的影响。图情行业呈现以下发展态势：网络成为图情服务 的主战场，阅读服务和图书馆空间价值获得重新定义，“数据化”趋势正 深刻改变图情服务范式，智慧图书馆成为新的建设目标，公共图情服 务进一步呈现“普及化”和“智 库化”的发展趋势。在此背景下，上海图书 馆（上海科学技术情报研究所）依托机构长期以来在科技、产业、人 文领域的研究积淀和馆藏文献资源，发挥图情合一研究优势，强化科 技创新前沿、新兴产业、国际大都市和数字人文等方向的研究实力和 决策咨询服务，为建设新型科技智库打下坚实基础，不断提升机构在 专业研究领域的影响力。加快国际大都市数据库、新兴产业专利数据 库、企业竞争情报数据库为重点的情报知识库建设，打造针对国内外 8 科技创新、国际大都市竞争力跟踪、预警及监测研究平台。 2018 年 度 上海图书馆（上海科学技术情报研究所）设立知识库系 统建设专项， 目的是： 进一步加快国际大都市数据库、新兴产业专利 数据库、企业竞争情报数据库为重点的情报知识库建设。知识库系统 建设专项由 9 个子项目构成，分别由信息咨询与服务中心、文献提供 中心、协调辅导处负责实施。 2、 预算资金 来源 及 使用情况 知识库系统建设 专项资金由市级财政预算安排，纳入上海图书馆 部门预算。 2018 年度知识库系统建设 专项立项的 9 个项目，预算经费总额 3,424,600.00 元，实际支出 3,390,335.39 元 ，年度余额 34,264.61 元， 预算执行率 99.0%。各个子项目经费具体使用情况见表 1。 表 1 2018 年度知识库系统建设专项资金 情况 表 单位：元 序号 项目名称 预算金额 实际支出 预算执行率 1 情报平台行业网建设 538,000.00 533,958.31 97.5% 2 专递人大简报 130,000.00 126,796.10 100.0% 3 竞争情报核心能力培育 386,600.00 374,989.80 97.0% 4 上图专递与国际大都市 356,000.00 347,858.79 97.9% 5 科技与产业 190,000.00 185,961.58 99.2% 6 专利竞争情报研究 335,000.00 332,849.41 99.9% 7 行业情报联盟推进工程研究 560,000.00 559,937.40 100.0% 8 上海城市形象媒体测评 699,000.00 697,984.00 97.7% 9 上海行业情报发展联盟建设 230,000.00 230,000.00 99.4% 合 计 3,424,600.00 3,390,335.39 99.0% 9 3、项目实施情况 “ 2018 年度知识库系统建设专项资金 ” 项目 主管部门为上海图书馆 ， 项目实施期为 2018 年 1 月 1 日至 2018 年 12 月 31 日 。 该 专项 由 9 个 子项目构成， 分别由 信息咨询与研究中心、文献提供中心和 协调辅导 处负责实施。 各子项目 的 具体 实施内容 如下： 行业情报联盟推进工程研究 由信息咨询与 研究 中心负责实施 ,项目 主要内容 ：一、利用 “联盟 ”这一平台，在 “战略性新兴产业情报 ”方面开 展合作研究。二、提升 “联盟 ”成员服务能力、提高社会情报运用意识， 进行 “行业情报发展联盟情报培训 ”。三、探索 “行业情报发展联盟 ”华东 地区合作模式。 专利竞争情报研究 由信息咨询与 研究 中心负责实施 ,项目主要内容： 一、 继续推进专利地图研究向纵深发展，购买更新的专利竞争情报研 究的软件加以剖析，自主尝试设计开发在线情报计量分析工具，加快 推广应用的步伐。 二、 开展专利情报战术信息的开发研究，使馆所的 专利战略信息与战术信息互相配合，形成完整的专利情报体系。 三、 进一步巩固馆所专利竞争情报在国内的领先地位和国际上的影响力。 四、 推动馆所的专利竞争情报应用研究 ， 计划分批推出一系列产业行 业和技术主题的专利分析报告，提供给已经上线的行业科技情报服务 网 ， 为上海市产业科技发展提供借鉴和参考。从而提高竞争情报研究 在科研创新中的工作水平和显示度，进一步提高馆所在情报研究和服 务方面的社会影响力。形成多用户报告的情报产品。 情报平台行业网建设 由信息咨询与 研究 中心负责实施 ,项目主要内 容：一、 提高平台内容服务能力，构建情报产品集散地： 1、围绕战略 新兴产业，提升内容加工深度、拓展内容服务类型，建立 1-3 个技术 领域的情报产品集散地，推出一批多元化的情报产品，包括有分量的 研究报告，系统化的专题简报，高质量的情报研究文章等； 2、更新内 10 容展示方式，以扁平化思维规划栏目和功能，提升 用户体验度。 3、探 索情报网络化众包机制，吸纳社会专业人士加入情报内容建设团队， 协作提升内容服务能力。二、提升平台情报网络化服务能力： 1.在以往 专题数据库服务的基础上，围绕上海市重点支撑产业，选取 1-3 个重 点技术领域，采集包含专利、论文、科技报告等在内的信息，经过情 报人员筛选、标引、分类后，构建专题数据库，提升情报网络化服务 深度与广度； 2.信息采集和整理，选择 1-3 个技术领域对专利等数据库 中的相关专利进行批量下载，并自动标引和分类，尝试自动分析。三、 提升平台情报服务深度： 1、探索基于云服务的情报采集分析能力， 多 方位采集与梳理专业领域信息。 2、在 O2O 模式下，探索 “无痛 ”线下情 报服务线上化模式，实现情报服务内容的线上管理、存储和展示。 上图专递与国际大都市研究情报平台行业网建设 由信息咨询与研 究 中心负责实施 ,项目主要内容：一、 上图专递系列部分内参简报，包 括上图专递、上海科技简报和网上辑录。继续跟踪研究与上 海密切相关的国内外新闻时势动态、发达国家与城市的政治、经济、 文化、科技、社会等各领域的新战略、新思想、新动向和新举措等， 为上海的发展提供智力支持。二 、 国际大都市研究。将通过内参简报 和大都市研究平台两大载 体来推进该项工作。内容方面，在上一年度 初步完成的系统性整理与盘活本中心在都市研究方面的深厚积累基础 上，继续优化存量研究，并从都市经济、产业、文化、社会等研究优 势领域入手，继续开展并加强有关的理论和综合研究，展示情报所在 都市领域的情报研究与服务特色。 科技与产业 由信息咨询与 研究 中心负责实施 ,项目主要内容：一、 及时报道已锚定对象或新目标在复杂全球环境中的反应、对策与成效 一般以原意原味揭示原始信息为主，即信息特征型；二 、 撰写具 有说服力的长效性、知识性系列文章 一般以原始数据为依据，进 行相关性分析与比较，以由 此显露的现象为基础，撰写专递文章，即 情报研究型；三 、 探究信息与数据的采集源、情报研究的方式方法。科 11 技与产业旨在生产符合上海这样一个特大型城市的市级情报机构身 价的高层内参。 竞争情报核心能力培育上图专递与国际大都市研究情报平台行业 网建设 由信息咨询与 研究 中心负责实施 ,项目主要内容：一、 积极探索 竞争情报理论研究，继续编写出版好竞争情报杂志；二、构建基 于竞争情报产业链的交流平台，探索与有关行业、企业、研究所开展 竞争情报合作与示范服务的机制和体制；三、与上海科技情报学会合 作，探索竞争情报在上海 “四个中心 ”建设 中的实践推广和应用，以若干 实体为试点进行研究和探索。 专递人大简报上图专递与国际大都市研究情报平台行业网建 设 由信息咨询与研究 中心负责实施 ,项目主要内容：一、 专递人大日 常刊物，以半月刊的形式每月出版两期（从民主法制角度关注当前的 社会热点；紧跟民主法制领域的最新观点；介绍各地人大工作中的探 索和最新尝试；传递海外政府建设法治政府和法治社会的有益尝试）； 二 、专递人大常委会会议专刊：根据人大领导要求，配合市人大常 委会会议召开，不定期收集并提供专题研究资料和简报； 三 、根据人 大领导要求，完成应急任务。 上 海城市形象媒体测评 由文献传递中心负责实施 ,项目主要内容： 一、 对涉及上海城市形象的经济、法制、环保、教育等 23 个因素核心 数据做常规性分析，并编制城市形象测评报告提供市委市政府高层领 导。 二、 结合上海年度实际，有针对性地对上海文化、体育、建设、 交通、外事等重要领域，以及上海大型活动 (如上海影视双节、上海国 际艺术节、中国工业博览会等 )、突发事件、重大项目的媒体报道进行 专题测评，提供帮助城市管理决策参考之用的舆情测评报告。 上海行业情报发展联盟建设 由辅导协调处负责实施 ,项目主要内容： 项目通过构建各行业的情报服务链上所 有利益相关者的战略联盟来培 育情报意识、提升情报服务能力。通过上半年的 “科技活动周 ”和下半年 的 “科技情报服务宣传周 ”，分别以 “科技情报与百姓生活 ”和 “科技情报与 12 前沿技术 ”为主线，形成 “一年两周 ”的科技情报科普宣传工作机制和活 动载体，打造主题科普活动品牌。依托现代网络信息技术和专业数据 库，通过一系列的项目合作交流，提升情报服务能力，实现跨行业情 报工作。同时，优化联盟发展环境，增强对会员的吸引力和凝聚力， 把更多的行业情报工作者融入联盟大家庭中。 4、项目组织及管理 （ 1）项目组织 及管理架构 2018 年度知识库系统建设专项资金 由 9 个子项目构成，其中 上海 城市形象媒体测评 子项目由 文献提供中心负责实施，上海行业情报发 展联盟建设子项目由 协调辅导处负责实施， 情报平台行业网建设、专 利竞争情报研究、竞争情报核心能力培育、专递人大简报、科技与 产业、上图专递与国际大都市研究、行业情报情报联盟推进工程研究 由 信息咨询与研究 中心负责实施。 根据上海图书馆 （ 上海科学技术情报研究所 ） 项目管理条例 、 上海图书馆 （ 上海科学技术情报研究所 ） 采购管理规定（试行） 等 管理制度的 规定， 知识库系统建设 专项各实施部门的组织分工和 管理 职责如 表 2 所示 ： 表 2 项目 组织分工与 管理架构 序号 馆所部门 项目管理职责 1 业务处 专项经费的预算；专项经费的分配规划、审核；协调、 检查和督促年度计划的实施。 2 文献提供中心 中心 负责上海城市形象媒体测评子项目的人员安排、经费 使用、项目计划、项目实施管理、项目总结。 3 协调辅导处 负责上海行业情报发展联盟建设子项目的人员安排、 经费使用、项目计划、项目实施管理、项目总结。 4 信息咨询与研 究 中心 负责情报平台行业网建设、专利竞争情报研究、竞争 情报核心能力培育、专递人大简报、科技与产业、 13 上图专递与国际大都市研究、行业情报情报联盟推进 工程研究七个子项目的人员安排、经费使用、项目计 划、项目实施管理、项目总结。 （ 2） 项目管理措施与制度规范 知识库系统建设遵循馆所制定的业务 管理的相关制度和措施 ，包 括：馆 （ 所 ） 廉政风险防控办法（试行），上海图书馆 （ 上海科学 技术情报研究所 ） 采购管理规定（试行），上海图书馆 （ 上海科学技 术情报研究所 ） 项目管理条例，上海图书馆 （ 上海科学技术情报研 究所 ） 专家咨询、翻译、撰稿等劳务费支付管理办法（试行），上海 图书馆 （ 上海科学技术情报研究所 ） 合同管理办法（试行）。 文献提供中心负责的子项目：上海城市形象媒体测评子项目建立 了项目组，制定数据收入标准和标引规范，每月考核。制定网络安全 和用户分级管理制度。每月按时完成监测数据入库和分析。 协调辅导处的上海行业情报发展联盟建设制定上海行业情报发 展联盟章程。 协作部门 成员 领导 单位 (上海图书馆上海科学技术情报研究所 ) 上海行业情报发 展联盟秘书处 联盟会员单位 上海图书馆 (上海科学技术 情报研究所 )各业务中心 14 图 1 上海行业情报发展联盟组织框架 信息咨询与研究中心负责的 7 个子项目，均采用项目组制度，选 择业务能力强的专业人士担任项目负责人，组织骨干研究力量组成项 目组，制定项目实施计划，定期检查和评估项目实施进展，项目完成 后进行总结。 （二）项目绩效目标 1、总目标 上海图书馆 知识库系统建设 专项资金的绩效 总目标 是： 通过项目 实施，不断完善优化图书馆知识库体系，进一步加快国际大都市数据 库、新兴产业专利数据库、企业竞争情报数据库为重点的情报知识库 建设，推动“支撑创新，支持决策”的新型科技智库的建立。 2、阶段性目标 上海图书馆 知识库系统建设 专项 2018 年度 绩效 目标 ：项目通过对 知识库平台的优化完善，自主研发分析工具，开展数据采集整理，撰 写文章，吸引人才等措施，不断充实完善图书馆知识库体系，强化科 技创新前沿、新兴产业、国际大都市和数字人文等方向的研究实力和 决策咨询服务，为用户在最少的时间内提供所需信息和数据，并以快 捷简便的方式 ，使用户完成操作，以比较适合的方式和时间传给读者， 从而给读者带来最大的效益。 具体 参见 表 3 所示 。 表 3 上海图书馆 2018 年度知识库系统建设 专项 绩效目标 绩效内容 指标内容 指标目标值 投入管理 预算执行率 100% 预算编制合理性 项目预算根据项目实际支出情况编制，预算结构合理。 财务管理 财务制度健全性 建立完善的项目预算制度、政府采 15 购制度、财务收支制度和资产管理 制度等 财务管理制度执行有效性 在项目实施期间，要求并督促各子 项目建立完善的财务制度，做到专 款专用，统一管理，合理使用，保 证项目顺利实施和完成 资金使用合规性 资金使用审批程序和手续符合法 律、法规和财务制度规定；资金用 途明确，且符合预算批复规定的用 途；项目整体实行严格的单独核算。 项目实施 项目管理制度健全性 制定和完善项目管理制度，项目管理制度健全 项目管理制度执行的有效性 项目进度控制有效；项目监管机制 有效；质量管理有效；信息沟通有 效 人力资源管理有效性 人员数量、业务能力符合项目管理 的需要，具备相应的岗位资质；通 过培训有效促进人员素质的提升 政府采购规范性 采购内容符合预算批复和项目的实际需要；执行规定的政府采购程序 项目产出 行业情报联盟推进工程研究 完成率 100% 专利竞争情报研究完成率 100% 情报平台行业网建设完成率 100% 上图专递与国际大都市研究 完成率 100% 科技与产业完成率 100% 竞争情报核心能力培育完成 率 100% 专递人大简报完成率 100% 上海城市形象媒体测评完成 率 100% 上海行业情报发展联盟建设 100% 16 完成率 项目验收通过率 100% 项目完成及时性 及时 项目效益 知识库使用情况 使用次数上一年度 知识库创新性 有创新 知识库数据增量 增量上一年度 知识库稳定性 稳定性良好 使用者满意度 90% 二、绩效评价工作情况 （一）绩效评价目的 通过对 2018 年度“ 知识库系统建设专项资金 ”专项进行绩效后评价， 达到两个目的：一是根据绩效目标，客观公正地评价 2018 年度“ 知识 库系统建设专项资金 ”专项资金使用的合理性和有效性，总结经验，发 现问题，为今后优化专项资金的分配和使用提供意见和建议；二是通 过评价，进一步加强和规范“ 知识库系统建设专项资金 ”专项的预算和支 出管理工作，为开展预算绩效管理提供基础，为完成 2020 年度预算及 绩效目标编制提供参考和依据。 （二）绩效评价设计过程 绩效评价设计过程分成三个阶段： 1、实地调研，形成工作框架 。 评估 组仔细研读 上海图书馆上海 科学技术情报研究所 2016-2020 年发展规划 等 相关资料 ， 深入 上海 图书馆 相关 业务中心 进行访谈和座谈，在调研的基础上提炼绩效评价 重点，形成 知识库系统建设 专项的绩效评价工作框架和工作流程。 2、研讨分析，凝炼指标体系 。 在确定评价框架和评价重点的基础 上，通过收集资料 和 研究 分析， 总结专项特点， 评估 组提出评价指标 17 体系初稿。 3、 理 清思路，确定工作方案。 评估 组 理 清评价思路，设计 绩效评 价工作方案 ， 并 与 委托方 沟通，根据沟通意见完善工作 方案。 （三）绩效评价框架 1、绩效评价原则和范围 绩效评价原则包括： （ 1）独立性原则。作为独立的第三方开展绩效评价，公开公平公 正。 （ 2）重要性原则。在开展绩效评价工作时，抓住项目的特点，反 映项目要求的核心内容。 （ 3）系统性原则。评价时应当将定量指标与定性指标相结合，定 量指标应量化，定性指标可衡量，系统反映财政支出所产生的社会效 益、经济效益、环境效益和可持续影响等。 （ 4）可比性原则。在 22 号文的框架下开展评价工作，对同类评 价对象要设定共性的绩效评价指标，以便于评价标准的规范和评价结 果可相互比较。 （ 5）经济性原则。评价工作考虑现实条件和可操作性，符合成本 效益原则。能够恰 当反映目标的实现程度。 绩效 评价范围： 2018 年度知识库系统建设专项资金 支持的 9 个项 目 。 18 2、 绩效 评价指标体系 表 4 2018 年度“ 知识库系统建设 ”专项绩效评价指标体系 一级指标 权重 二级指标 权重 三级指标 权重 指标解释 A 项目决策 10 A1 项目立 项 6 A11 项目目标适应性 2 是否能够上海图书馆目标和职能的实现。 A12 立项依据充分性 2 立项批复文件是否支持。 A13 项目立项规范性 2 项目立项程序和立项资料合规性、完整性。 A2 项目目 标 4 A21 绩效目标合理性 2 目标与任务是否匹配，目标与进度计划是否匹配。 A22 绩效指标明确性 2 实施要求明确性，实施效益明确性。 B 项目决策 25 B1 投入管 理 6 B11 预算执行率 3 100% B12 预算编制合理性 3 项目预算根据项目实际支出情况编制，预算结构合理。 B2 财务管 理 9 B21 财务制度健全性 3 建立完善的项目预算制度、政府采购制度、财务收支制度和 资产管理制度等 B22 财务管理制度执行有效 性 3 在项目实施期间，要求并督促各子项目建立完善的财务制 度，做到专款专用，统一管理，合理使用，保证项目顺利实 施和完成 B23 资金使用合规性 3 资金使用审批程序和手续符合法律、法规和财务制度规定；资金用途明确，且符合预算批复规定的用途；项目整体实行 19 严格的单独核算。 B3 项目实 施 10 B31 项目管理制度健全性 3 制定和完善项目管理制度，项目管理制度健全 B32 项目管理制度执行的有 效性 3 项目进度控制有效；项目监管机制有效；质量管理有效；信 息沟通有效 B33 人力资源管理有效性 2 人员数量、业务能力符合项目管理的需要，具备相应的岗位 资质；通过培训有效促进人员素质的提升 B34 政府采购规范性 2 采购内容符合预算批复和项目的实际需要；执行规 范 的政府采购程序 C 项目绩效 65 C1 产出目 标 35 C11 行业情报联盟推进工程 研究完成率 3 100% C12 专利竞争情报研究完成 率 3 100% C13 情报平台行业网建设完 成率 3 100% C14 上图专递与国际大都市 研究完成率 3 100% C15 科技与产业完成率 3 100% C16 竞争情报核心能力培育 完成率 3 100% 20 C17专递人大简报完成率 3 100% C18 上海城市形象媒体测评 完成率 3 100% C19 上海行业情报发展联盟 建设完成率 3 100% C110 项目完成及时性 4 各子项目按照计划时间节点完成，与第三方签订服务合同的 项目，严格按照合同约定时间完成。项目完成及时率 100%。 C111 项目验收通过率 4 子项目严格按照验收标准或与第三方签订的服务合同约定 内容进行验收；若无验收标准和与第三方签订服务合同，按 照项目计划进行验收。项目验收通过率 100%。 C2 效果目 标 30 C21 知识库使用情况 5 知识库使用情况，使用次数上一年度 C22 知识库数据增量 5 知识库数据增量上一年度 C23 知识库创新性 5 知识库创新性良好 C24 知识库稳定性 5 稳定性良好 C25 使用者满意度 10 使用者满意度 90% 21 3、绩效标准 参见：附件 2“绩效评价指标体系工作底稿” 4、评价方法 项目组综合运用了文献研究、资料对比分析、数据分析、座谈访 谈、制度核查、案卷研究等方法开展绩效评价工作。具体参见：附件 2“绩效评价指标体系工作底稿”。 （四）证据收集方法 评估 组综合运用以下方法收集证据： 1、文件研读 。通过研读与 知识库系统建设 专项有关的国家、上 海市、上海图书馆及其各业务中心的相关文件资料来获取证据。 2、文档检查 。通过检查 知识库系统建设 专项实施的过程文件和 总结统计文档获取信息。 3、调研访谈 。 评估 组通过和专项实施过程中相关 业务中心的 工 作人员进行交流访谈获取信息。 评估组访谈调研了上海图书馆 业务处、 协调辅导处 、 文献提供 中心 、信息咨询与研究中心 等业务中心。 4、 服务对象 调查 。通过向 知识库相关的使用者开展 访谈等 调查， 并 参考 服务对象的评价反馈意见，判断项目实施的效果 。 具体参见：附件 2“绩效评价指标体系工作底稿”中“数据来源”。 （五）绩效评价实施过程 绩效评价实施过程分四个阶段： 第一阶段：前期调研，准确掌握项目基本情况 ； 第二阶段： 确 定绩效评价工作方案 ； 第三阶段：调查取数 ，实施绩效评价工作； 第四阶段：完成绩效评价报告。 22 （六）本次绩效评价的局限性 本次绩效评价的局限性主要在于： 由于一些项目服务对象为政府、 人大及 委办 领导，因此服务对象满意度没有用问卷调查的形式，调查 覆盖面有待提高 。 三、 评价结论和 绩效分析 （一）评价结论 1、评价结果 根据 2018 年度上海图书馆 知识库系统建设 专项绩效评价指标体 系中各评价指标的评分标准，结合走访调查等取得数据，得出以下评 价指标结果：专项绩效评价总得分 91.9 分，绩效评级为 优 。其中项 目决策得分 9 分，项目管理得分 21.9 分，项目绩效得分 61 分。 根据上海市预算绩效管理实施办法规定：绩效得分在 90 分 以上的，绩效评级为优；绩效得分在 75 分 -90 分内的，绩效评级为 良。本次“ 2018 年度知识库系统建设专项资金 ”的绩效评价得分为 91.9 分，因此，绩效评级为 优 。 2、主要绩效 2018 年 度上海图书馆 知识库系统建设 专项 绩效目标完成情况： （ 1）投入目标： 2018 年度 上海图书馆 知识库系统建设 专项 全年 财政拨款 预算经费总额 3,424,600.00元，实际支出 3,390,335.39元， 年度余额 34,264.61 元，预算执行率 99.0%。 资金使用与预算相符 。 专项的 财务 管理制度 和实施管理制度得到 较 有效执行，财政资金使用 的合规性 情况 良好 。 （ 2）产出目标： 2018 年度知识库系统建设 专项 9 个子项目 ，产 出完成情况良好， 项目 产出质量 需进一步提高 ，所有子 项目 均 按计划 如期完成。 23 （ 3） 效益及影响力目标：知识库系统建设专项实施，有利于上 海图书馆知识服务能力建设，有力地推动了为行业服务、为决策服务 的目标实现，专项在为高层决策提供支撑服务、强化优势领域能力建 设方面取得进展，较好地支持新型科技智库建设，但专项的整体定位、 子项目优化调整的机制需进一步发挥作用，知识库系统的核心能力建 设需不断提高。 （二）具体绩效分析 1、项目决策 项目决策是从决策层面考察 知识库系统建设 专项，主要从 项目立 项 和 项目目标 两 个维度去评价。该项一级指标满分值 10 分， 知识库 系统建设 专项得分值 9 分。 一级指标 二级指标 三级指标 满分值 得分值 A 项目决策 A1 项目立项 A11 项目目标适应性 2 2 A12 立项依据充分性 2 2 A13 项目立项规范性 2 2 A2 项目目标 A21 绩效目标合理性 2 2 A22 绩效指标明确性 2 1 小 计 10 9 （ 1） 项目立项 分析 ： 专项与 上海图书馆 发展 目标 相 适应 。上海图书馆上海科学技术情 报研究所 2016-2020 年发展规划（ 2016 年 3 月 14 日馆所五届二次 职代会通过）发展目标：着力打造 “ 支撑创新，支持决策 ” 的新型科 技智库 ，提供以科技、产业和文化为重点的情报服务。 因此，该专项 实施与上海图书馆发展规划的战略目标完全一致 。 该项 指标满分 2 分， 本专项得 2 分。 立项依据充分。 根据上海图书馆上海科学技术情报研究所上海 24 科学技术情报研究所 2016-2020 年发展规划主要任务和重点工作： “ 6、 夯基础重拓展，探索新型 科技智库 建设 6.3 加快智库支撑体 系建设 以情报知识库平台、专职情报研究队伍为核心，推动科技智 库支撑体系建设。加快国际大都市数据库、新兴产业专利数据库、企 业竞争情报数据库为重点的情报知识库建设，打造针对国内外科技 创 新 、国际 大都市竞争力跟踪、预警及监测研究平台 。 ”项目立项有完 整的批复资料。综上，该专项以十三五规划及立项批复为依据且关联 度高，得 2 分。 项目立项规范。 项目按照立项程序申请设立。总