论文部分内容阅读
摘 要：目的 对青海省科技评估实践活动进行全面分析，为其科技创新管理提供参考。方法 以省级工程技术研究中心评估为例，对科技评估的一般程序、方法、评估指标体系进行分析。结果 根据实践分析提出完善科技评估工作建议：建立健全第三方科技评估机制，逐步转移政府评估职能；结论 评估指标构建时应重视各方参与，保证评估指标的科学合理性； 建立一套评估与部门管理相结合、多渠道应用评估结果的有效机制，以评促管充分发挥科技评估的作用； 加强评审专家队伍建设，充分发挥专家的智库作用。
关键词：科技创新 青海 科技评估 工程技术研究中心 指标体系
中图分类号：G311 文献标识码：A 文章编号：1672-3791（2017）05（a）-0192-03
科技评估作为一项专业化的活动，能为决策者提供科学的参考依据，是政府管理部门了解科技活动基本情况、提高科技资源的利用率、增大科技投入产出效益的重要手段。随着我国创新驱动发展战略的全面实施和科技体制改革的深入推进，科技评估工作已经制度化，并融入到科技计划管理的各个环节。目前，全国大部分省市都在积极开展科技评估活动，许多发达省市的科技评估体系已初具规模，全国的科技评估体系建设稳步推进。近年来青海省综合实力显著提高，科技、经济、社会发展的步伐不断加快，科技投入作为科学创新的物质基础，省级财政每年都对科技投入大量资金以促进科技创新。以2015年为例，全省财政科技投入4.12亿元，带动全社会科技投入20亿元，共组织实施科技计划项目301项[1]。在这种情况下，如何优化科技资源配置，保障科研活动质量，改善科技计划管理水平，增强青海省科技项目制定和实施的科学性就显得尤为重要。因此，我们应积极借鉴国内外各地科技创新评估的成功案例，结合青海省当前科技创新发展的新形势、新需求，开发符合该省省情的科技评估体系，为推动青海科技创新和经济社会发展作出应有的贡献。
1 青海省科技评估实践基础
2008年，青海省科技厅印发《青海省科技计划（课题）概预算评估评审暂行办法》[2]，明确规定要对科技项目进行经费预算评估评审，对经费预算执行情况进行检查，以及组织开展经费审计和绩效考评等工作。2009年，青海省科技厅发布《青海省基本科技计划管理暂行办法》[3]和《青海省重大科技专项计划管理暂行办法》，这些文件中明确提出要对申报的科技项目实行专家评审与行政决策相结合的立项审批制度，同时要对项目的实施加强监督和评估。2009年，青海省科技厅、省经济委员会和省财政厅三部门联合发布《青海省工程技术研究中心管理办法》，办法中对工程技术研究中心的组建评审、考核评估、验收等作了明确规定，制定了包括组建期和運行期在内的整套考评体系。2009年，青海省科技厅和青海省财政厅联合发布《青海省重点实验室管理办法》 ，同年，青海省科技厅发布《青海省重点实验室评估办法》 ，2013年，青海省科技厅发布《青海省重点实验室评估实施细则》 ，这些文件规定“青海省重点实验室评估实行定期评估，具体的评估工作由省科技厅组织相关专家或者委托第三方评估机构实施。评估结果分为优秀、合格和不合格三个等级。对排序在20%的确定为优秀实验室，给予重点支持。对评估不合格的重点实验室，按照评估意见限期整改”。2013年，青海省科技厅印发《青海省科研机构创新绩效评价方案（暂行）》 ，对科研机构的创新绩效评估做了相关规定。
2 青海省科技评估实践概况
青海省开展科技评估工作以来，相继设立了一些专业的科技评估机构。目前，从事科技评估的专业机构主要有青海省科学技术信息研究所科技评估中心、青海省生产力促进中心、青海省科技咨询服务中心等几家科技评估咨询机构。从青海省目前已开展科技评估活动来看，评估的对象主要有：科技计划评估；科技项目评估；科技成果评估；科研机构评估；科技人才评估；科技创新平台评估等。从评估阶段来看，具体包括：科技成果的评估；科技项目的立项评估评审、中期评估和验收；科技计划的评估，如青海省“十二五”评估，青海省重大科技专项的可行性论证，青海省“123”科技支撑工程项目执行评估及绩效评估；科研机构创新绩效评估；科技创新平台评估，如重点实验室评估、省级工程技术研究中心评估；省级农业科技园区评估；自然科学与工程技术学科带头人考核评估；高新技术企业的认定、评价工作等，见表1。
随着青海省科技评估范围的逐步扩大，评估程序走向规范化，评估方式不断调整优化，青海省科技评估的指标体系也在不断完善，如青海省科技项目的立项评估、科研机构创新绩效评估、重点实验室评估、省级工程技术研究中心评估等都制定了相应的评估指标体系，为青海省科技评估工作提供了较为完善的指标体系。
以青海省省级工程技术研究中心（简称工程中心）评估实践为例，完整的评估体系包括评估方法选用、程序的确定、评估指标的设计及权重划分、评估标准的制定等。作为我省科技成果转化和高水平技术人才集聚的重要科技创新平台，评估的目的在于加强工程中心的建设和运行管理，提高工程中心对科技成果的工程转化能力，确保资金的有效投入。
2.1 评估内容、程序及方法
2.1.1 评估内容
包括工程化能力与水平、开放交流与运行管理、依托单位效益与影响三个方面。
2.1.2 评估程序
评估流程如下：提出评估需求——评估准备——评估分析与综合——评估结果。
具体评估过程包括：（1）明确评估的目的，设计评估方案以及制定评估指标；（2）各工程中心依托单位提供相关考评材料；（3）组织相关行业领域专家召开评审会，会上组织各单位负责人就工程中心建设和发展情况进行答辩，与会专家结合答辩情况及相关材料进行评估打分；（4）相关部门根据专家打分结果，对参与评估的工程中心进行排名。
2.1.3 评估方法
在综合考虑各种评估方法的准确性、适应性以及合理性的基础上，采用专家会议评估打分和指标体系相结合的评估方法。 2.2 评估指标体系的确定
2.2.1 指标体系构建原则
⑴ 全面性原则。评估指标应完整全面的反映工程中心的运行及发展情况，以保证评估结果的真实有效。
⑵ 一致性原则。评估指标的制定应结合工程中心的发展方向，保证评估目的与其发展目标的一致性。
⑶ 定量性原则。评估指标体系建立的目的主要是为了避免评估工作中出现的主观随意性[11]。因此，评估指标应尽可能量化，并为各指标合理分配权重系数。
⑷ 科学实用性原则。指标体系的设计要科学合理，能够充分反映个工程中心的实际水平。同时，指标要简便、实用、可操作性强。
2.2.2 指标及权重的确定
制定科学合理的指标体系是正确评估的关键。在评估指标的具体设计中，根据对工程中心各方面的研究调查，对工程中心的工程化能力与水平方面的评估，从其研究方向与定位、研究开发能力以及科技成果产出三个方面进行全面评估；对工程技术研究中心的对外开放与运行管理方面的评估，以其开展国内外技术合作与交流，吸引国内外人才，基础设施开放服务以及规章制度建设和运行管理等为主要依据，从工程技术研究中心的对外开放交流和运行管理进行评估；对依托单位效益与影响方面的评估，主要从依托单位所取得的经济效益以及对本行业领域的影响和作用两个方面进行评估。
具体的工程中心评估指标体系主要包括3个一级指标，即“工程化能力与水平、对外开放与运行管理、依托单位效益与影响”，7个二级指标。此外设置加分项，包括“高端人才”、“知识产权”、“首台套设备和工艺”和“大型仪器设备”4项指标。在评估指标体系中，各项指标的作用大小不同，赋予的权重系数不同，经过综合考察，权重分配比为6∶3∶1∶2，在实际评分中总分按120分计，其中加分项20分。具体的指标及相应的权重如表2所示。
2.2.3 评估细则的制定
为了使专家打分过程中对评估指标的度量标准趋于一致，降低人为因素对评估结果的影响，针对每个指标制订了具体的评分细则。以“工程化能力与水平”的二级指标“研究开发能力”为例（设定该指标的分值为32分 ），相应的评估细则如表3所示 。
2.3 评估结果及其应用
通过评估及讨论，对专家打分排名在前15%的工程中心给予滚动支持，对运行情况较差的工程中心提出整改意见，对不按规定期限和要求提供相关评估材料的或无故不参加评估、不符合青海省工程技术研究中心运行管理要求的单位取消工程中心资格。评估结果对工程中心的了运行情况、完成效果与影响、经济效益、组织管理的有效性等进行了很好的评判，为后续的平台建设、资金支持、管理和调整定位提供了依据 。
3 提高青海省科技评估能力的建议
面对科技发展的新形势、新需求，科技创新活动日益复杂化、多元化，评估工作的难度进一步加大，以往行之有效的评估方法面临挑战甚至失效。为了更好地适应科技创新发展的需要，进一步发挥科技评估在科技创新管理工作中的服务支撑作用，该文结合青海省科技评估实践中存在的问题，从以下几个方面给出完善相关评估工作的思考和建议。
3.1 评估主体方面
该省当前的科技评估工作是在省政府的主导下展开的。评估活动基本上都是由政府相关管理部门组织和管理，在评估活动的设计和实施、评估方式、评估对象以及评估内容的选择上受到很大程度的行政干涉，严重违背了科技评估的独立性、公正性、客观性原则。为此，政府应逐步转移评估职能，委托相对独立的第三方评估机构，减少对科技评估的具体管理，将工作重心放在制定政策、调整计划、加强监督、强化管理和优化环境等职能上。同时，进一步加强科技评估制度建设，建立健全第三方科技评估体制机制，在第三方独立评估机构有效承接政府转移职能的同时，推行政府问责制，强化监督管理，保证评估结果的客观性、公正性。
3.2 指标构建方面
青海省的评估指标的设置多数都是由行政作导向，自上而下进行的，主要参考的是管理部门的意见和专家咨询意见，而评估客体参与性不足，容易出现评估指标选取不合理，导致评估结果失真的情况。因此，政府管理部门在指标设置中应当重视与评估各方的沟通与交流，统一理念，明确评估方向，制定出科学合理的指标体系。
3.3 评估结果的运用方面
目前，虽然各单位都开展了评估工作，但尚未有单位通过评估为管理提供好的建设性建议，更多的只是分析评估指标然后得出评估结论无异常，对评估结果的运用多流于形式。究其原因，主要在于缺乏有效的激励约束机制，没有引起各参与单位足够的重视。因此，在今后的工作中，一是要做到评估分析与实地调查相结合，确保评估质量；二是积极探索和建立一套评估与部门管理相结合、多渠道应用评估结果的有效机制，以评促管充分发挥科技评估的作用；三是建立评价结果反馈与监督机制。相关部门要在评价工作结束后，将评价情况、存在的问题及相关建议及时反馈给被评价单位，并督促其落实整改，以增强评价工作的约束力。将评价结果反馈与整改作为评估工作的一项重要内容，即形成“決策——管理——评估——结果——反馈——整改”的评估模式。
3.4 评审专家队伍建设方面
专家评议作为主要的评估方法之一，评估专家自身的专业知识水平在一定程度上会影响评估质量。目前青海省已初步建立了科技专家库系统，评估专家主要从专家库中抽选。但由于我省专家资源比较匮乏，存在行业覆盖不全面、专家结构不合理、数量不足等问题，挑选的专家在评估过程中难免会出现对评估内容把握性不足的情况，从而影响评估质量。此外专家库管理机制不够完善，缺乏完备的管理手段，如专家信息更新不及时，缺乏专家信用评价体系等。今后应进一步加强我省科技专家库建设工作，通过多渠道、开放式地征集和选取的方式扩充专家库，同时建立健全管理机制，完善专家库制度，充分发挥专家的智库作用。
参考文献
[1] 张旭，李光强.2015年青海省科学技术发展报告[M].青海：青海省科学技术厅，2016：3-4.
[2] 青海省科技厅.青海省科技计划（课题）概预算评估评审暂行办法[Z].2008.
[3] 青海省科技厅.青海省基本科技计划管理暂行办法[Z].2009.
关键词：科技创新 青海 科技评估 工程技术研究中心 指标体系
中图分类号：G311 文献标识码：A 文章编号：1672-3791（2017）05（a）-0192-03
科技评估作为一项专业化的活动，能为决策者提供科学的参考依据，是政府管理部门了解科技活动基本情况、提高科技资源的利用率、增大科技投入产出效益的重要手段。随着我国创新驱动发展战略的全面实施和科技体制改革的深入推进，科技评估工作已经制度化，并融入到科技计划管理的各个环节。目前，全国大部分省市都在积极开展科技评估活动，许多发达省市的科技评估体系已初具规模，全国的科技评估体系建设稳步推进。近年来青海省综合实力显著提高，科技、经济、社会发展的步伐不断加快，科技投入作为科学创新的物质基础，省级财政每年都对科技投入大量资金以促进科技创新。以2015年为例，全省财政科技投入4.12亿元，带动全社会科技投入20亿元，共组织实施科技计划项目301项[1]。在这种情况下，如何优化科技资源配置，保障科研活动质量，改善科技计划管理水平，增强青海省科技项目制定和实施的科学性就显得尤为重要。因此，我们应积极借鉴国内外各地科技创新评估的成功案例，结合青海省当前科技创新发展的新形势、新需求，开发符合该省省情的科技评估体系，为推动青海科技创新和经济社会发展作出应有的贡献。
1 青海省科技评估实践基础
2008年，青海省科技厅印发《青海省科技计划（课题）概预算评估评审暂行办法》[2]，明确规定要对科技项目进行经费预算评估评审，对经费预算执行情况进行检查，以及组织开展经费审计和绩效考评等工作。2009年，青海省科技厅发布《青海省基本科技计划管理暂行办法》[3]和《青海省重大科技专项计划管理暂行办法》，这些文件中明确提出要对申报的科技项目实行专家评审与行政决策相结合的立项审批制度，同时要对项目的实施加强监督和评估。2009年，青海省科技厅、省经济委员会和省财政厅三部门联合发布《青海省工程技术研究中心管理办法》，办法中对工程技术研究中心的组建评审、考核评估、验收等作了明确规定，制定了包括组建期和運行期在内的整套考评体系。2009年，青海省科技厅和青海省财政厅联合发布《青海省重点实验室管理办法》 ，同年，青海省科技厅发布《青海省重点实验室评估办法》 ，2013年，青海省科技厅发布《青海省重点实验室评估实施细则》 ，这些文件规定“青海省重点实验室评估实行定期评估，具体的评估工作由省科技厅组织相关专家或者委托第三方评估机构实施。评估结果分为优秀、合格和不合格三个等级。对排序在20%的确定为优秀实验室，给予重点支持。对评估不合格的重点实验室，按照评估意见限期整改”。2013年，青海省科技厅印发《青海省科研机构创新绩效评价方案（暂行）》 ，对科研机构的创新绩效评估做了相关规定。
2 青海省科技评估实践概况
青海省开展科技评估工作以来，相继设立了一些专业的科技评估机构。目前，从事科技评估的专业机构主要有青海省科学技术信息研究所科技评估中心、青海省生产力促进中心、青海省科技咨询服务中心等几家科技评估咨询机构。从青海省目前已开展科技评估活动来看，评估的对象主要有：科技计划评估；科技项目评估；科技成果评估；科研机构评估；科技人才评估；科技创新平台评估等。从评估阶段来看，具体包括：科技成果的评估；科技项目的立项评估评审、中期评估和验收；科技计划的评估，如青海省“十二五”评估，青海省重大科技专项的可行性论证，青海省“123”科技支撑工程项目执行评估及绩效评估；科研机构创新绩效评估；科技创新平台评估，如重点实验室评估、省级工程技术研究中心评估；省级农业科技园区评估；自然科学与工程技术学科带头人考核评估；高新技术企业的认定、评价工作等，见表1。
随着青海省科技评估范围的逐步扩大，评估程序走向规范化，评估方式不断调整优化，青海省科技评估的指标体系也在不断完善，如青海省科技项目的立项评估、科研机构创新绩效评估、重点实验室评估、省级工程技术研究中心评估等都制定了相应的评估指标体系，为青海省科技评估工作提供了较为完善的指标体系。
以青海省省级工程技术研究中心（简称工程中心）评估实践为例，完整的评估体系包括评估方法选用、程序的确定、评估指标的设计及权重划分、评估标准的制定等。作为我省科技成果转化和高水平技术人才集聚的重要科技创新平台，评估的目的在于加强工程中心的建设和运行管理，提高工程中心对科技成果的工程转化能力，确保资金的有效投入。
2.1 评估内容、程序及方法
2.1.1 评估内容
包括工程化能力与水平、开放交流与运行管理、依托单位效益与影响三个方面。
2.1.2 评估程序
评估流程如下：提出评估需求——评估准备——评估分析与综合——评估结果。
具体评估过程包括：（1）明确评估的目的，设计评估方案以及制定评估指标；（2）各工程中心依托单位提供相关考评材料；（3）组织相关行业领域专家召开评审会，会上组织各单位负责人就工程中心建设和发展情况进行答辩，与会专家结合答辩情况及相关材料进行评估打分；（4）相关部门根据专家打分结果，对参与评估的工程中心进行排名。
2.1.3 评估方法
在综合考虑各种评估方法的准确性、适应性以及合理性的基础上，采用专家会议评估打分和指标体系相结合的评估方法。 2.2 评估指标体系的确定
2.2.1 指标体系构建原则
⑴ 全面性原则。评估指标应完整全面的反映工程中心的运行及发展情况，以保证评估结果的真实有效。
⑵ 一致性原则。评估指标的制定应结合工程中心的发展方向，保证评估目的与其发展目标的一致性。
⑶ 定量性原则。评估指标体系建立的目的主要是为了避免评估工作中出现的主观随意性[11]。因此，评估指标应尽可能量化，并为各指标合理分配权重系数。
⑷ 科学实用性原则。指标体系的设计要科学合理，能够充分反映个工程中心的实际水平。同时，指标要简便、实用、可操作性强。
2.2.2 指标及权重的确定
制定科学合理的指标体系是正确评估的关键。在评估指标的具体设计中，根据对工程中心各方面的研究调查，对工程中心的工程化能力与水平方面的评估，从其研究方向与定位、研究开发能力以及科技成果产出三个方面进行全面评估；对工程技术研究中心的对外开放与运行管理方面的评估，以其开展国内外技术合作与交流，吸引国内外人才，基础设施开放服务以及规章制度建设和运行管理等为主要依据，从工程技术研究中心的对外开放交流和运行管理进行评估；对依托单位效益与影响方面的评估，主要从依托单位所取得的经济效益以及对本行业领域的影响和作用两个方面进行评估。
具体的工程中心评估指标体系主要包括3个一级指标，即“工程化能力与水平、对外开放与运行管理、依托单位效益与影响”，7个二级指标。此外设置加分项，包括“高端人才”、“知识产权”、“首台套设备和工艺”和“大型仪器设备”4项指标。在评估指标体系中，各项指标的作用大小不同，赋予的权重系数不同，经过综合考察，权重分配比为6∶3∶1∶2，在实际评分中总分按120分计，其中加分项20分。具体的指标及相应的权重如表2所示。
2.2.3 评估细则的制定
为了使专家打分过程中对评估指标的度量标准趋于一致，降低人为因素对评估结果的影响，针对每个指标制订了具体的评分细则。以“工程化能力与水平”的二级指标“研究开发能力”为例（设定该指标的分值为32分 ），相应的评估细则如表3所示 。
2.3 评估结果及其应用
通过评估及讨论，对专家打分排名在前15%的工程中心给予滚动支持，对运行情况较差的工程中心提出整改意见，对不按规定期限和要求提供相关评估材料的或无故不参加评估、不符合青海省工程技术研究中心运行管理要求的单位取消工程中心资格。评估结果对工程中心的了运行情况、完成效果与影响、经济效益、组织管理的有效性等进行了很好的评判，为后续的平台建设、资金支持、管理和调整定位提供了依据 。
3 提高青海省科技评估能力的建议
面对科技发展的新形势、新需求，科技创新活动日益复杂化、多元化，评估工作的难度进一步加大，以往行之有效的评估方法面临挑战甚至失效。为了更好地适应科技创新发展的需要，进一步发挥科技评估在科技创新管理工作中的服务支撑作用，该文结合青海省科技评估实践中存在的问题，从以下几个方面给出完善相关评估工作的思考和建议。
3.1 评估主体方面
该省当前的科技评估工作是在省政府的主导下展开的。评估活动基本上都是由政府相关管理部门组织和管理，在评估活动的设计和实施、评估方式、评估对象以及评估内容的选择上受到很大程度的行政干涉，严重违背了科技评估的独立性、公正性、客观性原则。为此，政府应逐步转移评估职能，委托相对独立的第三方评估机构，减少对科技评估的具体管理，将工作重心放在制定政策、调整计划、加强监督、强化管理和优化环境等职能上。同时，进一步加强科技评估制度建设，建立健全第三方科技评估体制机制，在第三方独立评估机构有效承接政府转移职能的同时，推行政府问责制，强化监督管理，保证评估结果的客观性、公正性。
3.2 指标构建方面
青海省的评估指标的设置多数都是由行政作导向，自上而下进行的，主要参考的是管理部门的意见和专家咨询意见，而评估客体参与性不足，容易出现评估指标选取不合理，导致评估结果失真的情况。因此，政府管理部门在指标设置中应当重视与评估各方的沟通与交流，统一理念，明确评估方向，制定出科学合理的指标体系。
3.3 评估结果的运用方面
目前，虽然各单位都开展了评估工作，但尚未有单位通过评估为管理提供好的建设性建议，更多的只是分析评估指标然后得出评估结论无异常，对评估结果的运用多流于形式。究其原因，主要在于缺乏有效的激励约束机制，没有引起各参与单位足够的重视。因此，在今后的工作中，一是要做到评估分析与实地调查相结合，确保评估质量；二是积极探索和建立一套评估与部门管理相结合、多渠道应用评估结果的有效机制，以评促管充分发挥科技评估的作用；三是建立评价结果反馈与监督机制。相关部门要在评价工作结束后，将评价情况、存在的问题及相关建议及时反馈给被评价单位，并督促其落实整改，以增强评价工作的约束力。将评价结果反馈与整改作为评估工作的一项重要内容，即形成“決策——管理——评估——结果——反馈——整改”的评估模式。
3.4 评审专家队伍建设方面
专家评议作为主要的评估方法之一，评估专家自身的专业知识水平在一定程度上会影响评估质量。目前青海省已初步建立了科技专家库系统，评估专家主要从专家库中抽选。但由于我省专家资源比较匮乏，存在行业覆盖不全面、专家结构不合理、数量不足等问题，挑选的专家在评估过程中难免会出现对评估内容把握性不足的情况，从而影响评估质量。此外专家库管理机制不够完善，缺乏完备的管理手段，如专家信息更新不及时，缺乏专家信用评价体系等。今后应进一步加强我省科技专家库建设工作，通过多渠道、开放式地征集和选取的方式扩充专家库，同时建立健全管理机制，完善专家库制度，充分发挥专家的智库作用。
参考文献
[1] 张旭，李光强.2015年青海省科学技术发展报告[M].青海：青海省科学技术厅，2016：3-4.
[2] 青海省科技厅.青海省科技计划（课题）概预算评估评审暂行办法[Z].2008.
[3] 青海省科技厅.青海省基本科技计划管理暂行办法[Z].2009.