摘要:随着我国科技计划管理体制改革的深入,科技评估工作越来越受到各级政府的高度重视,尤其是科技项目后评估。本文首先探讨并建立了科技项目后评估指标体系,在此基础上对上海某科技项目管理机构所承担管理的项目进行后评估进行实证研究,并提出若干对策建议。
关键词:科研管理;指标体系;实证分析;科技项目后评估
中国分类号:G311 文献标识码:A 文章编号:
0 引言
美国最早实施科技评估工作,20世纪初,美国成立国会服务部(CRS),直接针对各委员会及议员们提出的各类问题进行研究、分析和评估[1]。其中与科技有关的研究、分析和评估即可认为是科技评估的雏形。经过多年的发展,该项工作在美国已成为制度化、经常性的工作,并建立了科技评估支持系统。法国、德国、加拿大、日本、瑞士、瑞典、英国、澳大利亚、韩国等国家也逐步建立了自己的评估体系。科技项目后评估工作也是科技评估工作的重要组成部分,它主要是对科技活动产生的效益进行全方位的评定,从反馈的角度为科技管理部门提供决策、修改政策等方面的依据,因而在科技评估工作具有更重要的地位。实施科技项目后评估是促进我国自主创新战略进一步落实的需要,是认识科技发展特征、改善科技管理以及促进科技项目产业化的需要,同时还是制订科技发展规划和科技决策的重要依据和评价考核科技活动的重要手段与尺度。
科技项目后评估工作在国外已经受到广泛关注与重视,如美国的ATP自实施以来,NIST立项对ATP项目的总体效益进行跟踪评估[2]。该计划的评估分为ATP计划本身活动、产业界的实施完成情况、项目对经济的长期影响等五个方面。NIST评估研究认为,ATP激发了企业的研究与开发,缩短了企业R&D周期,创建了企业间的合作联盟。在国内,由于科技项目评估的工作起步相对较晚,中国科技评估中心、天津市科学技术评价中心、武汉科技咨询评估中心的科技评估研究工作走在全国前列,但在科技项目后评估方面的研究还未见到公开文献。
1 相关概念概述
本文中的科技项目是指政府公共财政投入的项目,主要集中在应用技术领域,能形成新产品和促进产品升级换代,或改进生产过程的新技术。所采用的理论模型为线性加权模型,它主要假设为指标之间的线性关系,要求指标之间不能线性相关,否则,就会发生指标相互关联现象从而影响评估结果。从系统学的观点看,模型对线性关系的假设也不尽合理,淹没了可能会发生的分支现象。因而在使用线性加权模型时,应对评估指标间的相互关系予以足够的重视。所用到的评估方法:在问卷调查法的基础上,加上了专家法与典型案例评估法,即采用了定性评估与定量评估,一般评估与个案评估相结合的综合评估方法。因而,评估数据来源真实可靠,评估方法科学。
2 科技项目后评估指标设计探讨
1)科技项目后评估指标设计原则
科技项目后评估指标设计应遵循全面性与简单化原则、科学性与清晰化原则、可比性原则、可操作性原则、独立性原则、动态完善原则等,力争评估全面放映科技对经济进步、社会发展、科技繁荣以及促进科技管理方面的作用。
2)科技项目后评估指标的构成
科技项目后评估指标体系主要包括科技项目的科技成果、经济效益、社会效益以及科技管理四个一级分指标体系,以体现被评估的科技项目对科技发展贡献情况、对经济发展的贡献情况以及对社会进步的贡献情况,从而全面反映科技项目的综合产出,见图1。并且在四个一级指标下包括若干个二级指以及三级指标,尤其社会效益的二级指标反映了科技对促进就业、人才培养、节能环保、改善人民生活水平、提高企业和地方竞争力的情况,体现了“科技以人为本”的基本理念和科学发展观的基本内涵。
图1科技项目后评估指标简要框图
Fig 1. Chart of for Step-evaluation index of Science & Technology item
表1 一级指标科技成果分指标体系
Table 1. Branch index system of Science & Technology products
2.1 科技成果分指标体系
一级指标科技成果分指标体系主要是反映科技项目的成果载体和表现形式。科技项目成果一般以论文、专利、样机和产品等形式为载体。本报告通过调查科技项目的载体量和科技项目的技术水平、获奖情况和该项目对我国技术水平的提高程度来综合评判项目的科技成果大小。一级指标科技成果分指标体下面还包括若干二级和三级指标,尤其社会效益的二级指标反映了科技对促进就业、人才培养、节能环保、改善人民生活水平、提高企业和地方竞争力的情况,体现了“科技以人为本”的基本理念和科学发展观的基本内涵,见表1。
2.2 经济效益分指标体系
经济效益指标主要是反映科技项目在项目结题后所产生的经济价值和对提高、改变产品结构的贡献。在一级指标下面还包括若干二级指标和三级指标。如科技项目产品的影响力下面有自主知识产权产品、新产品、升级换代产品、替代进口产品等,详情见表2。
表2 一级指标经济效益分指标体系
Table 2. Branch index system of economy benefit
表3一级指标社会效益分指标体系
Table 3. Branch index system of society benefit
2.3 社会效益分指标体系
社会效益分指标主要反映了科技项目对社会发展的贡献,包括科技项目的吸纳就业情况、人才培养情况、人才引进情况、提高地方的竞争力与实力、减少资源消耗情况、改善环境质量和人民生活水平、技术的带动性、提高企业的研发能力与改善生产情况、形成新的经济增长点、提高企业的纳税情况等二级指标。在每个二级指标下面又分若干三级指标。如包括吸纳大专及以下职工、吸纳本科学历、和吸纳研究生学历人数多少来反映吸纳就业情况,见表格3。
表4 一级指标科技管理分指标体系
Table 4. Branch index system of Science & Technology management
2.4 科技管理分指标体系
科技项目的科技管理分指标是反映科技管理制度建设对科技项目的影响,通过分析科技管理制度建设与科技项目各种产出的关联度,从而使科技项目管理者学习和掌握了科技项目管理的一些规律,进而改进管理方法和制度,促进科技项目的产业化。科技管理分指标体系的二级、三级指标见表4。
2 后评估实证分析
2.1评估概况
本次科技项目后评估对象为上海市某科技项目管理中心所管理项目,项目结题时间为2003年年底。采用问卷调查的方式来收集评估所需要的数据,共发放问卷109份(即被评估的科技项目为109项),回收问卷92份,总的回收率为84.4%,问卷填写较为完整有效。
图2 本次后评估项目承担单位分布
Fig 2. Distribution of organization that carry out having researched Science & Technology item
项目承担单位分布:本次进行后评估的科技项目分布在高校、研究所和企业,其中高校承担了30项,研究所承担了19项,企业承担了53项,见图2。此外,从企业承担项目的情况看,有限责任公司性质的企业承担的项目比例相对最高。
2.2 评估结论
(1)政府的科研投入资金起到引导作用。通过上海市科委的投入资金3949万元,被评估的项目共吸收政府其他计划资金3523万元,项目承担单位自投入10461万元,单位后续投入3473万元,吸收其它单位资金3631万元。总的来看,政府的科技投入有较大的带动性,引导了企业和社会资金的科技投入方向,并拓宽了科技投入的渠道。
(2)促进知识传播与技术创新。在各类期刊共计发表文章713篇,其中发表在国际有影响力期刊的论文为321篇,有效促进了知识的传播交流。同时申请国际专利7项,申请国内发明专利212项,实用新型专利59项,著作权登记9项,专有技术57项,行业技术标准5项,提高项目承担单位的技术创新能力。
(3)部分科技项目实现产业化 [1],支撑了经济社会发展。从科技成果所处阶段来看,虽然项目结题到本次评估的时间间隔仅为1年半(一般项目后评估的时间间隔为3-5年),但处于小批量和规模化生产阶段的项目占总项目数的比例已高达43%,并有多项技术提高了单位的市场占有率和纳税额度。
(4)促进产业技术的进步,引领经济社会发展。被评估项目的目前技术水平大部分处于国际先进和国内领先的位置,科技成果的作用主要是填补国内技术空白和缩小与国际的技术差距,技术对产品的促进作用主要是形成自主产品和替代进口产品。大部分被评估项目是对提高地方科技竞争力的作用明显,具有很好的技术带动性,提高了企业的研发能力和能形成新的经济增长点,是节能和环境友好技术。因而这批科技项目促进了产业的升级和引领了经济社会发展。
(5)实现产业化的科技成果年产值较高。被评估的中实现产业化的项目的年总产值为20348万元,为企业创造利润1629万元,出口创汇502万元,项目的 15个月的产值相当于全部投入成本[2]。这说明,虽然被评估项目的产业化比例只有40%多一点,但产值较高,说明科技投入是高风险和高收益的风险投资。
(6)促进社会高层次人才就业。本次被评估的项目为大专学历以上的高层次人才就业提供了458个,其中促进大专学历公民就业的人数最多,占总数的58%,本科次之。
(7)培养和引进了一批高级人才。本次被评估的项目共培养硕士研究生以上的高层次人才314人,其中培养硕士研究生的人数最多,占总数的65%,博士次之。另外,通过项目为平台载体,引进了一批高级人才,如院士和教授,还吸引了部分海外学子利用这些项目回国创业。
(8)科技项目管理制度对项目的科技产出有重要影响。通过分析,尽管各个管理指标与科技各个产出之间的相关程度不同,有强有弱,但还是有很多指标之间呈现明显或强烈相关性,见表4。如领导是否未产业化负责人、是否有产业化责任人、是否建立知识产权管理机构、是否建立知识产权管理制度、是否建立知识产权奖励制度、是否有知识产权专职管理人、科技成果产业化奖励制度及自筹研发经费的比例等指标与科技产出之间的关联系数较大,部分相关系数超过0.5。这说明科技管理制度是否完善将直接影响到科技项目的综合产出。
表4 管理指标与科技产出相关性分析比较
Table 4. Contrast and correlation analysis between management index and Science & Technology products
注:“-”表示两个指标之间做相关性分析没有实际意义或负的弱相关,1个“+”表示正的若相关,2个“+”表示有较为明显的相关,3个“+”表示强相关。
此外,论文的平均产出为255.63篇/千万元,其中光科技专项的论文单位产出最高(404.99篇/千万元),专利技术二次开发的论文产出最低(4.35篇/千万元)。而从项目承担单位来看,企业的论文单位产出最低,高校相对最高。而从项目承担单位来看,企业的专利实施比例最高,高校相对最低。但从项目承担单位来看,企业承担的项目的产业化程度最高,高校相对最低。而从项目承担单位来看,企业承担的项目促进就业的人数最高(尤其是股份公司、私营企业和有限责任公司),高校相对最低。从项目承担单位来看,企业承担的项目培养人才数最低,高校相对最高。
2.3 评估中发现的问题
在取得成绩的同时,在评估过程中,也发现了一些有待进一步改善的问题。①承担单位的项目管理制度滞后,很多项目承担单位的科技管理制度不完善,有很多单位还没有建立专利制度、成果转化制度等。②专利的申请量不高,专利实施比例不高,政府投入专利平均产出为22.5项/千万元,总投入的专利平均产出为3.6项/千万元,国际专利的申请和授权比例均低下,目前国内发明专利的授权比例普遍低下。③对知识产权的重视程度不够,“重文章,轻专利”的现象在高校表现得依然很严重,很多领域的科技成果还未以国际专利的形式保护起来,在国外发表了多篇文章,很可能造成知识产权的流失和国有无形资产的损失。同时,项目承担单位还对专有技术的储备和参与技术标准的制订工作重视不够。④科技项目后评估工作有待进一步加强,如存在项目承担单位在反馈调查问卷时就怠慢或不认真填写的现象。
4 对策建议
4.1科技项目立项申请方面的建议
第一,对于应用技术项目研究,建立以企业为主体的产学研联盟项目申报和优先立项制度。从评估的结论来看,高校的大部分科研项目的产出主要是发表文章和培养学生,很多科技成果停留在样机阶段,科技成果产业化比例低下。相比较而言,高校产业化的能力不强,而以企业为主体的产学研联盟、联合研发,既可以发挥企业的技术开发与产品化运作优势,又可以发挥高校的研究优势,相互取长补短,从而有利于科技成果的产业化。因此,有必要建立以企业为主体的产学研联盟项目申报和优先立项制度,增大项目承担单位自筹研究经费的比例。同时,建立项目滚动支持制度,通过客观评估,对于那些已经结题的市场前景好的项目,目前缺乏进一步研发和产业化所需的资金,应根据实际情况给予滚动支持。
第二,激活科技资源,加速科技成果在传统行业中的应用。我国有一批一流科研机构和科技创新人才,经过多年的研究积累,研究出大批的科技成果,但大部门科技成果还是停留在实验室样机、论文和专利层面上。因此,加强科技成果转化中介机构的建设显得尤未必要,特别是要提升科技中介机构的服务功能和效率,并且建立一套对公共科技中介机构的考核指标体系。一是强化科技中介机构的研究能力,改变中介机构过去仅仅是提供技术信息服务的面貌。中介机构必须具备较强的研究能力,不仅为客户提供技术信息,还要为客户提供全方位、交钥匙工程的服务能力。二是建立对公共财政支持的科技中介的绩效考核指标体系,提高其服务的效率与质量。三是建立社会化、企业化的科技中介企业,提高科技中介行业的竞争意识,加速科技成果在传统行业中的应用。
4.2对科技项目后评估工作的建议
首先,用定量评估和专家评估的综合法代替单纯的专家评估法。目前的科技立项、结题评估都是临时组织专家评估,由于专家评估多数情况下是凭主观评价,缺乏客观数据,同时限于专家个人的知识面和眼界,很可能造成评估的失客观性。而定量评估和专家评估的综合法就可以弥补上述专家评估的缺陷。
其次,尽快建立专业化的科技后评估机构。首先,建立专业化、相对独立的科技后评估机构,有利于科技成果的产业化,因为项目承担单位总会感到有独立的科技评估机构要对其研究成果进行长期跟踪评估,会很认真的对待他所承担的项目,按照立项指标要求完成。其次,这些专业化评估机构可以是“小实体、大网络”的组织架构来运作,在重大科技项目结题后3年、5年、7年后,依次对其进行动态跟踪评估。
再次,建立合理的评估体系,深化产学研联盟。当前上海技术创新链的不协调和断链迫切需要通过产学研联盟来弥补,而破解产学研联盟中的现实问题就是要解决产学研联盟过程中的权利、能力与动力问题,建立科学合理的评估体系。一是推动对学校、研究所和企业的综合科学的评估指标建立。综合评估指标中要包涵技术成果和技术转化指标和科技投入力度指标,并把这些指标列入对单位负责人业绩的考核中。在这里特别值得一提的是随着科研院所改制后有的被并入高校,高校的研究所必须有专职的研究人员,而且这些研究人员应该成为研究的中坚力量和科技项目的产业化负责人。因为如果项目产业化负责人是教授,教授的主要职责是教书和培养研究生,其研究过程中的研究力量是研究生,而研究生一旦毕业,就很容易造成技术的流失。二是建立严格的验收管理体系,甚至可以采取第三方验收的办法,每一项科研攻关项目,通过现场试验,测试达到预定的性能指标,方能通过技术鉴定。同时,每一项科研攻关项目,都必须确保有自己的知识产权,必须有若干项专利申请,方能进行推广。
最后,进一步落实科技评估法规,不断完善科技项目后评估管理制度。从本次评估的实践来看,有很多单位认为所承担的课题已经结题,政府拨款已完毕。因而在反馈调查问卷时就很怠慢,或者不认真填写,甚至不反馈评估问卷,影响了评估数据的真实性,从而影响到整个项目后评估的科学性。因此,非常有必要在课题立项协议书时加上一个附加条款:项目承担有法律责任和义务为科技评估机构提供真实的评估用数据,确保科技项目后评估工作顺利进行。
[参考文献]
[1] 一般认为,处于小批量的科技项目就可以认定为已经实现了产业化。
[2] 总投入成本是指通过科技部门的投入、政府其他计划投入、其它单位投入和单位自投入与后续投入之和。
[1] 国家科技评估中心.国际评估概述[OL].[ 2002-10-13] http://www.ncste.org.
[2]王德生.国外实施重大科技产业化项目管理与评估的案例之一(美国先进技术发展计划和尤里卡计划)[OL].[ 2005-04-13].http://www.chinainfo.gov.cn/data/200504/1_20050413_108195.html.
Discussion on index of step-evaluation for science & technology item and positive analysis
YE Jitao
(Shanghai Institute for science of science, Shanghai 200235)
Abstract:With administering system and regulation on science & technology reforming, the task on evaluation of science & technology item is going to be more regarded by all levels government, especial step-evaluation of science & technology item. We discussed and established index system of step-evaluation for science & technology item first. Second, above them, we had positively evaluated and analyzed science & technology items that had been managed by an organization in Shanghai. Finally, some countermeasures have been brought forward in the article.
Key words:Science & Technology management; Index system; Positive analysis; Step-evaluation of Science & Technology item