您现在的位置: 新晨范文网 >> 企业管理 >> 项目评估论文 >> 正文

论软科学项目绩效评价指标体系的构建

2019/05/22 阅读:

摘要:构建适合我国软科学项目并具有可操作性、客观性的绩效评价指标体系是当前软科学项目管理工作中的重要环节。文章采取理论与实证相结合的方法对软科学项目绩效评价指标体系进行研究,通过确定软科学项目绩效评价指标以及指标的权重,结合德尔菲法和模糊综合评价法,构建我国软科学项目绩效评价指标体系,对某软科学研究类项目进行了实证分析。

关键词:软科学项目;绩效评价;指标体系

引言

近年来,我国政府相关部门对于软科学研究项目的评价办法和制度规范不断进行更新和完善,但现阶段软科学项目绩效评价体系仍不是很健全。目前,我国软科学项目的评价大部分集中在立项评价上,对绩效评价仍研究较少。从评价内容来看,软科学项目绩效评价侧重于项目的学术价值和经济效益,对研究项目的社会效益和决策影响等方面的绩效评价还是很缺乏。然而,这些评价内容对于软科学持续健康发展是很关键的。为了解决软科学项目绩效评价在实际操作过程中可能出现的主观性太强等问题,本文根据软科学项目相关绩效评价方法的特点和适用范围,结合德尔菲法和模糊综合评价法,构建适合我国软科学发展方向的定性与定量相结合的软科学项目绩效评价指标体系,改进了以往单纯的定量或定性分析的片面性问题,提高评价结果的科学性和客观性。

1软科学项目绩效评价指标体系设计原则及指标选取

建立软科学项目绩效评价指标是绩效评价体系中的关键步骤,直接影响绩效评价结果的客观性和科学性[1]。评价指标的设定需要以相关法律法规为基准,对研究项目进行综合考察和评价。为了方便不同种类的科研项目的有效比对,需要将这些定性指标进行标度设计。

1.1设计原则

(1)科学性和先进性原则绩效评价指标体系必须充分科学地体现评价对象的评价内容。每个指标体系不仅需要体现软科学项目绩效评价的特点,而且需要引领我国软科学研究的发展方向。设立指标体系既要涵盖综合评价的标准,又需要使评价指标具有科学性和先进性。指标划分必须明确,不能出现对某些方面评价模糊不定的情况,保证所有评价专家在进行评价时都能清楚了解指标所传达的含义,并且给出具体明确的评价。(2)规范化和定量化原则软科学项目绩效评价指标设立必须规范,不能太随意。同时,为了实现软科学相关项目可以进行比较分析,指标设计需要规范和满足定量化要求,使绩效评价结果更具规范性和科学性,不断完善软科学项目绩效评价指标体系。(3)简洁性和可辨识性原则指标设立得简洁明了能够节省绩效评价过程中很多不必要的时间,并且让评价专家能够更顺利地对评价对象进行确切的评价,避免评价内容的模糊性[2]。同时,政府相关部门始终需要对评价过程进行监督,对评价结果进行审核,保证软科学项目绩效评价结果的规范性和科学性。

1.2指标选取

(1)学术价值指标对软科学项目的学术价值进行分析和评价,首先就要看该项目在这一学科领域中所处的地位及对该学科未来发展的作用和影响。有5个具体指标可以反映:①成果水平的先进性,即该项研究成果与国内国外同学科、同领域的研究成果相比,其领先程度或研究成果水平能达到的高度;②研究内容的创新性,主要反映该项研究成果是否提出了新思想、新方向,是否对以往的相关研究理论进行深化研究,是否对其他学者以及社会各界有所启发;③研究方法的科学性,主要是反映了研究项目相关数据的取得是否充分合理,研究内容、结论和方法是否科学;④研究的深度和难度,主要反映该项研究采用的理论、方法所涉及学科面上的广度,研究对象所涉及领域的广度和研究深度、难度等。⑤成果表述水平及规范性,主要反映该研究成果的文字表述是否简明、准确,成果完成的技术文件是否完整和规范,是软科学研究成果质量的一个重要标志。(2)经济效益指标经济效益包括软科学项目成果转化带来的直接经济效益和间接经济效益。一项科研项目的应用及转化成经济效益,最直接的是增加收入和附加值等。评价软科学项目的经济效益指标,首先就要分析它是否能直接带来一定的经济效益。其次,要分析该项目是否能推动相关企业进行改革创新以及对市场的刺激作用,从而会产生间接增加经济收益的效果。经济效益指标包括:直接经济效益,反映该研究项目是否直接带来一定的经济效益;间接经济效益,反映该研究项目是否推动企业改革创新、刺激市场需求,或带来其他方面的经济效益。(3)社会效益指标社会效益主要指国家安危、社会发展、人类进步和环境保护等。

评价软科学项目的社会效益,应全面、客观地分析其对社会各领域的作用。社会效益指标主要包括:人才培养,反映软科学项目是否具有培养软科学相关专门人才,特别是青年软科学人才的作用;可持续影响,反映该项目在未来时间里解决相关研究问题或提供借鉴参考作用的持久性[3];学科建设,反映软科学项目对发展软科学学科的主体建设,引导软科学研究方向的作用。(4)科技进步指标科技进步主要指对采用的相关科学科技是否位于学科前沿、是否推动我国科技发展。软科学项目体现了一个国家在科技发展、创新能力和技术水平等方面的能力。科技进步指标越高,对经济增长的拉动作用就越大。科技进步指标具体包括:创新能力,主要是在当前科技发展水平上,对科学技术的创新程度;技术水平,是指是否使用了目前市场上已更新的科学技术。(5)运行能力指标运行能力主要用来评价科研项目运行过程的流畅情况,以及运行结束后产生的效果。对软科学项目进行分析评价时,应分析它运行能力的完整性和可操作性。其次,还要重视该项目的潜在能力和再生能力。运行能力具体指标:投入产出能力,体现了科研项目的运行效率,是否高效的利用了所投入的各项资源[4];适用转化能力指是否适当的转化了相应的资源,让各种资源充分发挥各自的功效;潜在再生能力,体现科研项目在运行过程中,不仅充分利用当前资源,而且在综合各种资源的情况下,发挥了其他推动科研项目顺利完成的能力。(6)决策效益指标决策效益指项目研究提出的改进方法、对策建议等实际工作中是否能够有效使用于政府的相关决策中。决策效益更多的是评价科研项目在完成之后对于政府相关部门、社会的利用程度,体现了科研项目的使用效果和使用效率。决策效益的具体指标:政策建议科学化,指科研项目研究结论的合理性、对政府决策的启发性;决策采纳程度,指科研项目是否推动政府相关部门颁布相应的政策、文件、决定等;成果普及率,指科研项目成果应用的广泛性。指标体系整理如表1所示。

1.3指标权重的确定

软科学项目绩效评价指标体系既包含了其他科技项目评价共同的要素和操作流程,同时在系统中体现了软科学的特殊性。本文在考虑评价指标的客观性基础上,采用德尔菲法确定指标体系中各指标的权重。请软科学项目管理人员、软科学评审专家等人分别给出指标权重,整理汇总专家意见后,再把汇总的结果逐一反馈给各位专家,请专家在知晓其他专家给出的权重的情况下,对自己的意见重新考虑,再次给出各指标的权重。在综合各位专家意见的基础上,其最终指标及权重分配如表1所示。

2软科学项目绩效评价案例

本文选取某软科学研究类项目作为研究对象,该项目是在建立流域生态文明评测指标的基础上,结合生态文明示范区以及流域的特征对流域生态文明的评测方法进行研究。为了保证该项目绩效评价结果的客观性和科学性,共邀请了9位评价专家参与评价工作,并邀请了相关学者和科研人员对评价过程进行实时监督以及在绩效评价工作过程中及时提出改进意见。

2.1指标体系的运用

(1)指标标度设计本文采用四点标度设计法,为每一指标设计四个标度,分为优秀、良好、中等、较差四个档次,评价专家组根据价值判断作出相应选择。此次调查请9位专家用以上6个二级指标进行评价,A代表该指标等级为优秀,B代表该指标等级为良好,C代表该指标等级为中等,D代表该指标等级为较差。将软科学研究项目绩效评价指标分别用各级评语具体表示出来,如下页表2所示。(2)专家打分第一轮:专家根据该项目的具体指标进行等级评价,统计汇总专家评价的结果;第二轮:将第一轮结果分别反馈给各位专家,各位专家在了解其他专家的评价结果后,重新对该项目的具体指标再次进行等级评价。第二轮专家在评价时了解了第一轮其余所有专家的评价,再次得出的评价结果相对统一,因此本文就没有进行第三轮评价。对专家评价意见汇总如表3所示。

2.2模糊综合评价

鉴于该项目学术价值、社会效益等绩效评价指标具有多层次、多目标、多定性的特点,软科学项目绩效评价的内容较多且相互交叉,具体的绩效评价指标之间确实无法做出非常明确的划分,使绩效指标具有模糊性,这些问题导致绩效评价过程相对较复杂[5]。为了尽可能减小这些问题对绩效评价结果的影响,本文采用模糊综合评价法进行该项目的评价。上述结果表明,有33.51%的专家认为该研究项目的评价等级为“优”,44.63%的专家认为该研究项目的评价等级为“良”,21.85%的专家认为该研究项目的评价等级为“中”。按最大隶属度原则,对该研究项目的综合评价等级应为“良”。

3结束语

本文依据软科学项目绩效评价相关制度要求和研究现状,综合软科学学科理论和方法,以绩效评价指标的科学性、系统性,数据的客观性、可获性以及评价方法应用上的可操作性为目标[6],把握软科学项目研究成果通常具有创新性、综合性以及非实物的特点,在结合德尔菲法和模糊综合评价法基础之上,构建适用于软科学发展特点的软科学研究项目绩效评价体系,并结合具体案例验证了指标体系的科学性和可操作性。

参考文献:

[3]黄佳.软科学成果评价指标体系及模型研究[D].济南:山东大学硕士学位论文,2011.

[4]胡亦星瑶.软科学研究投入的有效性分析[J].科技与企业,2016,(10).

[5]俞立平.软科学评价问题研究[J].情报杂志,2012,(31).

[6]杜红亮,赵志耘.国内外软科学方法研究回顾与展望[J].中国软科学,2010,(2).

作者:张爱华 黄明惠 单位:文华学院

论软科学项目绩效评价指标体系的构建

2019/05/22 阅读:

推荐度:

免费复制文章