论文部分内容阅读
[摘要]科研绩效评价方法的科学性不仅关系到高校科研绩效评价的可靠性和有效性，还会影响到高校科研的发展方向，因此，建立科学合理的科研绩效评价方法是高校科研评价工作的重点。科研绩效评价方法归结起来有三大类：定性评价、定量评价与综合评价。文章从中选取了四种方法重点介绍，以期更好地运用于实际评价中。
[关键词]科研绩效评价方法 同行评议法 德尔菲法 文献计量法 层次分析法
“没有正确的方法，就没有正确的结论；没有科学的方法，也就沒有科学的结论，有效的方法是科学结论的有力保障。”高校科研绩效评价可以采用的方法有很多，但是在具体的实践当中，就要根据不同的评价目的和评价对象确定不同的方法。方法的科学性不仅关系到高校科研绩效评价的可靠性和有效性，还会影响到高校科研的发展方向，因此，建立科学合理的科研绩效评价方法是高校科研评价工作的重点。
尽管高校科研绩效评价的方法有很多，但每一种方法都有自己的显著特征和优缺点，都有各自适合的应用范围。因此，充分了解各种方法的特点，进行综合比较分析，在不同情况下选择合适的评价方法具有重要的意义。从宏观方面来讲，科研绩效评价方法归结起来有三类：定性评价、定量评价与综合评价。本文将对其中一些重要的评价方法进行简要论述，以期更好地运用于实际评价中。
一、同行评议法
同行评议法是指由从事某领域研究的专家根据一定的标准和程序对该领域的科学研究活动及其相关要素进行评价的一种方法。美国国会进行的一项调查报告中曾指出“同行评议是被使用的最重要的方法，其他方法只是在进行打分评审中偶尔作为证实的手段而采用。”
同行评议之所以成为一种科研领域最常用的评价方法，优点在于一是由相关领域的专家担任科研活动及其结果的鉴定者，这些专家都是具有权威性的，在自己的领域有一定的发言权，判断相对准确；二是这些专家们在评判、鉴定过程中不是封闭的，可以相互交流想法、意见与建议。但是同行评议也存在着一些缺点，专家们往往带有自己的主观色彩，知识水平的局限，某些知识点难以达成共识，进而影响了整体的判断。
当然，科学研究不是一下子就定论的，往往是通过多次的专家反复验证来评判的，只有众多的专家同心协力，才能保证研究结果的真实性与可靠性。
二、德尔菲法
德尔菲法也是一种主观、定性的方法，在科研绩效评价当中有着广泛的应用。不同于同行评议法的是德尔菲法是一种专家们背对背的调研方法，专家们之间不能讨论、不能交流，本质上就是一种匿名式的方法，它能避免专家们在讨论中听从别人意见、导致少数服从多数的缺陷。
德尔菲法是一种多轮的调查，对所要预测的问题征询专家的意见，之后整理、归纳、统计，接着匿名再次向专家征询意见，再进行整理、归纳、统计，反复三四轮，直到最后得出一个比较稳定的结果。这种方法的优点在于能够充分发挥每一个专家的智慧，集思广益，避免了对权威的依附，消除了不发表自己言论的情况，让每一个专家都能够表达自己的想法与意见。另外，该方法也具有一定的科学性和客观性，即对于别的专家提出的意见能够更好的接受，以便于修正自己的意见，考虑更加全面，这样通过几轮的反馈调查就能使专家们的意见更好的收敛，使结果更加科学合理。但是德尔菲法仍然存在着一些缺点是无法避免的，几轮的征询意见会耗费较长的时间，至少需要一个月以上，所以对于周期比较长的评价项目合适，而对于周期比较短的评价项目就不合适了。所以在运用德尔菲法的时候要尽量克服周期长的问题。
三、文献计量法
文献计量法是一种比较常用的科研定量评价方法，该方法“以文献为主要研究对象，采用数学、统计学方法对文献进行定量分析，通过分析待定专题文献的分布与数量增长情况、数量与时间的关系、文献之间的引用情况等，研究文献的变化规律，从而探讨科研的某些结构、特征和规律，由此产生了用文献计量学研究方法对科研活动进行评价的可行性和可能性。”文献计量学统计分析的对象通常是指文献的各种计量特征，例如，引文量、被引量、引文结构、词频分布和结构、内容分析等。
文献计量法在科研评价方法中有一定的优势，收集数据和进行有意义的分析的花费不算太高，也比较简单；可以应用于各种形态的科技活动，无论这些活动的产出形式是报告、论文或者引文。当然，文献计量法也存在着一些缺点和问题，比如用该方法去评价科研绩效还是不够完整全面的，只关注了最后发表的文章及其引文分析，却忽视了进展中的工作；评价的往往是影响而不是质量，等等。
四、层次分析法（AHP）
层次分析法是一种定性与定量相结合的多目标决策方法。该方法的核心思想是“把复杂的评价问题层次化，把评价问题按评价目标、评价领域、评价指标的顺序分解为不同层次的结构。上一层元素对相邻的下一层次的全部或部分元素起支配作用。然后通过求判断矩阵特征向量的办法，求得每一层的各元素对上一层次某元素的权重，再利用加权和的方法递阶归并，求出最底层（评价指标）相对于最高层（评价总目标）的相对重要性，从而对最底层各元素进行优劣等级的排序。”
层次分析法最大的优点在于简单明了，适用面较广。不仅如此，该方法还将定性方法与定量方法相结合，更加客观与系统。但是该方法也有一定的缺点，若所选择的要素不合理，含义混淆，要素之间关系不明确，都会导致层次分析法的偏差。所以我们在采用层次分析法时，要注意在分解简化问题时，把握主要要素；同时，注意相比较要素之间的强度关系，同一个层次上的要素相差不能太悬殊。
以上四种方法是定性方法、定量方法以及综合方法三大类方法中比较典型的科研绩效评价方法，在实际的高校科研绩效评价中，我们要根据所评价的目的及对象等，选取合适的方法，也可多种方法交叉运用，从而使高校科研绩效评价结果更加科学与客观。
[参考文献]
[1]王凭慧.科技项目评价方法[M].北京：科学出版社，2003.49
[2]吴述尧.同行评议方法论[M].北京：科学出版社，1996
[3]邱均平.文献计量学[M].北京：科学技术文献出版社，1998
[4]戚湧，李千目.科学研究绩效评价的理论与方法[M].北京：科学出版社，2009
[5]邱均平，文庭孝等.评价学——理论、方法、实践[M].北京：科学出版社，2010
[6]周伟.几种绩效评价方法的实证比较[J].评价与管理，2007（1）
[7]丁福虎.科研绩效评估的理论与方法[J].科技管理研究，2000（3）
（作者单位：山西大学 教育部省部共建工作研究中心 山西太原）
[关键词]科研绩效评价方法 同行评议法 德尔菲法 文献计量法 层次分析法
“没有正确的方法，就没有正确的结论；没有科学的方法，也就沒有科学的结论，有效的方法是科学结论的有力保障。”高校科研绩效评价可以采用的方法有很多，但是在具体的实践当中，就要根据不同的评价目的和评价对象确定不同的方法。方法的科学性不仅关系到高校科研绩效评价的可靠性和有效性，还会影响到高校科研的发展方向，因此，建立科学合理的科研绩效评价方法是高校科研评价工作的重点。
尽管高校科研绩效评价的方法有很多，但每一种方法都有自己的显著特征和优缺点，都有各自适合的应用范围。因此，充分了解各种方法的特点，进行综合比较分析，在不同情况下选择合适的评价方法具有重要的意义。从宏观方面来讲，科研绩效评价方法归结起来有三类：定性评价、定量评价与综合评价。本文将对其中一些重要的评价方法进行简要论述，以期更好地运用于实际评价中。
一、同行评议法
同行评议法是指由从事某领域研究的专家根据一定的标准和程序对该领域的科学研究活动及其相关要素进行评价的一种方法。美国国会进行的一项调查报告中曾指出“同行评议是被使用的最重要的方法，其他方法只是在进行打分评审中偶尔作为证实的手段而采用。”
同行评议之所以成为一种科研领域最常用的评价方法，优点在于一是由相关领域的专家担任科研活动及其结果的鉴定者，这些专家都是具有权威性的，在自己的领域有一定的发言权，判断相对准确；二是这些专家们在评判、鉴定过程中不是封闭的，可以相互交流想法、意见与建议。但是同行评议也存在着一些缺点，专家们往往带有自己的主观色彩，知识水平的局限，某些知识点难以达成共识，进而影响了整体的判断。
当然，科学研究不是一下子就定论的，往往是通过多次的专家反复验证来评判的，只有众多的专家同心协力，才能保证研究结果的真实性与可靠性。
二、德尔菲法
德尔菲法也是一种主观、定性的方法，在科研绩效评价当中有着广泛的应用。不同于同行评议法的是德尔菲法是一种专家们背对背的调研方法，专家们之间不能讨论、不能交流，本质上就是一种匿名式的方法，它能避免专家们在讨论中听从别人意见、导致少数服从多数的缺陷。
德尔菲法是一种多轮的调查，对所要预测的问题征询专家的意见，之后整理、归纳、统计，接着匿名再次向专家征询意见，再进行整理、归纳、统计，反复三四轮，直到最后得出一个比较稳定的结果。这种方法的优点在于能够充分发挥每一个专家的智慧，集思广益，避免了对权威的依附，消除了不发表自己言论的情况，让每一个专家都能够表达自己的想法与意见。另外，该方法也具有一定的科学性和客观性，即对于别的专家提出的意见能够更好的接受，以便于修正自己的意见，考虑更加全面，这样通过几轮的反馈调查就能使专家们的意见更好的收敛，使结果更加科学合理。但是德尔菲法仍然存在着一些缺点是无法避免的，几轮的征询意见会耗费较长的时间，至少需要一个月以上，所以对于周期比较长的评价项目合适，而对于周期比较短的评价项目就不合适了。所以在运用德尔菲法的时候要尽量克服周期长的问题。
三、文献计量法
文献计量法是一种比较常用的科研定量评价方法，该方法“以文献为主要研究对象，采用数学、统计学方法对文献进行定量分析，通过分析待定专题文献的分布与数量增长情况、数量与时间的关系、文献之间的引用情况等，研究文献的变化规律，从而探讨科研的某些结构、特征和规律，由此产生了用文献计量学研究方法对科研活动进行评价的可行性和可能性。”文献计量学统计分析的对象通常是指文献的各种计量特征，例如，引文量、被引量、引文结构、词频分布和结构、内容分析等。
文献计量法在科研评价方法中有一定的优势，收集数据和进行有意义的分析的花费不算太高，也比较简单；可以应用于各种形态的科技活动，无论这些活动的产出形式是报告、论文或者引文。当然，文献计量法也存在着一些缺点和问题，比如用该方法去评价科研绩效还是不够完整全面的，只关注了最后发表的文章及其引文分析，却忽视了进展中的工作；评价的往往是影响而不是质量，等等。
四、层次分析法（AHP）
层次分析法是一种定性与定量相结合的多目标决策方法。该方法的核心思想是“把复杂的评价问题层次化，把评价问题按评价目标、评价领域、评价指标的顺序分解为不同层次的结构。上一层元素对相邻的下一层次的全部或部分元素起支配作用。然后通过求判断矩阵特征向量的办法，求得每一层的各元素对上一层次某元素的权重，再利用加权和的方法递阶归并，求出最底层（评价指标）相对于最高层（评价总目标）的相对重要性，从而对最底层各元素进行优劣等级的排序。”
层次分析法最大的优点在于简单明了，适用面较广。不仅如此，该方法还将定性方法与定量方法相结合，更加客观与系统。但是该方法也有一定的缺点，若所选择的要素不合理，含义混淆，要素之间关系不明确，都会导致层次分析法的偏差。所以我们在采用层次分析法时，要注意在分解简化问题时，把握主要要素；同时，注意相比较要素之间的强度关系，同一个层次上的要素相差不能太悬殊。
以上四种方法是定性方法、定量方法以及综合方法三大类方法中比较典型的科研绩效评价方法，在实际的高校科研绩效评价中，我们要根据所评价的目的及对象等，选取合适的方法，也可多种方法交叉运用，从而使高校科研绩效评价结果更加科学与客观。
[参考文献]
[1]王凭慧.科技项目评价方法[M].北京：科学出版社，2003.49
[2]吴述尧.同行评议方法论[M].北京：科学出版社，1996
[3]邱均平.文献计量学[M].北京：科学技术文献出版社，1998
[4]戚湧，李千目.科学研究绩效评价的理论与方法[M].北京：科学出版社，2009
[5]邱均平，文庭孝等.评价学——理论、方法、实践[M].北京：科学出版社，2010
[6]周伟.几种绩效评价方法的实证比较[J].评价与管理，2007（1）
[7]丁福虎.科研绩效评估的理论与方法[J].科技管理研究，2000（3）
（作者单位：山西大学 教育部省部共建工作研究中心 山西太原）