VoxEU列经济研究前沿

在学术界具有挑战性的时代

约翰哈德逊
/

2013年11月11日

学术界的世界已经改变了过去四十年。在那些遥远的日子里大学讲师可能每隔几年写一篇论文,这服务来维持自己的地位和声誉。现在,每八年左右,学者和大学在英国受到的评价他们的工作。这仅仅是一个世界各地的很多类似的练习(Abramo et al . 2013年)。因此,越来越多的出版和无处不在,压力。

对经济的影响的研究

在英国当前的这就是所谓的卓越研究框架(REF),并提交将会在今年晚些时候。1他们将包括,第一次,强调经济和社会影响的研究。这一转变反映出我们生活的经济艰难时期的情绪,在研究资助者觉得有必要证明研究贡献积极的经济和社会。

每个裁判需要提交提交影响案例研究。在现实中,这些都不是彻底的定量措施的研究成本和收益,但基本上是影响的故事。然而这种方法不完善,它是具有挑战性的学者以新的方式去思考他们的研究。相比之下,传统上他们都集中在出版他们的研究,然后坐,等待和希望的喝彩,即引用,到达。

裁判

尽管强调这种转变,出版研究的评价仍然在裁判中扮演关键的角色。它包括评分4从每个学术出版物被进入。大学和学者个人是很重要的。一定程度的资金参与,政府资助的形式,但声誉方面一样重要。

裁判是不受欢迎的,有许多学者和已经得到大量的批评(史密斯et al . 2011年)。2它确实有很多缺点,例如,在鼓励战略行为。此外,它未能考虑的越来越倾向于学术界的人们一起工作(哈德逊1996),一般一个多人纸张计数sole-authored一样一个。

尽管它的缺点,总的来说,我支持它,不仅是因为它提供了一个更坚固的平台,个人的价值变得明显他们工作的大学。然而,每一个这样的过程,扭曲了激励,因此,有一些不良的后果。在裁判的情况下,这些后果影响个人,他们的学科,更广阔的世界。

排名个人论文

为了评估提交的研究中,有一个专家小组。经济学奖,有18个成员在面板上。他们的工作是对每件工作从1 * 4 *。在过去这种运动有近700学术评价(Lee et al . 2013年)。

但是如何排名研究?一个相对较小的集团如何评价这样一个大量的工作在很短的时间吗?广泛持有的信念是,尽管声称相反,至少在经济学论文的质量主要是判断期刊的质量的基础上发表(李等。l 2013年)。3这是还是不是这样,确实,很多大学正在使用期刊质量作为他们提交的基础。

经济学家倾向于喜欢秩序和确定性,他们倾向于认为在一个特定的期刊一篇论文肯定4 *,但在另一只2 *。当然,不是很明确,也有分歧,有时有价值——利润。提供清晰的,有许多列表,如基尔列表和商学院协会(ABS)列表。最广泛之一这样的名单,涵盖所有学科,是在澳大利亚(2009年Abelson)完成的。当然,使用这样的列表面板反对既定政策的英格兰高等教育拨款委员会(HEFCE)。但如何阻止小组成员受到出版物在期刊评为4 * ?此外,这将是一个勇敢,随后或鲁莽,小组排名这些论文2 *。

所有上面的列表包含一个元素的主体性。我最近的一篇论文的主要贡献在《经济日报》(2013年Hudson)是将这些列表的一组指标,主要是基于引用论文的数量在一个杂志,然后使用这些指标来生产最新的列表-主观元素。

结果列表包含期刊自信可以称之为4 *,自信地和其他人可以被称为3 *。但可以非常接近两个期刊指标,并把一个明确在一个特定的范畴,在不同的类别和另一个似乎有些武断。因此,本文也类期刊,例如,“可能的4 *”和“可能的4 *。这些期刊的论文裁判小组,其他人寻求工作做出判断,最好读纸上,形成一个判断,尤其是如果它是一个新的出版物和引用薄在地上。

分析表明,没有一个指标充分捕捉结合经济学家对期刊质量的看法,虽然他们做的更好。因此,如果指标要发挥更大的作用在未来的评价,有人认为应该这样,他们将最好的结合使用。

扭曲的影响

如前所述,ABS列表被广泛应用于经济部门,业务部门,以确定他们的参考条目。但也有问题。我的分析表明,影响ABS的指标列表是不同的,影响基尔为经济学家和其他列表编译。

经济学家倾向于把重点放在经济价值。杂志的文章往往是广泛引用于期刊经济学以外的往往不会一样高评级同样引用期刊更经济的焦点。这不是ABS列表的情况,在分析表明,经济学的焦点实际上是惩罚。

因此,ABS在经济部门的广泛使用,尤其是基础通知裁判的决定,是扭曲的激励机制,促使经济学家的工作领域,如金融和管理、ABS的价值,和许多其他领域的经济学家的工作。这不是批评ABS的名单,这毕竟是设计用于在商学院,但问题在于所使用的方式。通过我们注意,这也可能影响招聘和促销策略的一些部门,因此,整个行业产生扭曲影响。

旧的崇敬

什么印象深刻的经济学家杂志吗?他们往往特别价值理论期刊和敬畏的年龄,即非常古老的期刊往往比严格指标可能显示得分更高,这很可能是一个偏向我们已经长大了(谢连科和Bontis 2011)。因此,新期刊面临着一个艰难的时间得到确立,除非由一个主要的组织,如美国经济协会。主要的例外是电子期刊发表的。

重点,经济学家把自己的纪律并不罕见,并且在许多方面是无可非议的。毕竟,如果你想知道哪个是最好的经济学期刊是大概一个引用其他经济学期刊。同样,当判断某人作为一个经济学家,你会率更高的出版物比4 * 4 *经济学杂志社会学期刊。

轻度近视的可能是如此许多其他学科。但是世界上有许多问题可以受益于工具包和良好的经济学家的观点,比如环境和治理。然而,激励,而不仅仅是那些与裁判、阻止经济学人出版期刊在这些领域,以及阻止顶级经济学期刊出版核心之外。在我看来,这是一个遗憾。

参考书目

阿贝尔森,P(2009),“经济学期刊上的排名由澳大利亚的经济社会”,经济论文28 (2):176 - 80。

Abramo G,西塞罗,T和D ' angelo, C(2013),“国家同行评审研究评估演习硬科学可以完全浪费金钱:意大利的情况”,科学计量学95/1:311 - 24。

哈德逊,J(1996),“多人论文经济学”的趋势,《华尔街日报》的经济观点10 (3):153 - 58。

哈德逊,J(2013),“期刊排名”,经济日报123 (570):F202-22。

范教授,李,F年代,X和顾,G(2013),“英国研究评估运动和英国经济学”的缩小,剑桥经济学杂志37:693 - 717。

和Bontis谢连科,N(2011),“什么熟悉的很好:曝光效应”对感知到的期刊质量的影响,情报计量学杂志》5(1):219 - 23所示。

史密斯,年代,病房里,V,和房子,(2011),“影响英国卓越的研究框架的建议:改变学术自治”的界限,研究政策40/10:1369 - 79。