乔伊斯刚刚’T谈论研究指标

蜗牛在ruller上
即使它承认指标的重要性,学院也非常缓慢地涉及其研究实践中的评估指标。 (照片: Patty O.’令人寒露的Kickham / Flickr /cc by 2.0)

两年前,我进行了 一项研究 关于评价指标对研究实践的影响。我向参与者询问了来自所有职业阶段的代表,从邮政编层到教授 - 他们了解的关于指标,以及指标如何影响他们的研究实践。在访谈中,时间是一个共同点。参与者经常提到“时间很短”,“没有足够的时间”,或者“我没有时间......”虽然我们无法建立使用评估度量和时间之间是否存在相关性,但是经常提到时间压力让我想到了研究这项研究的有趣发现 - 原则上和实践中对评估指标讨论之间的区分。

原则上,研究中的大多数参与者都担心评估指标的局限性以及它们的使用程度。他们谈到了不应该使用指标,如何与众不同,如何鼓励游戏行为,等等。

在实践中,他们跟踪自己的指标,并使用指标来评估自己的生产力和工作质量。使用指标似乎是不可避免的,以评估学术职位和研究拨款的应用。

LSE-Impact-Blog-Logo
这篇文章莱马最初出现在 社会科学博客的LSE影响 作为 “尽管变得越来越稳定,但仍然缺乏关于学术界大部分研究指标的话语” 并在Creative Commons许可证下重新发布(CC Boy 3.0)。

那么,为什么他们与评估指标有关的原则和实践之间存在差异?日常学术和研究活动中的积极用途似乎表明,学者已接受指标作为评估标准,并“与指标为思考” RuthMüller和Sarah de Rijcke 建议。换句话说,参与者是在日常学术生活中隐含和嵌入的规则。然而,当他们被要求反思指标时,他们阐述了他们的局限和不恰当性。这让我发展了两个相关的概念:评估自满和评估惯性。

评估自满  - 当一个人对评价指标衡量的成就自满时,没有感觉不需要反思度量的局限性和缺点。在评估指标中隐含是接受指标作为标准,是客观的研究质量,生产力和性能的公平衡量标准。这种接受可能是在富人越来越富裕的系统中的自满的结果,因此加强了系统。

评估惯性  - 当没有反映的倾向,批评或改变现有的研究评估标准时,包括使用指标,因为例如,系统鼓励追逐度量为目标。随着竞争激烈(例如,人们需要更高数量的出版物来确保学术职位),没有时间或领先地空间来反映和批评现有的标准和实践 - 这导致缺乏关于指标的话语。

为什么话语重要?在 交际诉讼理论,JürgenHabermas描述了一个被称为理想的言论的内容,其中每个代理人都有平等机会和表达和谈判语言的含义的权利。哈贝马斯断言,开放和公众话语是民主的基础。

那么,指标?他们应该如何构建?他们应该如何使用?

本文的起源

此博客文章基于作者在第四次加速学术会议上提交的纸质, 学术时间表:观点,思考,责任, 2018年5月24日至25日,在布拉格,由捷克科学基金会资助(授予第16-18371Y),捷克科学院(策略AV21),葡萄牙科学基金会和CECS - Minho大学。

我们如何回答这些问题?理想情况下,如在哈贝马斯的理想演讲状况,这些问题应该在公共话语中进行谈判,包括学者,研究人员,大学管理员和管理,资助代理商,出版商,商业数据库和指标提供商,政府甚至公众的代理商。然而,关于指标的话语似乎主要仅限于教皇和一些科学技术研究学者等专家。我们没有听到太多的是那些在寻找职位和申请拨款或促销时,这些人在大量贡献和使用指标的人之间的话语。也就是说,学者本身,特别是初级职位的学者。

为什么?

“我没有时间,” they say.

但是,如果学者不相信评估中指标的客观,适当性或合法性,他们为什么不说些什么?为什么他们继续参与游戏行为?我们可以在多大程度上描述评估自满和评估惯性,作为我们日常学术生活的一部分?

“时间很短”也许是症状和指标缺乏话语的原因。当研究评估中的指标使用促使我们产生越来越快的,我们觉得我们没有足够的时间,因此不会有时间考虑使用指标是否正确或错误,好的或坏。越多的指标变得制度化和仪式化,他们将在学术生活中施加的权力和控制越多,我们经历评估自满和/或评估惯性的程度。

我想建议我们将话语带入日常学术生活中的指标。对指标的理解不应仅限于专家。迫切需要使用和受这些指标的影响,以充分了解并在公开和公开话语中参与对话。可能的第一步是将评估指标作为博士研究的一部分引入。最近的出版物 sugimoto和larivière. and 卢梭,egghe和枪支以及 标准标准工具包 例如,针对研究人员和其他不专注于书尖/科学计量学的人来定制。学者而不是接受使用评估指标作为规则和标准,在日常使用中可能变得更加反思,并且更加刻意评估指标作为合作者,同行评审员和管理员的重要性。

0 0 投票
文章评级

赖马

赖马是爱尔兰都柏林大学学院信息和通信研究学院的助理教授。她的研究涉及认识论,信息基础设施(主要是书目和引文数据库)之间的相互关系,以及其文化和社会可观和含义。她的orcid ID是0000-0002-0997-3605。

订阅
通知
guest

本网站使用AkisMet减少垃圾邮件。 了解如何处理评论数据.

0 注释
Inline Feedbacks
查看所有评论
0
会喜欢你的想法,请评论。x