中外学术情报
扫码加入本站专家群
来源:COS网站
开放科学中心(Center for Open Science,COS)成立于2013年,是一个非盈利的技术和文化变革组织,旨在提高科学研究的开放性、完整性和可重复性。
近日,COS发布了新的期刊评价指标TOP 因子。TOP 因子用于评估期刊政策对促进核心学术规范的透明度和可重复性的程度,它被期望成为期刊影响因子(JIF)的替代品,用于期刊的质量评估。
TOP因子主要基于透明度和开放性促进(TOP)准则,其框架由八个标准组成。框架总结了可以提高研究透明度和可重复性的行为
01
对于改善科研作出的努力
TOP因子是对改善研究文化和实践的其他努力的补充。TOP因子有助于实现研究评估声明(DORA)愿景。作者可以使用TOP因子来识别其政策与其价值观保持一致的期刊,使他们的努力更加严格和透明。资助者可以使用TOP因子评估哪些期刊最有可能支持其对受助者的政策授权。而且,出版商可以使用TOP因子来识别具有渐进策略以启发灵感的期刊,并按学科监视策略趋势。
与某些指标不同的是,评分过程和TOP因子背后的数据可免费获得和验证。这可以最大程度地提高TOP因子基础的透明度和数据的可重用性。它已被FAIRSharing所使用,FAIRSharing是一种数据策略注册表,旨在策划和倡导更好的数据标准。“ FAIRsharing很高兴与COS在TOP因子上合作,并在我们的FAIRsharing数据政策页面上显示这些信息” FAIRsharing协调员Peter McQuilton说。“ TOP因子是一种评估期刊共享数据、代码和其他材料的政策的开放性和公正性的透明的可辩护的方法。
02
是等级而不是排名
开放科学中心执行主任布莱恩·诺塞克(Brian Nosek)指出:“学科正在以不同的方式发展,以提高严格性和透明度。TOP 因子使这种多样性在研究社区中可见并具有可比性。例如,经济学期刊处于要求数据和代码透明的前沿,而心理学期刊则是促进预注册的最有力的证据。”“ TOP因子是一个等级,而不是排名。原则上,每个期刊都有可能获得最高的评分。确实,发布TOP因子的主要目的是向期刊提供有关其同行的信息,以便他们可以改善自己的政策。” 
03
风险与改进
JIF受到非议的部分原因是,人们通常将“引证影响”误解为“研究质量”,并且不恰当地将其用于评估该期刊发表的个别研究文章。TOP因子也有类似的风险。Mellor指出:“期刊的TOP因子得分不能衡量该期刊发表的研究的质量。” “ TOP因子衡量期刊政策在多大程度上促进了评估研究质量的能力。”  TOP因子评估期刊的政策,而不是任何论文的特征。
TOP因子的另一种风险称为“古德定律”(Goodhart's Law)——度量一旦成为目标,就不再是一个好的度量。TOP因子的定义符合学术价值,而取得良好成绩的最直接方法是实施旨在提高透明度和可重复性的政策,这是TOP因子指标的目的。但是,不良行为者可以通过制定有力的政策而不执行这些政策,从而取得不错的成绩。TOP因子公开发布策略的要求需要为这种博弈策略承担一些责任。但是,为了进一步降低这种风险,将来的TOP因子在迭代中可以将对期刊遵守其政策的审核纳入评分。
04
现状与展望
到目前为止,已经有250多种期刊政策接受了评估,并在TOP因子网站上进行了介绍。最初的期刊以心理学,经济学,教育学和一般科学领域为代表。最初的重点是在采用透明度和严格性政策方面特别进步的领域和期刊。
编辑和社区成员可以在TOP因子网站上填写期刊评估表,以加快流程。开放科学中心的工作人员会审核这些提交的内容,并在将分数发布到TOP因子网站之前,先确认该期刊的公开发布政策。拥有TOP因子得分的期刊可以随时更新其政策并提交修订的评分。
TOP因子的初始版本侧重于与研究过程和输出的透明度有关的政策。随着TOP因子的不断改进,它可以包含更多功能来评估期刊流程的质量,例如期刊运营的透明度,运营成本以及编辑和同行评审服务。长期而言,TOP因子应该提高知名度并采用最佳实践,以使期刊能够促进和加快研究进度。
编译:察言观数
编辑/审核:Andy

你还没读研?快关注"考研揭秘"
更多重要优质信息,敬请关注:
本站分平台-人民网/人民号“中外学术情报”;新浪微博“学术与高校”。
送福利!关注本号,1、后台回高薪获得本平台为你监控发布的硕博高薪职业机会;2、回复公开课,获取中外名校读博/申博/访学教程,各学科研究方法、科研软件学习课程、英语学习和个人发展课程。3、回复交友,和来自中美欧澳日数百所名校单身硕士博士直接互动交流。
说明:本平台多数文章为原创或首发编译,或获授权转发。部分优选文章无法联系作者,若有不当,请及时联系我们处理。商务合作、开通专栏、发布成果、申请兼职、提出建议等可以后台回复“”获取本站编辑联系方式。
想读博/发论文?点下面阅读原文:
继续阅读
阅读原文