检测到您的浏览器版本过低,可能导致某些功能无法正常使用,建议升级您的浏览器,或使用推荐浏览器 Google Chrome EdgeFirefox X

首页科技前沿与新兴产业历史内容我们的研究

基于Altmetrics的科技项目立项社会影响力评价框架研究及实证分析(一):引言

供稿人:吴春莹供稿时间:2020-06-01 10:24:38关键词:Altmetrics,立项,社会影响力评价

在知识经济背景下,科技项目立项评价的焦点由关注其预期成果对学术界、产业界的影响转向关注对社会的影响,社会影响力逐渐成为众多国家科技政策的重要考虑因素和目标取向。以欧盟为例,第七框架计划(2007-2013)首次将影响力列为研究项目的一个选择和奖励标准,欧盟史上预算最大的研究框架计划──“地平线2020”(Horizon 2020)将影响力作为三个评价标准之一,所述影响力包括社会影响力。在我国,一些省市已将社会影响力纳入重点产业科技创新项目立项评审的评价内容。

与此同时,随着全球信息技术的快速发展,推特(Twitter)、脸书(Facebook)、维基百科(Wikipedia)、博客(blogs)等社会化媒体应运而生。社会化媒体分析被认为是一种具有价值的捕捉公众声音的手段,其在科技项目的社会影响力评价中的作用日益凸显。Pulido等研究了社会化媒体尤其是Twitter和Facebook作为评价科学研究的社会影响的新方法,结果发现,可以在社会化媒体中找到关于研究项目社会影响的新证据。欧盟“地平线2020”计划采用了社会化媒体分析的新型评价方法,选择Twitter、Facebook、Wikipedia和You Tube等媒体类型作为分析源,用于确定公众表达的社会需求和科技进步,旨在评价“地平线2020”是否贴合公众声音。

Altmetrics正是在这种时代背景下产生的一种评价方法。Altmetrics是Alternative Metrics的缩写,最早由Priem J于2010年提出,但中文译名不尽一致,可以称为“替代计量学”、“补充计量学”、“选择性计量学”、“网络补充计量学”、“社媒影响计量学”等。其汇集了众多社会化媒体指标如新闻报道、政策文件、维基百科等的引用,自媒体指标如个人博客、社交媒体网站转载引用等,以及在线文献管理软件用户收藏数等指标,主要反映学术成果受到社会化网络媒体的关注度,可作为科技项目社会影响力评价的一个有力工具。欧盟“地平线2020”计划在为中期和事后评估制定评估方法时,参照Altmetrics分析的数据源来选择社会媒体类型。兰德公司从Altmetrics的角度出发,对欧洲研究委员会(ERC)资助项目的结果开展全面的科学计量评估。

从理论上分析,将Altmetrics引入科技项目立项评价具有可行性。首先,Altmetrics是对传统文献计量学的补充和发展。文献计量学是目前科技项目立项评价的重要方法之一。基于文献计量学的常用评价指标如影响因子、被引频次、发文量等受到发布周期的影响,需要长时间的数据积累,具有时滞性,不能提供准确、即时的影响力分析。Altmetrics对网络上的学术交流活动进行在线追踪、捕捉和记录,整个学术成果在网络上发布、使用和计量的周期很短,弥补了文献计量学的不足。有鉴于此,Melero R提出,Altmetrics基本上可以实时评价学术输出的社会影响,它可以和传统计量学结合使用,提供从即时到长期的学术论文影响力评价。

其次,Altmetrics特别适合用于具有战略性、前沿性、前瞻性和紧迫性的科技项目立项评价。对于这类项目,传统的学术资源如期刊论文、专利等较少甚至空白,难以开展文献计量分析,在第一时间发现和衡量项目立项的意义、价值和影响力。而Altmetrics的数据信息来源于政策文件、新闻报道、博客、社交媒体、多媒体等,能够很好地反映科技领域的最新研究热点。

再次,已有研究证明Altmetrics可以作为科技项目立项评价的有效方法。2017年5月,欧盟高级别专家组研究、创新和科学政策专家(RISE)提交了一份关于未来欧盟研究政策的报告,建议将期刊影响因子替换为Altmetrics,其认为后者是一个更好的指标。据此,芬兰坦佩雷大学Grischa Fraumann在硕士论文中探讨了Altmetrics在研究资助中的潜在估值。

最后,Altmetrics的快速发展为其在科技项目立项评价中的应用提供了更多的数据来源。目前,Nature、Science、Elsevier、Wiley、Scopus等许多数据库均融合了Altmetrics的服务,提供Altmetrics评价指标的查询。从长远来看,将Altmetrics纳入科技项目立项评价方法体系成为必然趋势。

Altmetrics提出至今不到十年,可以说是一个非常年轻的研究领域。目前国内相关研究尚处于理论阶段,主要集中在论文影响力评价、学者影响力评价、科研机构影响力评价、科研成果社会影响力评价等方面。本文将Altmetrics引入科技项目立项的社会影响力评价,旨在探讨科技项目立项评价的新方法、新工具和新趋势。

参考文献

[1] 王茜,谭宗颖,钱力.科学研究社会影响力评价综述[J].图书情报工作,2015,59(14):143-148.

[2] Impact and the next Framework Programme for Research and Innovation (FP9) [EB/OL].[2018-09-03]. https://www.leru.org/files/Publications/ Impact-and-the-next-Framework-Programme-for-Research-and-Innovation.pdf.

[3] 泉州科技创新项目立项评审要求及各领域科技创新项目评审工作具体方案公示[EB/OL].[2018-11-09]. http://www.gov-fund.com/fujian/details/13182.

[4] Pulido CM, Redondo-Sama G, Sorde´- Martı´ T, Flecha R (2018) Social impact in social media: A new method to evaluate the social impact of research [J/OL]. PLoS ONE 13(8): e0203117 [2018-11-09]. https:// doi.org/10.1371/ journal.pone.0203117.

[5] Applying relevance-assessing methodologies to Horizon 2020 [EB/OL].[2018-09-04]. https://ec.europa.eu/research/evaluations/pdf/ archive/other_reports_studies_and_documents/applying_relevance-assessing_methodologies_to_horizon_2020_metho_expert_group.pdf.

[6] 赵晏强,William Nixon,李印结,等.Altmetric在科研机构成果产出影响力评价中的应用研究[J].情报杂志,2016,35(6):144-150,182.

[7] 王睿,胡文静,郭伟.常用Altmetrics工具比较[J].现代图书情报技术,2014(12):18-26.

[8] 吴胜男,赵蓉英.Altmetrics应用工具的发展现状及趋势之分析[J].情报科学,2018,36(6):3-8,39.

[9] 刘焕成,胡雨薇,李素巧.Altmetrics与传统科研评价方法对比研究[J].评价与管理,2017,15(3):9-12.

[10] Comparative scientometric assessment of the results of ERC funded projects [EB/OL].[2018-09-04]. https://erc.europa.eu/sites/default/files/document/file/ERC_Alternative_Metrics_report.pdf.

[11] Melero R. Altmetrics: a complement to conventional metrics [J]. Biochemia Medica.2015,25(2):152-160.

[12] Grischa Fraumann. Valuation of altmetrics in research funding [D/OL]. [2018-11-13].https://tampub.uta.fi/bitstream/handle/10024/101653/GRADU-1498478872.pdf?sequence=1.

[13] Lutz Bornmann, Robin Haunschild, Jonathan Adams. Do altmetrics assess societal impact in the same way as case studies? An empirical analysis testing the convergent validity of altmetrics based on data from the UK Research Excellence Framework (REF) [EB/OL].[2018-12-25]. https://www.researchgate.net/publication/326342851_Do_altmetrics_assess_societal_impact_in_the_same_way_as_case_studies_An_empirical_analysis_testing_the_convergent_validity_of_altmetrics_based_on_data_from_the_UK_Research_Excellence_Framework_REF.

[14] 石凤娟.基于社交网络的学术论文影响力评价研究[D].郑州大学,2018.

[15] 郭颖,肖仙桃.国内学者影响力评价Altmetrics指标研究[J/OL].情报理论与实践.[2018-12-20].http://kns.cnki.net/kcms/detail/11.1762.g3.20181205.1306.008.html.

[16] Ursula Oberst. Measuring the Societal Impact of Research with Altmetrics: An Experiment [J/OL]. Journal for library culture, 2017 [2018-12-25].https://openaccess.leidenuniv.nl/handle/1887/57323.

[17] 程菲.科技论文影响力综合评价研究[D].中北大学,2016.

[18] 杨柳,陈贡.Altmetrics视角下科研机构影响力评价指标的相关性研究[J].图书情报工作,2015,59(15):106-114,132.

[19] The donut and Altmetric Attention Score [EB/OL].[2018-09-04]. https://www.altmetric.com/about-our-data/the-donut-and-score/.

[20] PlumX Metrics [EB/OL].[2018-11-09]. https://plumanalytics.com/learn/about-metrics/.

[21] 完整与替代补充计量[EB/OL].[2018-11-12]. http://ntur.lib.ntu.edu.tw/retrieve/215457/4.完整與替代補充計量.pdf

[22] 蔡明月.网络计量学指标Altmetrics与图书信息服务[EB/OL].[2018-09-04]. https://concert.stpi.narl.org.tw/uploads/schedule_file/speaker_file/file/15/Altmetrics_20151120.pdf.

[23] SETO FY2018 – Photovoltaics [EB/OL].[2018-11-03]. https://www.energy.gov/eere/solar/seto-fy2018-photovoltaics.