Altmetrics对研究的社会影响力评价效果研究

doi:10.13365/j.jirm.2022.05.123

信息资源管理学报 ›› 2022, Vol. 12 ›› Issue (5): 123-129.doi: 10.13365/j.jirm.2022.05.123

Altmetrics对研究的社会影响力评价效果研究

宋丽萍¹　王建芳²　付婕¹　孙泽¹

1.天津师范大学管理学院，天津，300387;　
2.中国科学院科技战略咨询研究院，北京，100190

出版日期:2022-09-26 发布日期:2022-10-20
作者简介:宋丽萍，教授，博士，硕导，研究方向为科学计量与科学评价；王建芳（通讯作者），博士，副研究员，研究方向为科学计量与科学评价，Email:wangjianfang@casisd.cn；付婕，博士，讲师，研究方向为科技政策与战略；孙泽，硕士生，研究方向为科学计量与科学评价。
基金资助:
本文受到国家社会科学基金一般项目“负责任计量视角下科学评价方法与指标优化研究”（18BTQ074）资助。

The Effectiveness of Altmetrics in Societal Impact Measurement

Song Liping¹　Wang Jianfang²　Fu Jie¹　Sun Ze¹

1.School of Management, Tianjin Normal University, Tianjin,300387;　
2.Institutes of Science and Development, Chinese Academy of Sciences, Beijing,100190

Online:2022-09-26 Published:2022-10-20

摘要/Abstract

摘要： 为分析替代计量（Altmetrics）对研究的社会影响力的评价效果，以国际流行引文数据库为基准，以519893篇文献为样本，对Altmetrics在研究的社会影响力评价中的可靠性进行评估验证。其中，基于Web of Science数据库，借助VOSviewer将2010—2020年Altmetrics研究论文可视化，以显示Altmetrics与研究的社会影响力的交集；同时，采用Stata16对RCR、CNCI、Dimensions、Mendeley、Twitter、被引频次等进行相关、偏相关与主成分分析，并对Altmetrics指标含义进行解读，将Altmetrics划分为Mendeley等类引用指标及Twitter等关注型指标。结果表明，Altmetrics与社会影响力评价目标有所偏离；Mendeley以0.76的主成分载荷划入引用维的结果表明其可以作为论文学术影响力的早期替代指标；Altmetrics评价中构念效度的缺失说明目前缺乏Altmetrics用于社会影响力评价的理论依据，而案例研究仍是首选方法。

关键词: Altmetrics, 社会影响力, 科研评价, 文献计量, 案例研究

Abstract: To investigate the effectiveness of Altmetrics in measuring societal impact, this paper carried out some quantitative analysis and verification, with 519893 papers from the international popular citation databases as samples. Based on Web of Science, our article visualized the research papers on Altmetrics from 2010 to 2020 with the help of VOSviewer. The visualization result has demonstrated the intersection between Altmetrics and societal impact. In parallel, correlation analysis，partial correlation analysis and principal component analysis were undertaken by Stata16 among RCR, CNCI, Dimensions, Mendeley, Twitter and times cited to interpret the implications of Altmetrics indicators, and then Altmetrics was divided into citation-like indicators(i.e.,Mendeley) and attention indicators(i.e., Twitter). The results show that Altmetrics deviates from the goal of societal impact. Mendeley is included in the citation-like indicators with a principal component load of 0.76, indicating that it can be used as an early substitute indicator for papers’ scientific impact. The lack of construct validity in the current studies indicates the absence of theoretical basis in terms of the application of Altmetrics into societal impact measuring, and it also means that the case study method remains the favored one.

Key words: Altmetrics, Societal impact, Research evaluation, Bibliometrics, Case study

中图分类号:

G250.252

宋丽萍　王建芳　付婕　孙泽. Altmetrics对研究的社会影响力评价效果研究[J]. 信息资源管理学报, 2022, 12(5): 123-129.

Song Liping　Wang Jianfang　Fu Jie　Sun Ze. The Effectiveness of Altmetrics in Societal Impact Measurement[J]. Journal of Information Resources Management, 2022, 12(5): 123-129.

[1]	李亮　王铭旭. 案例研究的学术对话之旅：以信息系统领域为例[J]. 信息资源管理学报, 2023, 13(3): 112-123.
[2]	周海晨　章成志　胡志刚　徐硕　杨思洛　李恺. 全文计量分析的实践与展望：理论、方法与应用——2022全文本文献计量分析学术沙龙综述[J]. 信息资源管理学报, 2023, 13(2): 135-142.
[3]	黄萃　黄施旗　付慧真. 学科交叉视角下人工智能治理领域知识流动与研究主题的国际比较研究[J]. 信息资源管理学报, 2022, 12(6): 98-110.
[4]	莫雪盈　卢龙. 引文视角下知识融合与论文社会影响力关系研究[J]. 信息资源管理学报, 2022, 12(6): 133-141.
[5]	白文琳. 基于协同创新理论的政府大数据治理框架的构建 ——基于G省的案例研究[J]. 信息资源管理学报, 2022, 12(2): 52-64.
[6]	张琳　杜会英　尚媛媛　黄颖. 性别视角下国家自然科学基金项目负责人的成果产出与影响研究[J]. 信息资源管理学报, 2021, 11(3): 110-120.
[7]	黄　萃　杨　超. “计算社会科学”与 “社会计算”概念辨析与研究热点比较分析[J]. 信息资源管理学报, 2020, 10(6): 4-19.
[8]	顾　海　奉子岚　吴　迪　杨妮超. 我国远程医疗研究现状及趋势——基于CiteSpace的文献量化分析[J]. 信息资源管理学报, 2020, 10(4): 119-129.
[9]	马续补　张潇宇　秦春秀　刘　玮　刘怀亮. 我国公共信息资源开放政策扩散特征的量化研究——以三大经济圈为例[J]. 信息资源管理学报, 2020, 10(4): 15-26.
[10]	刘福珍　陈　远　吴　江. 共享经济实证研究的系统综述：内容框架、研究热点及前沿创新[J]. 信息资源管理学报, 2020, 10(3): 49-59.
[11]	报告人：章成志胡志刚徐硕汪雪锋师庆辉王巍. 全文本计量分析理论与技术的新进展与新探索——2019全文本文献计量分析学术沙龙综述 [J]. 信息资源管理学报, 2020, 10(1): 111-.
[12]	牛奉高梁惠敏 Zhang Jin. h指数的时序变化规律研究[J]. 信息资源管理学报, 2020, 10(1): 102-.
[13]	臧思思　李秀霞. 个人相对引文率（ARCR）：作者影响力评价新指标[J]. 信息资源管理学报, 2019, 9(4): 24-30.
[14]	杜智涛　张丹丹　柏小林. 融合与跨越：近10年来新媒体研究的多维视域[J]. 信息资源管理学报, 2019, 9(3): 19-32.
[15]	王坚　张玥　朱庆华. 智慧养老领域的研究现状与热点分析[J]. 信息资源管理学报, 2019, 9(1): 10-20,29.

Altmetrics对研究的社会影响力评价效果研究

The Effectiveness of Altmetrics in Societal Impact Measurement

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics

本文评价