对学术影响力的争议在SSH研究的文献中有很大比例,主要是由于国家层面事后研究评估的出现,以及使用指标进行影响力评价的推动。在这方面,文献计量指标对STEM学科来说比其他方法更客观且成本更低,但将这类指标应用于SSH研究则备受质疑。
4.1 文献计量学、科学计量学、信息计量学和STEM研究中的其他指标
自二战后“大科学”出现以来,STEM研究对政策议程的学术影响力一直存在。科学的发展、公共支出的需要以及向知识经济的转变,促进了文献计量学、科学计量学和信息计量学发展。相关文献主要采用定量的文献计量学方法来评估研究的学术影响力,包括使用期刊影响因子和其他基于引用的方法,传统学术影响力的衡量主要集中在出版物上。目前有将个人作者作为分析单位的趋势,其中得到极大关注的是由Hirsch提出的新指标——h指数。
但学者们质疑通过引用数量衡量的学术影响力能在多大程度上反映一篇期刊论文或一组科学工作的“质量”或“重要性”。对数字和简单数据的依赖仍然存在,简单的测量方法由于其容易应用所以具有吸引力,这种简单性掩盖了应用上争议。因此在科学计量学中,不断有关于不同指标有效性的争论和新指标的开发。定量评价当前存在争议,主要在于指标计算和引用的可靠性方面。
20世纪80年代中期,开放获取驱动下的学术交流和实践的变化引起了学界关注,并且基于Web开发了新指标,如Web指标、webometrics、cybermetrics和altmetrics。这些指标被视为对引用的补充,通过衡量研究成果的传播和使用情况来了解研究成果的学术影响力。
4.2 评价SSH研究学术影响力的指标
衡量学术影响力的指标在SSH研究中真的有效吗?这一问题有不同的回答。
有学者认为SSH的学术影响力不能通过生硬的定量标准来衡量,只能使用同行评议,现有的标准将随着它们逐渐完善而变得更适合。Hicks指出,社会科学中存在四种文献:国际期刊文章、专著、国内期刊和非学术出版物。尽管学术界倾向于优先使用期刊文章,但其他类型文献仍有很高的重要性。
部分学者将文献计量指标作为SSH学术影响力评价的众多方法之一,并与其他指标和信息源结合使用,从而获得更可靠的结果。这一方式提出了使用综合方法进行影响力评价的途径,文献计量学不能主导SSH影响力评价。
尽管有上述探索,但大多数讨论都处于中间立场,在依赖文献计量学的同时寻求更适合SSH研究评估的替代方法,克服学科的限制,例如与自然科学相比,SSH的引用行为不同,成果类型不同,研究的受众存在差异,以及现有数据集的覆盖面不足。有文献探讨建立覆盖国内出版物的SSH综合数据库,并强调了实施的必要性和建议。其他文献表明,“期刊在选择发表论文上的选择性”和“期刊扩散”是衡量人文学科学术期刊影响力的敏感、有效指标。
一些SSH学者建议使用替代统计数据,例如使用Google Scholar来获取文章和专著中的引用。其他人则认为引用具有时滞性,了解研究的学术影响力可能需要很多年,因此使用altmetrics以及类似工具来考察文章或研究报告的实时利用可能是有效的。一些微观指标如文章使用数据(HTML浏览量和PDF下载量),也应在研究评估过程中被考虑。但也有其他学者指出,在SSH中使用altmetrics与文献计量数据具有相同的局限和缺点。
基于文献计量的影响力评价通常低估了SSH研究成果的价值。替代指标、方法和数据源正在被越来越多地探索,以了解它们作为文献计量学替代方案的潜力。学者们对新的探索的兴趣浓厚,希望了解它们在多大程度上有助于对SSH的影响力进行长期评价,并指出需要与该研究领域的学者开展合作以构建适当的指标。