全面评估社会影响必须超越传统的文献计量学,并纳入更多指标,以反映更多样化的产出和活动。我们的框架利用了我们丰富的数据资源,这些数据不仅限于学术产出,还扩展到专利、临床试验、政策文件、媒体出版物、数据集、教育产出、资金数据等,以及必要的外部数据源。
定量方法(例如传统的科学计量学方法)很有价值,因为它们提供了一种易于扩展的客观视角。然而,它们缺乏衡量社会影响特定方面所需的深度。为了解决这一限制,需要定性方法,例如专家评审、用户案例研究或叙述性影响陈述。然而,这些方法的可扩展性较差,并且有主观性风险。
我们采取了一种平衡的方法,将定量和定性方法相结合,因为我们相信这对于负责任地全面评估研究的社会影响至关重要。
挑战 3. 克服延迟:
利用滞后指标和领先指标进行有效评估
为了缓解研究开展与产生社会效益之间的长期延迟问题,我们的评估框架包含滞后指标和领先指标。
滞后指标通过回顾分析过去有足够时间体现其影响的产出和活动,提供了对社会影响的洞察。它们揭示了以前的研究工作如何对社会成果做出贡献,提供了观察到的、有形影响的图景。
相比之下,领先指标具有前瞻性,它分析近期的信号,这些信号表明研究成 日本资源 果和活动有可能在未来产生社会影响,但不提供任何保证。
通过领先指标与滞后指标分析机构的绩效,可以指导行动,改进或调整研究策略,以实现更好的结果。它们可以帮助确定是否有合适的团队在位并从事最有前景的活动,并且根据获得的见解,这可能会导致路线调整或重新关注——以提高实现预期结果的可能性。
可视化社会影响,帮助做出明智决策
为了便于负责任的评估,影响数据必须以既有意义又可供多个不同用户访问的格式呈现。这些数据必须透明地反映不同类型和级别的有影响力的活动,同时支持及时做出决策以实现最佳资源分配。让我们看一个例子,看看即将 人工智能营销详解——你所需要知道的一切 推出的 Web of Science 研究情报平台将如何使用社会影响概况来显示社会影响。
某机构社会影响力概况
机构的社会影响力通过包含八个轴的雷达图可视化,八个社会层面各有一个轴。为了便于有效比较,社会影响力概况上的每个点都是通过将特定机构的表现与全球近 12,000 个其他组织的表现进行比较来计算的。每个方面都有两个点,一个使用滞后指 新闻 美国 标组的指标计算,另一个使用领先指标组的指标计算。底层的单个指标将可用来支持透明度和更细致的分析。
社会影响力概况可用于检查机构的表现,以及将其表现 挑战超越文献计量 与其他机构进行比较。探索与同类机构相比的竞争优势和相对劣势有助于确定要推广的优先次序,并确定可能实施的更成功的做法。