

怎样制作一份好的研究绩效指标报告，帮助机构决策及提升影响力？

爱思唯尔服务号

2025-09-04

导读：让报告格式更简洁、更可视化，并深入进行基于主题的分析。

近年来，了解研究成果的影响力已成为研究机构的首要任务。美国西北太平洋国家实验室 (PNNL) 是美国能源部 (DOE) 的一个国家实验室，专注于化学、地球科学和保护关键基础设施的创新，了解研究绩效可以为资源分配和未来科学方向的重大决策提供信息。

但将研究绩效转化为影响力并非易事。PNNL 的研究图书馆员 Mary Frances Lembo 精通文献计量学，她这样描述道：“我们讨论过，影响力并非由我们决定，而是别人赋予我们的外在因素。” 然而，分析引文指标并将这些数据与类似研究机构进行对比，是衡量其科学贡献影响力的有效指标。PNNL 的两项图书馆主导的举措将文献计量影响因子与成熟的解读相结合，重塑了管理层处理研究影响力数据的方式，使其能够进行决策和战略规划，而这都离不开技能、协作以及让指标清晰呈现的决心。

Mary Frances Lembo

让报告格式

更简洁、更可视化

Mary Frances在2024年之前制作的指标报告内容详尽，涵盖了大量背景信息，但篇幅过长且未得到充分利用。“那份报告非常详尽，但利益相关者却很少阅读，”Mary Frances解释说。“与此同时，一些团体在没有适当的背景信息和指导的情况下自行制定出版指标——这也导致了不一致。”

PNNL 的科技副主任要求设计一种新的出版物报告格式。“研究办公室委托我们开发一份更现代化、更简化的指标报告，以反映利益相关者最感兴趣的绩效特征。”Mary Frances说道。

挑战不仅在于更新报告格式，更在于确保数据与整个实验室的战略思维紧密结合，从而促进对“影响力”概念的共同理解。“也许我们的出版物更多了，引用也更多了，但更进一步来看，影响力究竟是什么？这很难确定。”Mary Frances知道，他们必须选择最有意义的指标，并结合相关的背景信息进行展示，以便这些数字与它们所代表的研究的曝光度和利用度建立联系。

Mary Frances 与其领导 Miriam Blake 合作，主导了 PNNL 出版指标报告的重新设计。新版本不再是内容密集的PDF格式，而是一份简洁的两张幻灯片组成的可视化摘要，每季度提交给监督委员会。

旧报告的目录页

新报告示例

Mary Frances 长期以来对数据可视化技术的兴趣，为这次重新设计带来了巨大的助力。“可视化有助于建立联系，而无需使用太多文字。”

简化的格式也激发了更多讨论。通过在演示文稿中分享报告，Miriam 可以提供数据背景，直接解答现场疑问。“用两张幻灯片讲解比用长篇文档更容易，”Mary Frances 说，“通过这种演示文稿，你可以快速掌握情况。”

通过帮助利益相关者对出版数据形成批判性理解，图书馆正在积极塑造机构洞察力并改善讨论研究绩效的方式。

深入进行基于主题的分析

第二个更具实验性的项目试行了一种分析与 PNNL 科学目标相关影响的新方法。他们希望探索如何获得对特定研究课题的宝贵见解，这些研究课题既属于实验室主要的研究领域，又跨越了这些领域。他们选择了一个关键的研究领域——化学催化，来开发这种方法。

该项目面临着技术和语义挑战。PNNL 在该主题领域的内部目标与现有的文献计量主题结构并不完全一致。“我们实验室的目标非常详细，甚至人工智能也难以识别主题，所以我们改变了方法，采用了一个已知因素。”该团队没有搜索预先定义的主题，而是搜索了他们知道的实验室中发表过化学催化相关论文的作者。他们使用SciVal，根据这些研究人员的工作开发了主题集群，然后扩展了数据集，以纳入所有机构中这些集群中的全球研究成果。“然后我们可以用它与研究这些主题的其他实验室进行对比，”Mary Frances 解释说。

化学催化报告示例

虽然仍处于试点阶段，但这项更深入的分析凸显了实验室如何在该领域内为这一专业研究领域做出贡献。利益相关者的反馈即将到来，但对 Mary Frances 来说，其价值在于能够测试更精细的方法，看看主题层面的分析能否揭示更多可操作的见解。

她还在探索如何收录那些经常被引用，但在引文数据库中却常常被忽略的研究成果。“除了期刊文章，我们还出版会议论文、书籍、数据集和技术报告。这些内容出现在 OSTI 数据库，但不会出现在其他书目数据库中，因此获取这些内容的引文指标非常困难。”她解释道。

最终，Mary Frances希望扩展本次分析中试行的基于主题的方法，以指导其他关键实验室目标。“我们知道各个实验室的整体表现，也在一定程度上了解各个部门的运作情况。但就这些专门的主题领域而言，我们能否更好地理解它们是如何推动科学发展的？”

Mary Frances 正在培训其他图书馆员使用文献计量工具，并为报告流程做出贡献。“我正在帮助我们团队中那些在该领域经验较少的研究图书馆员熟悉这些工具。”她还为其他希望加强机构报告职能的图书馆提供了实用建议。“首先要了解客户的需求，了解他们最看重什么，”她说，然后稍微拓宽他们的视野——“介绍一些他们可能还没有意识到自己需要的东西。他们可能会说，‘是啊，我们之前没想到这一点。’”

在 PNNL，图书馆致力于从利益相关者关注的议题出发，使其清晰易用，这有助于整个机构更好地理解研究的价值。这也证明了拥有合适工具和技能的图书馆员能够成为值得信赖的合作者，并在研究战略中扮演关键角色。