论文秒变海报！开源框架PosterAgent一键生成顶会级学术Poster

论文秒变海报！开源框架PosterAgent一键生成顶会级学术Poster

鹭羽发自凹非寺量子位 | 民众号 QbitAI

你好研究僧，听说刚刚中了顶会，却还在愁怎么做Poster（学术海报）？

别急，容在下为你推荐一款新时代科研党神器——PosterAgent，帮你一键从paper.pdf跳转poster.pptx。

相比GPT-4o，PosterAgent生成指标更优，同时token使用量减少87%，还只需要0.0045美元，就可将22页的论文转化为可编辑的 “.pptx” 终稿海报。

来自滑铁卢大学的联合研究团队，还精心构建了首个学术海报评估标准Paper2Poster，解决了长上下文、多模态压缩的评估空白。

话未几说，先给各人展示一波效果，以下面这篇CV论文为例。

先喂给GPT-4o-image，获得的是这样的：

显然学术海报三要素（吸睛题目、重点突出、色彩排版），GPT-4o-image通通都没有。

无妨交给PosterAgent试试：

视觉更连贯、信息还高效，难怪连已经结业了的师兄师姐们都在X上哭诉，凭什么我们当年没有它。

这下妈妈再也不必担心我做欠好Poster，被老板在群里夺命call了（狗头）。

下面来讲讲它为啥这么好用。

多模态海报自动生成

Poster在学术集会里的重要性不言而喻，需要让与会者在几分钟内就迅速从中掌握焦点内容，这就很考验制作者的论文浓缩能力，以及文本和图形的排版功底。

为了帮各人解放双手，以及更一目了然地评估海报效果，研究团队提出了评估基准Paper2Poster以及基于此构建的多智能体框架PosterAgent。

Paper2Poster：首个学术海报评估基准

Paper2Poster的数据包括100对AI领域论文和作者设计的海报，涵盖盘算机视觉（19%）、自然语言处理（17%）和强化学习（10%）等子领域的280个差别主题，论文平均22页，生成海报的文本压缩比约为14.4倍，图形减少比约为2.6倍。

评估指标笼罩四个基本维度：

视觉质量：使用CLIP图像嵌入丈量生成海报与作者设计海报之间的视觉相似度，再盘算图像和文本的相关性，以确保图像属于有效整合。文本连贯性：盘算文本在Llama-2-7b-hf下的标准困惑度（PPL），权衡文字流畅度。整体评估：选择一个VLM（如GPT-4o），从美学（元素质量、结构平衡、加入度）信息（清晰度、完整性、逻辑流）两个方面进行1到5分打分。PaperQuiz：这是团队专门设计的评估指标，以模拟作者和读者的交流。让代表差别专业水平（例如学生和教授）的VLMs阅读每张海报并回覆考试，获得最高平均分的海报被认为在转达论文内容方面最有效。

PosterAgent：多阶段自动生成框架

凭据Paper2Poster的要求，团队设计了一个接纳自上而下设计理念的多智能体流程PosterAgent。

首先全局地将整个文档重组为简洁、连贯的章节，然后进行局部精炼，以实现颗粒度对齐。

具体包括三个要害组件：

解析器（Parser）：将工具和基于LLM的摘要相结合，提取要害文本和视觉内容，生成结构化摘要库（如各章要点、重要图表）计划器（Planner）：匹配文本与图表，并用二叉树结构战略将其连贯排列，通过放大（zoom-in）机制迭代生成面板�；嬷破�-评论器（Painter-Commenter）：绘制器将内容转为简洁的要点列表和用于渲染的可执行代码，而VLM作为评论器提供结构反响，确保整体连贯性和制止溢出。逾越GPT-4o？

眼见为实，为验证PosterAgent生效果果，研究人员用Paper2Poster评估了四类基线要领：

理想化要领（Oracle methods）：包括原始PDF和作者设计的海报GT Poster，作为最佳泛起基准。端到端要领（End-to-end methods）：使用GPT-4o多智能体事情流（Multi-agent work flows）：使用OWLPPTAgentPosterAgent：框架变体分两种，PosterAgent-4o在内部LLM 和VLM评论器均使用GPT-4o，PosterAgent-Qwen的文本生成使用Qwen-2.5-7B，评论器则使用Qwen-2.5-VL-7B。

实验结果标明，在视觉质量和文本连贯性上，虽然4o-Image抵达了最高的视觉相似度，但它也纪录了最差的困惑度，说明生成的海报可能乍一看吸引人，但实际细看全是嘈杂或不连贯的文本。

PosterAgent则实现了最高的图形相关性，在视觉相似度上也紧随人类设计的海报。

当VLM评判时，PosterAgent-4o的平均得分为3.72，抵达了与人类设计海报相当的水平，而PPTAgent因为经常生成无意义的文本或大片空白区域，因此得分都较低。

在PaperQuiz上，也能发明PosterAgent变体始终取得最佳分数。

值得注意的是，PosterAgent-4o虽然依据GPT-4o实现了冗长输出，但基于开源的Qwen-2.5系统变体在原始准确率上更胜一筹，说明PaperQuiz在评估时，内容量很重要，但泛起质量更重要。

团队还盘算了差别要领下的平均token本钱，PosterAgent仅使用101.1K和47.6Ktoken，相较于OWL-4o本钱降低了60%-87%，相当于每张海报只需要0.55美元（基于4o）或0.0045美元（基于Qwen）。

最后为了便当各人更直观地了解几种要领的海报生效果果，咱再举个例子。

这是论文作者自己做的，主题明确，重点突出，色彩搭配也和谐。

这张来自GPT-4o-image，看起来似乎还行？可是仔细看文字，里面照旧有不少乱码。

这张由GPT-4o-html生成，图片嵌入失败，文本也缺少排版。

这张出自PPTAgent，生成了大宗空白区域。

下面这张来自OWL，同样缺少图像，甚至没有多余色彩填充。