数据播放器：自动生成具有叙述和动画交互的数据视频
摘要：数据可视化和叙述经常整合在一起，以有效传达数据故事。在各种数据叙事格式中，数据视频受到了越来越多的关注。这些视频在生动地阐述基础数据洞见的同时，还提供了对数据图表的直观解释。然而，制作数据视频需要多样化的专业技能和相当的人工劳动，包括理解叙述、将视觉元素与叙述片段相连接、设计和制作动画、录制音频叙述以及将音频与视觉动画同步。为了简化这个过程，我们的论文介绍了一种新颖的方法，名为数据播放器（Data Player），能够自动生成带有叙述-动画互动的动态数据视频。这种方法降低了创建富有叙述的数据视频的技术门槛。为了实现叙述-动画互动，数据播放器建立了可视化与文本输入之间的参照。具体而言，它首先从可视化中提取数据到表格中。随后，它利用大规模语言模型在文本和视觉之间形成语义连接。最后，数据播放器将动画设计知识编码为计算机底层约束，从而可以推荐与文本到语音技术生成的音频叙述相一致的合适动画预设。我们通过示例库、用户研究和专家访谈来评估数据播放器的效能。评估结果表明，数据播放器能够生成与人为创作的数据视频相媲美的高质量数据视频。
作者：Leixian Shen, Yizhi Zhang, Haidong Zhang, Yun Wang
论文ID：2308.04703
分类：Human-Computer Interaction
分类简称：cs.HC
提交时间：2023-08-10