将您的电影阅读为自动生成的漫画书籍

来自中国和城市大学的大连理工大学研究论文（直接PDF链接）概述了一个自动生成视频漫画书籍的系统。但算法如何沸腾视频场景，以适当地反映静止图像中场景的重力？这种令人印象深刻的壮举是通过保存每秒两个静止图像，然后通过分析兴趣区域和重要性排名来将帧分段为场景。

对于其下一个技巧，通过将字幕信息与视频的音轨组合来处理每个场景的语音。分析音频以用于情绪以确定适当的语音泡沫类型和字幕文本的大小。甚至分析框架以确定哪个人正在谈论泡沫的适当放置。然后，它可以创建关键帧的布局，基于感兴趣区域分析确定每个页面的面板大小。

通过通过量化用扁平颜色的关键帧进行体程化，为该经典CEL阴影外观进行设计，然后用每个帧和字气管填充布局。

该团队对40名用户进行了一项研究，将结果与以前需要更多人类干预的技术，并在每种措施中仍然最好。就像任何伟大的超级英雄一样，球队仍然看到改善室。在未来，他们希望提高关键帧选择的准确性，并建议使用神经网络这样做。