StyleCineGAN：从单张风景静图生成循环播放的动态图像

韩国科学技术院推出StyleCineGAN，它能够自动从单张风景静图生成循环播放的动态图像，也就是所谓的“cinemagraph”，让普通用户和专业人士都能够轻松创建高质量的cinemagraph，无需专业的视频编辑技能。

想象一下，你有一张美丽的山水画面，现在使用StyleCineGAN，你可以让画中的云朵缓缓移动，而山脉和树木保持静止，创造出一种既有静态美又有动态吸引力的效果。

主要功能和特点：

• 高分辨率生成： StyleCineGAN能够生成1024×1024分辨率的cinemagraph，图像质量高。

• 无需训练： 利用预训练的StyleGAN模型，省去了从头开始训练大型模型的需要。

• 风格编辑： 用户可以轻松编辑生成的cinemagraph的风格和外观，因为它使用了StyleGAN的图像风格化和编辑特性。

工作原理：

1. 图像投影： 首先，将输入的风景图像投影到StyleGAN的潜在空间和特征空间中。
2. 遮罩预测： 预测一个遮罩来区分图像中的静态和动态区域，以便在生成过程中保持静态区域的结构。
3. 运动生成： 使用运动生成器从输入的风景图像中预测运动场，这个运动场定义了未来帧中每个像素的位置。
4. cinemagraph生成： 最后，通过在StyleGAN的层之间添加深度特征扭曲（DFW）操作，使用预训练的StyleGAN生成最终的cinemagraph帧。