10 月 15 日，Adobe 公司发布了全新的人工智能驱动的文本转视频工具 Firefly Video Model。该工具能够根据文本提示生成全新的视频，与竞争对手不同，Adobe 声称 Firefly Video Model 完全使用授权内容进行训练，有望规避其他生成式 AI 工具所面临的伦理和版权问题。
Firefly Video Model 的核心功能是根据用户的文本提示生成全新的视频内容。这一技术的最大亮点在于它基于完全授权的内容进行训练。
在技术层面，Firefly Video Model 采用了先进的深度学习算法、生成对抗网络（GAN）和变分自编码器（VAE），结合自然语言处理（NLP）和计算机视觉技术，能够理解文本的含义并将其转化为生动的动态画面。用户只需输入相应的文字描述，工具便能迅速生成与之匹配的视频内容，包括动画片段、活动宣传视频或短小的社交媒体内容等。
除了文本到视频的功能，Firefly Video Model 还支持图像转视频以及视频编辑功能。用户可以将静态图像转换为动态视频，增加视觉表现力；同时，该工具还提供了精细的视频编辑选项，如摄像机控制（角度、运动和缩放）、生成续帧（Generative Extend）等，帮助用户创建完美的拍摄视角和延长视频剪辑，填补时间线上的空白。
Adobe 官方博客上的一系列演示显示，从提示到成片生成时间不到 2 分钟，生成的视频效果令人印象深刻。例如，输入“日落时分，雪林中驯鹿的特写镜头和细节肖像”的提示，Firefly Video Model 能够生成出灯光如电影般绚烂、柔和，色彩等级如电影般神奇的视频内容。
此外，Firefly Video Model 还将被直接集成到 Adobe 的专业视频编辑软件 Premiere Pro 中，以及 Adobe 的其他创意工作流中，从而简化视频编辑过程。这一集成将使视频创作者能够更高效地利用 AI 技术生成高质量的视频内容。
更神奇的是，甚至可以改变原始镜头中的动作和意图。比如，如果视频剪辑中有一个特定的动作，但作为剪辑师的你希望让导演重新拍摄，这时就可以使用该功能将其可视化，在保持相同外观的同时推动故事情节。
原片：
生成：
提示语：一只戴着手套的宇航员的手进入画面，拔掉了黄色电缆的其中一根，电影感。
目前，Firefly Video Model 正处于测试阶段，仅向等待名单上的用户提供访问权限。Adobe 表示，该工具最早将在今年晚些时候作为独立的 Firefly 应用程序以测试版形式提供，并最终集成到其 Creative Cloud、Experience Cloud 和 Adobe Express 应用程序中。
