Runway最新视频模型Gen

内容摘要机器之心报道编辑:杨文这几天,GPT-4o 的生图功能杀疯了,没想到 AI 视频领域也传来了好消息。就在昨天,AI 初创公司 Runway 发布了一款号称是迄今为止最高保真度的 AI 视频生成模型 ——Gen-4。该模型在画面真实感、动态流

机器之心报道

编辑:杨文

这几天,GPT-4o 的生图功能杀疯了,没想到 AI 视频领域也传来了好消息。

就在昨天,AI 初创公司 Runway 发布了一款号称是迄今为止最高保真度的 AI 视频生成模型 ——Gen-4。

该模型在画面真实感、动态流畅度和创作可控性上取得重大进步。与上一代 Gen-3 Alpha 版本相比,Gen-4 擅长生成具有逼真运动以及主题、对象和风格一致性的高度动态视频,同时具备优秀的提示遵循能力和一流的全球理解能力。

值得一提的是,使用视觉参考和文字指令,Gen-4 即可创建具有一致风格、主题、位置等的新图像和视频,让故事更具连续性和控制力。

为了测试模型的叙事能力,Runway 还整理了一系列短片和音乐视频。

比如这则《孤独的小火焰》,从分镜到成片均由 Gen-4 制作完成。

再如下面这个《纽约是动物园》,则展示了 Gen-4 令人印象深刻的视觉效果功能,将超现实动物带入纽约的电影场景。

影片中的每个场景都使用 Gen-4 References 功能将动物的真实图像与纽约的真实照片相结合,然后提示每个场景的具体动作而创建的。

《牛群》是一部短片,讲述了一个年轻人在夜间被牛群追逐的故事。它使用 Gen-4 技术,仅凭少量图像参考构建出每个镜头中的人物和雾蒙蒙的牛群场景,然后与 Act-One 结合,将故事串联起来。

《寻回》这部探险题材动画短片,从概念设计到成片制作仅耗时一周,Gen-4 凭借其强大的生成能力完整呈现了一群探险者寻找神秘花朵的故事。

与其他视频生成模型一样,Gen-4 也接受了大量视频示例的训练,以「学习」这些视频中的模式来生成合成镜头。Runway 拒绝透露训练数据的来源,部分原因是担心失去竞争优势,但训练细节也是与知识产权相关的诉讼的潜在来源。

例如,Runway 正面临艺术家对其和其他生成 AI 公司的诉讼,指控被告未经许可使用受版权保护的艺术品来训练他们的模型。 Runway 辩称,合理使用原则可以保护其免受法律影响。目前尚不清楚该公司是否会胜诉。

不过,Runway 面临的风险相当高,据说该公司正在筹集新一轮融资,估值将达到 40 亿美元。据 The Information 报道,Runway 希望在推出视频生成模型 API 等产品后,今年的年收入能达到 3 亿美元。

无论针对 Runway 的诉讼结果如何,生成式 AI 视频工具都有可能颠覆我们所知的电影和电视行业。代表好莱坞动画师和漫画家的工会动画协会委托进行的一项 2024 年研究发现,75% 采用 AI 的电影制作公司在引入该技术后减少了工作岗位、合并了岗位或取消了岗位。该研究还估计,到 2026 年,美国娱乐业将有超过 10 万个工作岗位受到生成式 AI 的冲击。

尽管官方声称 Gen-4 图像转视频功能已经向所有付费计划和企业客户推出,但有网友表示,Gen-4 可能正在陆续向付费用户推送,需要耐心等待。

参考链接:2025/03/31/runway-releases-an-impressive-new-video-generating-ai-model/

 
举报 收藏 打赏 评论 0
24小时热闻
今日推荐
浙ICP备16017970号-3