Gen-2重磅更新!文本直接生成超清视频,媲美摄影机!
添加书签专注AIGC领域的专业社区,关注微软OpenAI、百度文心一言、讯飞星火等大语言模型(LLM)的发展和应用落地,聚焦LLM的市场研究和AIGC开发者生态,欢迎关注!
11月3日,著名生成式AI平台Runway官宣,对其文生视频产品Gen-2进行了重磅更新,通过文本、图片就能生成媲美摄影机的超清视频。
根据「AIGC开放社区」的实际使用体验,本次对提示文本、图片的语义理解、视频颜色、渲染细腻、颗粒感、光影、真实感等进行了大幅度优化,视频的连续性、转场也比前一代好了很多。
例如,通过图片生成动态视频时,前一代生成的视频模糊伴有重影、颗粒感不强等问题,而全新版本非常逼真如临其境。
估计Runway又投入了一批新的高质量训练数据,同时对大模型的框架、推理进行了改良。
最新Gen-2生成的视频
老Gen-2生成的视频
免费体验最新Gen-2地址:https://app.runwayml.com/login
对于本次更新,Runway只在社交平台上简单说了一句,“对文本、图片生成视频的质量进行了重磅升级。”
官网博客、技术文档都没有详细的说明,所以,我们只能从实际体验和用户分享的视频来感受新Gen-2了。
Runway分享的Gen-2视频效果
首先,「AIGC开放社区」通过免费体验功能使用了文本生成视频功能,一只机械的恐龙和外星人正在行走,外太空、废土、荒漠。
接着,又使用了图生视频的功能,上传了一张图片然后生成动态视频效果。
上传的原图
一个巨大的蘑菇云爆炸效果,颗粒感十足,氛围感。
从上述三个实际案例可以清晰看到,新版本的Gen-2视频质量真的是提升巨大。如果技术、功能再迭代2—3,有望彻底颠覆影视、短视频领域的制作流程。
下面这个是网友通过Gen-2创建的广告短片,在衔接、转场、节奏把控非常优秀,可以直接当成品广告使用了。
这个是图片生成视频的案例,出色的质感和色彩还原。
通过Gen-2制作的复古登月微电影。
本文素材来源Gen-2、网络,如有侵权请联系删除
END