谷歌近日与 Runway 公司达成了一项新合同,为 Runway 公司提供数百万美元的云服务和相关信贷支持,以加速人工智能在影视创作领域的进展。
Runway 公司主要通过文本描述利用 AI 生成超现实的视频作品,IT之家发现,此前其技术已经在备受瞩目的科幻电影《Everything Everywhere All At Once(瞬息全宇宙 / 妈的多重宇宙)》中大显身手,电影中的面条手、石头对话等超现实艺术场景多数出自这家公司。
而在电影上映后,Runway 公司获得了 Amplify Partners 和 Lux Capital 等风头公司的投资支持。
而近日 Runway 公开了旗下具有 AI 功能的视频编辑工具 Gen-2,用户可以直接使用 文本提示生成“ 逼真的视频内容”并“ 自动剪辑视频”。
Runway 公司在今年 2 月份首次推出了其 Gen-1 模型,该模型仅使用文本提示即可以修改视频的艺术风格,例如将现实中的实拍镜头转换为卡通剪纸世界。
而 Gen-2 更进一步,可以直接使用单个文本提示生成视频场景,比如提示词为“山脉的航拍无人机镜头”,就可以生成逼真的航拍画面,但开源的模型输出的视频分辨率目前还较低,还需要稍待进一步发展。
此外,该模型可以从图像和文本描述的组合生成短视频序列。目前 Runway 公司正在向 Discord 注册的测试人员提供 Gen-2 模型。
根据 Runway 的说法,Gen-1 目前拥有“数千名用户”。该创业公司旨在让人类智慧与 AI 的创作结果相结合,在创建出独到内容的同时,防止 AI 被滥用。
目前 Runway Gen-2 已经上线了苹果 App Store,也同时有 Web 版本,可以在浏览器中使用。
IT之家注意到,虽然 Gen-2 更加强大,但是价格也更贵了。Runway 是按照套餐包收费的, 最便宜的套餐一年也要近千元人民币。
不过 Runway 的 Gen-2 AI 目前也有很多限制,例如生成速度极慢,5 秒钟的视频需要三分钟左右,另外生成的视频有时会比较抽象。