专栏名称: CG世界
CG世界是CG领域自媒体。专注3D动画、影视特效后期制作、AR/VR几个领域的知识,前沿技术,资讯和行业教程分享。
目录
相关文章推荐
河北广电  ·  票房破200亿! ·  17 小时前  
河北广电  ·  票房破200亿! ·  17 小时前  
北京大学百周年纪念讲堂  ·  多款专属周边陪你一起踏上《猫猫的奇幻漂流》! ·  3 天前  
北京大学百周年纪念讲堂  ·  多款专属周边陪你一起踏上《猫猫的奇幻漂流》! ·  3 天前  
豆瓣电影  ·  尺度与三观齐飞,这片每一帧都得偷偷看 ·  3 天前  
FM1017城市之声  ·  《哪吒2》破130亿!《哪吒3》开始画了?最 ... ·  3 天前  
FM1017城市之声  ·  《哪吒2》破130亿!《哪吒3》开始画了?最 ... ·  3 天前  
51好读  ›  专栏  ›  CG世界

Runway炸裂更新,Gen-3控制能力大提升!支持Video 2 Video!

CG世界  · 公众号  ·  · 2024-09-18 10:57

正文

点击上方蓝字 CG世界 关注我们

“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”

中国很有影响力影视特效CG动画领域自媒体


RunWay是一款由同名开发商制作的AI视频生成和图像生成软件,一直与Stability.AI公司共同研发Stable Diffusion,主要用于视频制作/设计/策划。目前提供的服务包括:Gen-2:文本转视频;Gen-1:视频到视频;人工智能培训;文字转图像;图像到图像等。

就在前不久,这个AI视频生成初创公司推出了新的视频生成基础模型Gen-3 Alpha!

要问这个模型有什么魔力,它可以创建具有复杂场景变化、多种电影风格和详细艺术指导的高精细视频。

Gen-3 Alpha作为视频生成模型的新一代首发版本, 与Gen-2相比,它在保真度、一致性和运动方面有了重大改进,


广告推广↓↓↓


一块看看Runway视频生成的效果叭~

提示:日本某城市高速行驶的火车窗户上,映出一位女性的微妙倒影。(Prompt: Subtle reflections of a woman on the window of a train moving at hyper-speed in a Japanese city.)

Gen-3 Alpha经过视频和图像联合训练,将为Runway的文本转视频、图像转视频和文本转图像工具、现有控制模式(如运动画笔、高级摄像机控制、导演模式)以及即将推出的工具提供支持,来实现对结构、风格和运动的更细粒度的控制。

细粒度的时序控制


Gen-3 Alpha 已接受过高度描述性、时间密集的字幕训练,能够实现富有想象力的过渡和场景中元素的精确关键帧。

提示:一只蚂蚁从巢穴中爬出的特写镜头。镜头拉远,露出山丘后面的街区。(Prompt: An extreme close-up shot of an ant emerging from its nest. The camera pulls back revealing a neighborhood beyond the hill.)

提示:一架FPV无人机飞过悬崖上的一座城堡。(Prompt: A FPV drone shot through a castle on a cliff.)

生成更逼真的人类角色

Gen-3 Alpha擅长创造具有多种动作、手势和情感的富有表现力的人类角色。

提示:这是一幅电影广角人像,一名男子的脸被光照亮。(Prompt: A cinematic wide portrait of a man with his face lit by the glow of a TV.)
提示:一个中年悲伤的秃头男人突然变得快乐,因为一顶卷发和一副太阳镜突然落在他的头上。(Prompt: A middle-aged sad bald man becomes happy as a wig of curly hair and sunglasses fall suddenly on his head.)

艺术创作

训练Gen-3 Alpha是一支由研究科学家、工程师和艺术家组成的跨学科团队的合作成果。它旨在让模型诠释各种艺术风格和电影术语。

提示:夜晚,窗外一个巨大的奇怪生物在破败的城市中行走,一盏路灯昏暗地亮着。(Prompt: View out a window of a giant strange creature walking in rundown city at night, one single street lamp dimly lighting the area.)

提示:延时拍摄,穿过灯光闪烁的走廊,一条银色的织物飞过整个走廊。(Prompt: Hyperlapse shot through a corridor with flashing lights. A silver fabric flies through the entire corridor.)

行业定制

Runway表示 Gen-3 系列模型的定制化可以实现更加风格化的控制和更加一致的角色,并针对特定的艺术和叙事要求等进行优化。

提示:从肩上视角拍摄一个女人奔跑并观看远处火箭。(Prompt: Over the shoulder shot of a woman running and watching a rocket in the distance.)
提示:一个女人的侧脸照片,烟花在她身后的远处绽放。(Prompt: A side profile shot of a woman with fireworks exploding in the distance beyond her.)


现在呢,Runway 推出了新的Video to Video模型-新一代视频转绘功能,也就是视频到视频转换功能,现 已在网络上面向所有付费计划提供, 通过Video to Video功能,可以输入文本提示词轻松的改变视频的风格!

(译文:Gen-3 Alpha Video to Video现已在网络上面向所有付费计划提供。Video to Video 代表了一种新的控制机制,可在几代内实现精确的运动、表现力和意图。要使用Video to Video,只需上传您的输入视频,以喜欢的任何美学方向提示,或者从一组预设样式中进行选择。)

使用起来非常简单 ,只需要上传一段视频 ,然后给 出提示词, AI 就可以 一键生成 任何风格的新视频 甚至还能更改 视频的背景和光照 让生成的视频更加可控 另外在动作 、表现力、意图方面表现的也很精准

看下面的示例:

视频生成效果如何,还是需要付费使用的~

本来想给大家测试一番的,但无奈囊中羞涩,所以测试的部分还是交给你们啦~

Video to Video地址:
https://app.runwayml.com/video-tools/teams/zhenziliuke/ai-tools/generative-video

END







请到「今天看啥」查看全文