点击上方蓝字
CG世界
关注我们
“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”
中国很有影响力影视特效CG动画领域自媒体
RunWay是一款由同名开发商制作的AI视频生成和图像生成软件,一直与Stability.AI公司共同研发Stable Diffusion,主要用于视频制作/设计/策划。目前提供的服务包括:Gen-2:文本转视频;Gen-1:视频到视频;人工智能培训;文字转图像;图像到图像等。
就在前不久,这个AI视频生成初创公司推出了新的视频生成基础模型Gen-3 Alpha!
要问这个模型有什么魔力,它可以创建具有复杂场景变化、多种电影风格和详细艺术指导的高精细视频。
Gen-3 Alpha作为视频生成模型的新一代首发版本,
与Gen-2相比,它在保真度、一致性和运动方面有了重大改进,
广告推广↓↓↓
一块看看Runway视频生成的效果叭~
提示:日本某城市高速行驶的火车窗户上,映出一位女性的微妙倒影。(Prompt: Subtle reflections of a woman on the window of a train moving at hyper-speed in a Japanese city.)
Gen-3 Alpha经过视频和图像联合训练,将为Runway的文本转视频、图像转视频和文本转图像工具、现有控制模式(如运动画笔、高级摄像机控制、导演模式)以及即将推出的工具提供支持,来实现对结构、风格和运动的更细粒度的控制。
Gen-3 Alpha 已接受过高度描述性、时间密集的字幕训练,能够实现富有想象力的过渡和场景中元素的精确关键帧。
提示:一只蚂蚁从巢穴中爬出的特写镜头。镜头拉远,露出山丘后面的街区。(Prompt: An extreme close-up shot of an ant emerging from its nest. The camera pulls back revealing a neighborhood beyond the hill.)
提示:一架FPV无人机飞过悬崖上的一座城堡。(Prompt: A FPV drone shot through a castle on a cliff.)
Gen-3 Alpha擅长创造具有多种动作、手势和情感的富有表现力的人类角色。
提示:这是一幅电影广角人像,一名男子的脸被光照亮。(Prompt: A cinematic wide portrait of a man with his face lit by the glow of a TV.)
提示:一个中年悲伤的秃头男人突然变得快乐,因为一顶卷发和一副太阳镜突然落在他的头上。(Prompt: A middle-aged sad bald man becomes happy as a wig of curly hair and sunglasses fall suddenly on his head.)
训练Gen-3 Alpha是一支由研究科学家、工程师和艺术家组成的跨学科团队的合作成果。它旨在让模型诠释各种艺术风格和电影术语。
提示:夜晚,窗外一个巨大的奇怪生物在破败的城市中行走,一盏路灯昏暗地亮着。(Prompt: View out a window of a giant strange creature walking in rundown city at night, one single street lamp dimly lighting the area.)
提示:延时拍摄,穿过灯光闪烁的走廊,一条银色的织物飞过整个走廊。(Prompt: Hyperlapse shot through a corridor with flashing lights. A silver fabric flies through the entire corridor.)
Runway表示 Gen-3 系列模型的定制化可以实现更加风格化的控制和更加一致的角色,并针对特定的艺术和叙事要求等进行优化。
提示:从肩上视角拍摄一个女人奔跑并观看远处火箭。(Prompt: Over the shoulder shot of a woman running and watching a rocket in the distance.)
提示:一个女人的侧脸照片,烟花在她身后的远处绽放。(Prompt: A side profile shot of a woman with fireworks exploding in the distance beyond her.)
现在呢,Runway
推出了新的Video to Video模型-新一代视频转绘功能,也就是视频到视频转换功能,现
已在网络上面向所有付费计划提供,
通过Video to Video功能,可以输入文本提示词轻松的改变视频的风格!
(译文:Gen-3 Alpha Video to Video现已在网络上面向所有付费计划提供。Video to Video 代表了一种新的控制机制,可在几代内实现精确的运动、表现力和意图。要使用Video to Video,只需上传您的输入视频,以喜欢的任何美学方向提示,或者从一组预设样式中进行选择。)
使用起来非常简单
,只需要上传一段视频
,然后给
出提示词,
AI
就可以
一键生成
任何风格的新视频
!
甚至还能更改
视频的背景和光照
,
让生成的视频更加可控
。
另外在动作
、表现力、意图方面表现的也很精准
!
看下面的示例:
视频生成效果如何,还是需要付费使用的~
本来想给大家测试一番的,但无奈囊中羞涩,所以测试的部分还是交给你们啦~
Video
to Video地址:
https://app.runwayml.com/video-tools/teams/zhenziliuke/ai-tools/generative-video