金磊 发自 凹非寺
量子位 | 公众号 QbitAI
国产AI上大分的节奏,根本停不下来——
就在刚刚,
全球最快
的
AI视频生成
,正式来袭!
有多快呢?
数个
1、2、3、4、5
(五秒钟),啪的一下,一个高质量的AI视频就生成出来了。
划重点:
这次还不只是速度,这个国产AI还做到了把声音还给视频——是人声、背景声……
声声不息
的那种。
现在,我们就来
听
一段视频。Prompt是酱紫的:
内容Prompt:
生成一个视频,小朋友拿着棒球对着镜头微笑,背景是室外棒球场。
人物台词Prompt:
Watch my swing, I’m sure I can hit a home run.
不仅场景是符合Prompt的要求,就连人物说话的口型,也是与台词一致。
再来一个,Prompt如下:
内容Prompt:
生成一个视频,一个男人在室外弹吉他。
音效Prompt:
吉他演奏声音。
这个国产AI拿捏住了吉他演奏的声音,而且是跟演奏者拨动琴弦节奏保持一致。
刚才两个例子中,我们采用的是文生视频的方式,那么
图生视频
,是否也能做到呢?
这个可以有。
例如我们先“喂”给AI一张图片:
然后再分别输入视频画面内容和视频背景音乐的Prompt,这次我们非常简单粗暴的来一句:
内容Prompt
:根据这张图制作一段视频。
音效Prompt
:制作一段夜晚城市街道的背景音。
不难看出,即便是非常简短的Prompt,这个AI也能hold住。
那么这个又快又好又免费的产品,到底是何方AI?
不卖关子,它就是来自
爱诗科技
最新升级的
PixVerse V4
。
而且操作上也是极其简单,以上面的例子为例,只需在
“图文模式”
下上传一张图片并且生成内容的Prompt,然后点击
“音效”
,再次填入声音的Prompt即可。
(注:文生视频则无需上传图片。)
当然,咱们也可以不填写任何声音Prompt,让AI自己去理解视频内容来生成声音。
例如我们这次只填写内容的Prompt,“音效”则不填写任何指令:
内容Prompt:
春和日立。
嗯,确实是有春天那味儿了~
PixVerse V4一经发布,在外网上也是着实火了一把,不少网友直呼:
终于可以生成声音了!对社区来说是个great news!
不过在体验一番过后我们发现,视频和声音“一锅出”也还只是它新能力的一隅。
AI视频的风格也可以重绘了
没错,现在PixVerse V4,还可以把已经生成视频的风格
“回炉重造”
。
这个新功能叫做
重绘
(Restyle),操作上依旧非常简单。
在生成完视频之后,点击菜单栏中的“重绘”,就会弹出各种各样的风格,包括:
梵高风、巴洛克风、黏土风、赛博朋克风、浮世绘风、折纸风、羊毛毡风、吉卜力漫画风、辛普森风,以及芭比风,共计10种可选。
当然,你也可以通过语言描述的方式,
自定义
想要转换的视频风格:
例如我们先用文生视频的方式,生成自带音效的小猫咪视频(内容、声音同一个Prompt):
一只橘猫在月光下的屋顶上行走,背景轻柔,画面唯美。
然后我们只需一键选择“梵高风”,小猫咪视频就大变样儿了:
同样的,我们把刚才城市街景视频,也是一键转为
赛博朋克风
,效果是这样的:
不难看出,视频整体的内容和声音没有发生变化,但风格“啪的一下”就变得未来感十足。
再来一个有趣的,我们把刚才派对的视频,一键再转成
芭比风
:
由此可见,PixVerse V4的重绘功能,不是简单地变下风格那么简单,而是会根据风格的特点,适当地对原视频做调整。
毕竟印象中芭比的世界都是既粉扑扑又bling bling的,因此转换风格后明亮的视频内容,应当是更加符合芭比的风格。
除了“重绘”之外,PixVerse V4中的
特效
也紧跟潮流上新了不少“新货”。
那咱们这就玩点有意思的。
让
老黄和马斯克来个温馨的拥抱
:
有意思归有意思,但对于AI视频生成来说,能够保证真实性、不鬼畜才是最基本要素。
因此在实测的最后,我们来一个这样的Prompt:
电影场景,广角,一个白发男子一手拿着咖啡杯,昏暗的室内。