专栏名称: 澎湃美数课
数字是骨骼,设计是灵魂。澎湃新闻美数课栏目出品。
目录
相关文章推荐
解放军报  ·  解放军报社论:凝心聚力 奋发进取 ... ·  昨天  
军武次位面  ·  停止内卷,这里有一份教科书级别的解法 ·  3 天前  
静安民防  ·  前置服务明标准 预警先行筑防线 ·  3 天前  
静安民防  ·  前置服务明标准 预警先行筑防线 ·  3 天前  
51好读  ›  专栏  ›  澎湃美数课

掌握这个方法,咖啡、奶茶都能一键起舞

澎湃美数课  · 公众号  ·  · 2024-08-08 12:38

正文


你见过会“跳舞”的甜品饮料吗?

今天是全民健身日,恰逢巴黎奥运会举办,我们借助了开源 AI 技术,让十款甜品、饮料开始了自己的“运动表演”。



💃早起的第一杯拿铁,跟着动感的节拍,跳起了霹雳舞;


🛹午休时的珍珠奶茶,在踩着滑板耍酷,宛如在海边冲浪;


🏊下班后的快乐肥宅水,化身“泳池飞鱼”,享受清凉的夏日时光;


🏸睡前的最后一杯啤酒,不停地挥舞着手中的羽毛球拍,与运动快乐共舞;



......

......

......


看到这里,大家是否很好奇,这是这么做出来的?


以“珍珠奶茶 X 滑板”为例,如果想要做出来这个效果,我们先要挑选出一个背景比较干净、机位相对固定的滑板视频。然后,在 Stable Diffusion 的 ComfyUI 里面,用开源的“视频抠像”工作流一键把它变成黑白蒙版的效果。(PS:这步也可以用视频工具解决噢!)



OK,滑板视频搞定了之后,那珍珠奶茶呢?


接下来的步骤非常关键。我们要找到一张“完美”的珍珠奶茶特写图,最好是能凸显出它的流动感。这样滑板小人,就能通过 AI 的技术,变成流动着的珍珠奶茶。


如果不想珍珠奶茶在滑板过程中过于单调,我们还可以再垫上一张背景参考图,丰富一下画面细节,让它在奶茶杯子上滑板,做成仿佛在海上冲浪的效果。但我们需要注意好背景图和上述抠像视频的相对关系、背景图和运动主体视觉参考图的元素关联,不然很可能翻车。


背景参考图,图源自网络

运动主体参考图,图源自网络

然后,就进入了最奇妙的环节了,我们将上面准备好的两张“珍珠奶茶”图片素材和“滑板”视频素材,一起导入到开源的“视频转视频”的工作流当中,开始见证 AI 神奇魔法🪄。



转绘过程仿佛是一场充满未知的探险,有时候带着些许玄学。它时而带来令人惊喜的创意火花,时而给出些诡异的画面,让你不得不再回去调整素材和参数,再来一遍。


在反复和 AI 的“对话”中,我们最终让这十款甜品、饮料都注入了活力,一起“动”了起来!


看完 TA 们的花式“整活儿”,你是否也想动一动呢?今天是全民健身日,你还等什么,让我们一起动起来吧!


关注对齐 Lab,回复“跳舞工作流”, 可以获取生成 AI 视频的全部工作流链接(ComfyUI)。同款视频,你值得拥有。



作者 | 孔家兴 杜海燕

设计 | 王亚赛

编辑 | 吕妍











请到「今天看啥」查看全文