专栏名称: IXDC
IxDC由广州美术学院设计学院、香港理工大学设计学院、网易、腾讯、华为、中国电信、中国移动、金山等单位联合发起。是全国第一个受政府认可和领导的交互设计专业委员会,致力于引领中国交互设计行业发展。
51好读  ›  专栏  ›  IXDC

字节发布了新的的Ai工具,网友直呼:又卷起来了!

IXDC  · 公众号  ·  · 2024-03-27 00:21

正文


本文授权转自: AI绘画师日记 (ID: helloskys

字节发布了 新的的Ai工具?马斯克又搞了个的AI模型?

01.


【AI视频】字节的生成式视频软件Dreamina已经开始测试

发现 Dreamina 是迄今为止4秒AI视频生成时代最大的惊喜。能力让我震惊。其精确的运动控制、自然的视频动作流畅以及无与伦比的图像质量一致性凸显了令人印象深刻的技术实力。
🔩传送门🔗
https://x.com/lepadphone/status/1769673648988942502?s=20

02.


【AI工具】Leonardo Ai 推出了一个新功能:Transparency


可以生成真正的本地透明 PNG 图像。
Transparency 不仅仅是背景移除,它还支持干净边缘的图像扩散。
这项功能非常适合创建高质量的透明背景图片和图形,可以用于贴纸或T恤设计等线下使用。
还可以生成可直接下载并添加到视频游戏引擎中的现成 2D 视频游戏素材。
设计师在使用图层时,可以将视觉元素插入背景中,Transparency 特别有用。
🔩传送门🔗
https://app.leonardo.ai/auth/login?callbackUrl=%2F


03.


【AI工具】Stability AI推出的一款新型3D内容生成工具:Stable Video 3D(SV3D)

它可以基于单张图片,生成该物体的多视角视频和3D模型。
SV3D有两个变体:
• SV3D_u:此变体基于单图像输入生成360度环绕视频,无需相机条件。
• SV3D_p:在SV3D_u的基础上扩展,能够处理单图像和轨道视图,允许沿特定相机路径创建特定视角3D视频。
主要功能特点
1. 单图像到多视角转换:SV3D能够从单张图片输入,生成该对象的多个视角图像。这意味着用户可以仅提供一个静态图像,SV3D将能够展示该对象从不同角度的样貌。
2.3D模型生成:通过生成的多视角图像,SV3D能够进一步构建对象的3D网格模型,为用户提供一个完整的三维视觉体验。
3. 轨道视频制作:
• SV3D_u变体可以生成围绕物体的轨道视频,这种视频展示了对象从360度各个角度的视图,而无需相机的特定设置。
• SV3D_p变体扩展了这一功能,允许沿着特定的相机路径创建3D视频,适用于需要特定视角序列的场景。
4.高视角一致性与泛化:SV3D利用视频扩散技术提高了生成内容的视角一致性和泛化能力,即从任何角度观察生成的对象时,其外观变化都显得自然和连贯。
5. 高质量的视觉输出:相较于以往的技术和其他开源方案,SV3D在质量、多视角生成以及与原始图像的忠实度方面都有显著提升,生成的图像和视频更加详细、真实。
6. 改进的3D优化:通过改进的3D优化技术,包括解耦照明优化和新的掩蔽分数蒸馏采样损失函数,SV3D能够从单张图片可靠地输出高质量的3D网格。
7. 新视角合成(NVS)的进步:SV3D在新视角合成方面取得重大进步,能够生成从任何角度观察都一致且真实的视图,这对于创建真实感强的3D场景和对象尤为重要。
🔩传送门🔗
https://stability.ai/news/introducing-stable-video-3d?utm_source=Twitter&utm_medium=website&utm_campaign=blog


04.


【AI语音】Pipio:视频自动AI配音工具


可以把你的视频中的声音翻译成其他语言并克隆视频原声进行自动配音。
同时保持翻译配音后的声音和翻译语言口型一致。
和Heygen的配音功能差不多
🔩传送门🔗
https://www.pipio.ai/video-dubbing


05.


【Ai工具】Magnific AI的照片风格化功能上线了

可以将你的任意照片转换成你想要的任意风格
🔩传送门🔗 https://magnific.ai/

06.


【AI音乐】Suno v3 模型即将推出

Suno V3做出来音乐强的离谱,双盲实验下来,基本分不出来是人做的还是Ai做的。
🔩传送门🔗 https://www.suno.ai/


07.


【AI大模型】马斯克开源了Grok


马斯克在最后一刻如约开源了Grok,模型有314B大小,这是第一个如此规模的开源模型。
🔩传送门🔗
https://github.com/xai-org/grok-1

08.


【设计工具】一个新的给予WebGL的设计工具

一个新的给予WebGL的设计工具,可以利用WebGL给图片或者视频加上各种炫酷的效果。
可以直接集成到你的网站上,效果都是可交互的。
🔩传送门🔗
https://www.unicorn.studio/



09.


【Ai大模型】苹果发布自己的大语言模型MM1







请到「今天看啥」查看全文