专栏名称: 黄建同学
数码博主 超话主持人(ChatGPT超话) 头条文章作者 我的学习笔记,关注AI+新能源
目录
相关文章推荐
爱可可-爱生活  ·  《爱可可微博热门分享(12.20)》 ... ·  2 天前  
爱可可-爱生活  ·  //@爱可可-爱生活:今日开奖,欢迎参与~- ... ·  6 天前  
爱可可-爱生活  ·  【深度思考第十九篇:AI范式即将迎来根本性转 ... ·  6 天前  
51好读  ›  专栏  ›  黄建同学

关注!FastVideo,用于加速大型视频扩散模型的开源框架。 -20241222074718

黄建同学  · 微博  · AI  · 2024-12-22 07:47

正文

2024-12-22 07:47

关注!FastVideo,用于加速大型视频扩散模型的开源框架。 #ai创造营##ai#

具体来说,这是一个开源的高性能视频生成工具,支持最先进的模型,并显著提升推理速度!

核心技术:采用一致性蒸馏(Consistency Distillation, CD)技术,这是首次在视频扩散Transformer(DiT)上开源的完整CD方案。

FastVideo 目前提供:(未来将提供更多)

- FastHunyuan 和 FastMochi:一致性提炼视频扩散模型,可将推理速度提高 8 倍。
- 首次公开基于PCM的视频 DiT 蒸馏配方。
- 支持提取/微调/推理最先进的开放视频 DiT:1. Mochi 2. Hunyuan。
- 通过 FSDP、序列并行和选择性激活检查点进行可扩展训练,并接近线性扩展到 64 个 GPU。
- 使用 LoRA、预计算潜在和预计算文本嵌入进行内存高效微调。

项目:github.com/hao-ai-lab/FastVideo

ChatGPT 黄建同学的微博视频