专栏名称: 歸藏的AI工具箱
产品设计师🎨 AI画图工具操作员🔧 AI课程撰写与信息收集整理📰 致力于发掘借助AI工具改善设计与产品开发流程的各种可能性🤔
目录
相关文章推荐
sven_shi  ·  最后几小时优惠了-20241118204704 ·  4 天前  
题材挖掘君  ·  AI医疗相关概念股一文全梳理(精选名单) ·  6 天前  
花果科技  ·  iOS 18.1 隐藏重要更新,苹果真的太细了! ·  6 天前  
花果科技  ·  iOS 18.1 隐藏重要更新,苹果真的太细了! ·  6 天前  
51好读  ›  专栏  ›  歸藏的AI工具箱

FLUX这下真无敌了!多种官方FLUX工具开源

歸藏的AI工具箱  · 公众号  · 科技自媒体  · 2024-11-21 23:51

正文

本来以为黑森林工作室开源完FLUX Dev模型后面不想再搞开源了,没想到一下整了一个大的,妈的。 

FLUX这下真无敌了!!发布官方的FLUX系列开源工具: 

  • FLUX.1 Fill 局部重绘和扩图模型

  • FLUX.1 Depth&Canny 官方Controlnet模型

  • FLUX.1 Redux 通过提示转换图像风格

基本上把用FLUX做一个AI画图应用需要的工具和模型都给你了,而且Comfyui已经支持,现在就可以冲了。 

使用 FLUX.1 填充进行修复和修复

FLUX.1 Fill 引入了先进的修复功能,超越了 Ideogram 2.0 等现有工具和 AlimamaCreative 的FLUX-Controlnet-Inpainting等流行的开源变体。它允许无缝编辑,与现有图像自然集成。 

此外,FLUX.1 Fill 支持outpainting ,使用户能够将图像扩展到原始边界之外。 

他们自己的测试表明Flux.1 Fill [pro] 的性能优于所有其他竞争方法,使其成为迄今为止最先进的修复模型。其次是 Flux.1 Fill [dev],其性能优于专有解决方案,同时推理效率更高。 

使用 FLUX.1 Canny / Depth 进行结构调节

结构调节使用精明的边缘或深度检测来在图像转换过程中保持精确控制。通过边缘或深度图保留原始图像的结构,用户可以进行文本引导的编辑,同时保持核心构图完整。这对于重新纹理图像特别有效。 

FLUX.1 Canny / Depth 有两个版本:可实现最大性能的完整模型,以及基于 FLUX.1 [dev] 的 LoRA 版本,可更轻松地开发。 

使用FLUX.1 Redux进行图像变化和重新设计

FLUX.1 Redux 是适用于所有 FLUX.1 基本模型的适配器,用于生成图像变化。给定输入图像,FLUX.1 Redux 可以重现具有轻微变化的图像,从而可以细化给定图像。 

它自然地集成到更复杂的工作流程中,通过提示解锁图像重新设计。通过API,可以通过提供图像和提示来重新设计样式。最新型号FLUX1.1 [pro] Ultra支持该功能,允许组合输入图像和文本提示,以创建具有灵活宽高比的高质量 4 兆像素输出。 

ComfyUI支持

ComfyUI 同步支持了Black Forest Labs 为 Flux.1 设计的 3 个系列新模型: Redux Adapter 、 Fill Model 、 ControlNet Models 和 LoRA (Depth 和 Canny)。 

模型下载

FLUX.1 Fill:https://huggingface.co/black-forest-labs/FLUX.1-Fill-dev 

FLUX.1 Depth:https://huggingface.co/black-forest-labs/FLUX.1-Depth-dev 

Flux.1 Canny:https://huggingface.co/black-forest-labs/FLUX.1-Canny-dev 

FLUX.1 Redux:https://huggingface.co/black-forest-labs/FLUX.1-Redux-dev 

ComfyUI工作流:https://blog.comfy.org/day-1-support-for-flux-tools-in-comfyui/