前言

最强开源文生图模型Flux生态迅猛发展的势头真的是有点让老徐跟不上了啊,从前面官方几款Lora的发布到一夜之间官方ControlNet的canny、depth组件的发布,再到近日官方推出的flux-ip-adapter组件的到来,更新速度真的得太快了。

Flux官方Lora集合:

所有的AI设计工具,模型和插件,都已经整理好了,👇获取~在这里插入图片描述

今天主要向大家介绍的是flux-ip-adapter组件,之前官方发布的Lora及CN组件可参考上方链接进行了解。

Flux-Ip-Adapter介绍

Flux-IP-Adapter作为一款多样化图像生成适配器模型,能够让用户轻松实现图像的风格迁移、细节增强,及跨域的图像生成。Flux-IP-Adapter 在 50k 步长下以 512x512 分辨率进行训练,在 25k 步长下以 1024x1024 分辨率进行训练,并且适用于 512x512 和 1024x1024 分辨率。目前该适配器模型处于测试阶段。

官方示例:

Flux官方ip-adapter模型及工作流下载链接:

https://huggingface.co/XLabs-AI/flux-ip-adapter

本地ComfyUI部署

老徐已将涉及到的内容放到文末网盘,可文末获取。

1.ComfyUI x-flux-comfyui节点插件安装:

插件地址:https://github.com/XLabs-AI/x-flux-comfyui

可以通过GIT地址安装,或直接在节点管理中搜索x-flux-comfyui进行安装。或者也可以导入工作流之后,通过缺失节点进行安装。

2.模型及工作流下载:https://huggingface.co/XLabs-AI/flux-ip-adapter,老徐为了便于大家下载工作流也已上传至Lib平台。

工作流下载地址:

https://www.liblib.art/modelinfo/0048d5a841034059b9ce5c94e680ea6b

flux-ip-adapter模型下载地址:

https://huggingface.co/XLabs-AI/flux-ip-adapter

flux-ip-adapter模型存放路径:ComfyUI/models/xlabs/ipadapters/,注意该版本目前暂不支持Flux GGUF版本模型。

Flux CLIP模型下载地址:

https://huggingface.co/openai/clip-vit-large-patch14/tree/main

模型存放路径:ComfyUI/models/clip_vision/

VAE模型下载地址:

https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/ae.safetensors

效果展示

左图为参考图,右图为效果图

时尚女孩:

A girl wearing a jacket with an exposed navel, a baseball cap, shorts, a necklace, and looking at the audience, holding a sign that reads’ X-LABS IP Adapter ’

一个穿着露脐夹克、棒球帽、短裤、项链的女孩,举着写着“X-LABS IP适配器”的牌子看着观众

在这里插入图片描述

在这里插入图片描述

写真照:

A girl with short hair, brown eyes, wearing a white dress, earrings, necklace, and bracelet, brown hair, breasts, looking at the audience, brown background, bare shoulders

一个短发、棕色眼睛、穿着白色连衣裙、耳环、项链和手镯、棕色头发、乳房、看着观众、棕色背景、光着肩膀的女孩

可爱小狗:

A cute white puppy is on the bed in the bedroom, wearing a pink sweater, headphones, with its mouth open and tongue exposed, holding a sign that says “I love you”

一只可爱的白色小狗躺在卧室的床上,穿着粉红色的毛衣,戴着耳机,张着嘴,露出舌头,举着一个写着“我爱你”的牌子

好了,今天的分享就到这里了,感兴趣的可以动起来哦~
这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。

有需要的朋友,可以点击下方免费领取!

在这里插入图片描述

AIGC所有方向的学习路线思维导图

这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
在这里插入图片描述

AIGC工具库

AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

在这里插入图片描述

精品AIGC学习书籍手册

书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。

在这里插入图片描述

AI绘画视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。

在这里插入图片描述

Logo

开放原子开发者工作坊旨在鼓励更多人参与开源活动,与志同道合的开发者们相互交流开发经验、分享开发心得、获取前沿技术趋势。工作坊有多种形式的开发者活动,如meetup、训练营等,主打技术交流,干货满满,真诚地邀请各位开发者共同参与!

更多推荐