“FLUX在线版”,新增一系列重磅功能!

ControlNet、LoRA等重要模块都悉数到齐,而且开箱即用,无需自行配置工作流。

甚至还可以在线训练自己的LoRA模型,并通过链接进行分享。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

Stale Diffusion原班人马打造的最强绘图模型——FLUX上线之后,在线推理服务平台fal.AI就立即进行了跟进。

后续第三方开发的ControlNet、LoRA等新功能,也被fal迅速地加入到了自己的平台当中。

得益于fal开箱即用、支持一键分享的优势,LoRA和ControlNet加持的FLUX很快被网友们玩出了花。

比如给下面这个名场面当中的任务修改一下面部表情。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

实际上,fal也是FLUX开发团队黑森林实验室官方合作的两个在线推理平台之一(另一个是Replicate)

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

fal.ai团队成员Jonathan Fischoff也在推特上大量转发网友利用其平台创作的作品和LoRA模型。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

有网友在Fischoff的评论区许愿,希望fal能将ControlNet和LoRA与图生图结合。

对此Fischoff表示,已经在做了。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

FLUX+LoRA被网友玩出花

先来看下史上最强的FLUX模型叠加上LoRA和ControlNet后的效果~

Fischoff展示了在fal上使用ControlNet轮廓控制的FLUX生成的图像。

控制轮廓大概是这个样子,直观看上去是卧室的场景,包含了床、椅子、绿植等物体。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

作者用FLUX把这个轮廓绘制成了赛博朋克风,看上去确实挺有赛博朋克的感觉,也能较好地遵循控制条件。

Futuristic cyberpunk bedroom, neon lights, glowing porcelain sculpture above bedframe

未来风格的赛博朋克卧室,霓虹灯,床架上方发光的瓷器雕塑

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

我们通过PS把两张图叠加到一起观察下细节,贴合程度可以说是比较高的。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

另外利用fal的分享页面,我们可以使用相同的ControlNet等配置,直接改一下提示词生成新的图像。

比如把这个赛博朋克风格的卧室改成中国风。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

我们顺便体验了一下其他模式的ControlNet,比如姿势(pose)控制。

利用左边的图像作为参照,绘制一个跳舞的马斯克,虽然和马斯克不太像,但是该有的姿势倒是完美迁移过去了。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

除了ControlNet,被分享更多的是各种各样的LoRA模块。

利用这些LoRA模块,可以把人物修改成剪纸、绘画、赛博朋克等各种不同风格。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

还有网友把LoRA模型玩出了新花样,把可乐、TED演讲,甚至机器学习都搬到了1920年代的塔罗牌当中。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

而且现在,无需研究如何部署模型、搭建工作流,通过fal这个在线平台就能开箱即用式地应用这些功能。

开箱即用的FLUX

在fal(L的小写)平台中目前一共有5个模型和FLUX相关,其中三个是FLUX的官方原版。

最新支持ControlNet和LoRA的,是[dev] with LoRAs这个版本(下图最后一个)

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

基础功能上,除了支持FLUX官方的文生图和图生图,这个模型还可以进行图像修复(inpainting)

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

其中ControlNet的部分,使用的是来自小红书的InstantX团队为FLUX开发的ControlNet合集。

InstantX团队一开始发布了线条(Canny)控制模块,后来又上线了支持了线条、景深、姿势等七种控制模式的合集。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

顺带提一句,InstantX团队还新建了一个IPadapter模型的页面,估计很快就会上线。

与此同时,另一家叫Xlabs的工作室也做了适用于FLUX的ControlNet,不过目前支持的模式比InstantX的少一些,在线体验地点是隔壁的Replicate。

回到fal,另一项重磅功能就是LoRA了,今早刚刚更新的版本还新增了多个LoRA模块叠加的功能。

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

在fal当中,还可以在线训练自己的FLUX LoRA模块,做完之后可以通过链接进行分享

不过,fal平台并不免费,使用[dev] with LoRAs版本的价格是每百万像素0.075美元(约合人民币五毛四),新注册时会赠送1美元余额,大概可以画13张图。

当然,FLUX本身是免费开源的,可以自行下载搭建,fal收费是因为提供了推理服务,以及背后的计算资源

文章来源于“量子位”,作者“克雷西”

“在线版FLUX”已支持ControlNet,无需部署开箱即用,还能在线训练LoRA模块

关联网址

关联标签

文章目录

发评论,每天都得现金奖励!超多礼品等你来拿

后,在评论区留言并审核通过后,即可获得现金奖励,奖励规则可见: 查看奖励规则
暂无评论...