挑战用AI做100件事:第九期细说flex开源大模型
挑战用AI做100件事。第九期细说flex
说一个2024年下半年度最火最有潜力的开源大模型是什么?一定是flux。那什么是flex?它是由黑森林工作室开发的一款全新的用于AI绘图的大模型。这个工作室的组成人员就是之前从stability AI离职的那一批核心骨干,所以它的实力可想而知。总结来说就一个字,猛。
可以给大家看一下,使用相同的提示词,相同的出图条件和出图尺寸在SD1.5SDXLSD3和flex的出图效果对比。毫无疑问flex出图效果占有绝对优势。
那为什么flex这么猛呢?我们拿曾经最被寄予厚望的SD3来做对比。SD3 medium训练参数2BSD3 large训练参数8B而flex才刚刚诞生,直接就开源了三款12B参数的大模型,足足是SD3 medium的六倍之多。单个模型的数据就达到了恐怖的22GB非常夸张,对应的效果也可想而知。
那在讲解flex如何使用之前,我们先来了解一下使用flex模型出图的爽点在哪。
第一,画面效果,这绝对是所有开源大模型里面最强的存在。仅凭借提示中不需要其他插件,即可生成以假乱真的照片。无论是画质、细节、质感都非常惊艳。如果再配上图片视频,各位看看我们在AI拍电影是不是又近了一步呢?
第二它攻克了AI画手的难题,无论是动漫风格还是真实风格,首部的细节都很好。从这些图片中你可以清楚的看到,flex绝对在手部的出图质量上下过很大的功夫。
第三,这很关键。Flax在生成文字方面的表现也让人出乎意料,你只要写提示词写的足够详细得当,它甚至可以达到直出海报的水平,你也可以在任意场景中添加任意的文字和任意的表达形式。虽然现在还不支持中文,但是你别急,我想行业内的大佬们肯定比我们还急。
第四,咱们刚才说过,flex拥有着巨大的训练参数,所以在大多数情况下,你不再需要下载很多风格的大模型。仅使用一个底模就可以轻松的驾驭各种不同风格的创意绘画,可见大有大的好处。
第五,flex对提示词和分辨率的要求都大大降低了,例如你不再需要输入负面提示词或者针对不同的模型,也不再需要谨慎的去选择不同的出图尺寸了,这才是走向AI终极大模型的正确姿势。
接下来咱们再详细说一下flex截止目前衍生出的各种模型。黑森林官方合计推出了3款flux模型,分别是pro DV和smile。其中pro版本效果最好,但是只能通过APPI接口来调用。我们放下不提。正常情况下我们能够免费使用到最好的就是这个DEV版本。它分为FP16和FPV的模型。其中FP16的模型容量大,显卡素质要求也高,建议显卡在90系列以下的同学直接忽略。没有顶配显卡的你也可以下载使用容量只有一半 的FP8版本。两者的出图效果其实差别不大,只会在非常细节的地方有所差异。
而施奈尔版本则相当于是第一位的turbo加速版,它可以把采样步数从20步降低到4到8步,大幅度的降低出图的等待时间。但是相比于DEV出图的效果也会相对差一些,不过依旧很棒。但即使是这样,最快最小的施奈尔FP8版本占用的显存也达到了14GB以上,对显卡的要求依旧很高。
所以市面上现在还推出了更小更快的GGUF和NF4两大版本。GGUF是把flex拆成了很多个不同尺寸的小模型,从Q2到Q8容量递增。这样你可以根据你的显卡情况来选择自己合适的模型。然后是NF4版本,它则是自己融合了clip VAE和T5文本编码器,所以它的容量要更大一些,达到了11GB。不过你只要拥有最低8GB的显卡显存,就可以轻松的降低这个模型了。
以下是这四种模型的出图效果对比。
好了,接下来咱们进入正题,看看flex如何使用。
首先你要把康复UI升级到最新版本,然后根据你的设备情况,把我给你准备好的所有模型文件下载并安装到正确的文件夹中。接着打开我准备好的flex文生图工作流,在这里选择你要使用的大模型,选择计算精度。然后在clip 1选择对应的T5文本编码器,在clip 2选择clip l出图模式,选择flex模式VAE,选择flex专用的VIE。这些模型只要你提前下载好,放到我标注好的正确位置上都可以自动的加载并识别出来。然后你还要输入正向提示词,并控制引导系数在2到3.5之间。采样器选择owner,调度器选择simple,然后点击生成。一个由flex解析的高质量AI图像就这样水灵灵的生成好了。
那如果你的电脑配置不够,需要使用TTUF或者NF4版本的模型,则单独打开我准备好的另外两个工作流即可。
虽然咱们全篇都在说flex的优点,但是缺点也不少,例如对control net或者其他插件的支持很少,例如对电脑的配置要求很高。但我想这些倒也不必担心,flex才刚刚推出半个月的时间,各种支持flex的Laura和衍生模型已经面向我们了,我相信用不了多久,flex就将会拥有自己完整的生态圈。
好了,本期视频就到这里了,希望看完视频的你也能跟紧脚步,拥抱flex家族。最后如果你喜欢本期视频,记得点赞、关注、收藏。我们下博同学,咱们下期再见。
### 探索AI绘图新宠flex:全方位攻略
在AI绘图领域,flex无疑是一颗耀眼的新星。它由黑森林工作室精心打造,实力非凡。
**一、flex的卓越性能**
与其他模型相比,flex出图效果堪称一绝!在相同条件下对比,优势尽显。它刚诞生就开源三款12B参数大模型,数据量达22GB,效果惊人。
**二、使用flex的爽点**
1. 画面效果超棒,无需插件就能生成逼真照片,画质、细节、质感惊艳。
2. 攻克AI画手难题,动漫和真实风格手部细节都出色。
3. 生成文字表现出色,详细提示词可达直出海报水平。
4. 训练参数大,一个底模就能驾驭多种风格绘画。
5. 对提示词和分辨率要求降低,使用更便捷。
**三、flex衍生模型全知道**
黑森林官方推出3款模型。pro版本效果最佳但需APPI接口;DEV版本免费且有FP16和FP8可选;施奈尔版本是turbo加速版,出图快但效果稍逊;还有GGUF和NF4版本,可按需选。
**四、flex使用指南**
升级康复UI,下载安装模型文件,打开工作流,选好大模型和计算精度等,设置好参数点击生成,电脑配置不够还有其他工作流可选。
AI绘图,flex,开源大模型,出图效果,模型对比
[Q]:flex是什么?
[A]:它是由黑森林工作室开发的用于AI绘图的大模型。
[Q]:flex相比其他模型优势在哪?
[A]:刚诞生就开源三款12B参数大模型,出图效果好。
[Q]:使用flex模型出图有哪些爽点?
[A]:画面效果强、攻克画手难题、文字生成出色等。
[Q]:flex有哪些衍生模型?
[A]:pro、DEV、施奈尔、GGUF、NF4版本。
[Q]:如何使用flex?
[A]:升级康复UI后下载安装模型文件,按步骤操作。
[Q]:电脑配置不够能使用flex吗?
[A]:可以,有适合低配置的工作流。
[Q]:flex目前支持中文吗?
[A]:现在还不支持。
[Q]:施奈尔版本有什么特点?
[A]:是turbo加速版,能大幅降低出图等待时间。
说一个2024年下半年度最火最有潜力的开源大模型是什么?一定是flux。那什么是flex?它是由黑森林工作室开发的一款全新的用于AI绘图的大模型。这个工作室的组成人员就是之前从stability AI离职的那一批核心骨干,所以它的实力可想而知。总结来说就一个字,猛。
可以给大家看一下,使用相同的提示词,相同的出图条件和出图尺寸在SD1.5SDXLSD3和flex的出图效果对比。毫无疑问flex出图效果占有绝对优势。
那为什么flex这么猛呢?我们拿曾经最被寄予厚望的SD3来做对比。SD3 medium训练参数2BSD3 large训练参数8B而flex才刚刚诞生,直接就开源了三款12B参数的大模型,足足是SD3 medium的六倍之多。单个模型的数据就达到了恐怖的22GB非常夸张,对应的效果也可想而知。
那在讲解flex如何使用之前,我们先来了解一下使用flex模型出图的爽点在哪。
第一,画面效果,这绝对是所有开源大模型里面最强的存在。仅凭借提示中不需要其他插件,即可生成以假乱真的照片。无论是画质、细节、质感都非常惊艳。如果再配上图片视频,各位看看我们在AI拍电影是不是又近了一步呢?
第二它攻克了AI画手的难题,无论是动漫风格还是真实风格,首部的细节都很好。从这些图片中你可以清楚的看到,flex绝对在手部的出图质量上下过很大的功夫。
第三,这很关键。Flax在生成文字方面的表现也让人出乎意料,你只要写提示词写的足够详细得当,它甚至可以达到直出海报的水平,你也可以在任意场景中添加任意的文字和任意的表达形式。虽然现在还不支持中文,但是你别急,我想行业内的大佬们肯定比我们还急。
第四,咱们刚才说过,flex拥有着巨大的训练参数,所以在大多数情况下,你不再需要下载很多风格的大模型。仅使用一个底模就可以轻松的驾驭各种不同风格的创意绘画,可见大有大的好处。
第五,flex对提示词和分辨率的要求都大大降低了,例如你不再需要输入负面提示词或者针对不同的模型,也不再需要谨慎的去选择不同的出图尺寸了,这才是走向AI终极大模型的正确姿势。
接下来咱们再详细说一下flex截止目前衍生出的各种模型。黑森林官方合计推出了3款flux模型,分别是pro DV和smile。其中pro版本效果最好,但是只能通过APPI接口来调用。我们放下不提。正常情况下我们能够免费使用到最好的就是这个DEV版本。它分为FP16和FPV的模型。其中FP16的模型容量大,显卡素质要求也高,建议显卡在90系列以下的同学直接忽略。没有顶配显卡的你也可以下载使用容量只有一半 的FP8版本。两者的出图效果其实差别不大,只会在非常细节的地方有所差异。
而施奈尔版本则相当于是第一位的turbo加速版,它可以把采样步数从20步降低到4到8步,大幅度的降低出图的等待时间。但是相比于DEV出图的效果也会相对差一些,不过依旧很棒。但即使是这样,最快最小的施奈尔FP8版本占用的显存也达到了14GB以上,对显卡的要求依旧很高。
所以市面上现在还推出了更小更快的GGUF和NF4两大版本。GGUF是把flex拆成了很多个不同尺寸的小模型,从Q2到Q8容量递增。这样你可以根据你的显卡情况来选择自己合适的模型。然后是NF4版本,它则是自己融合了clip VAE和T5文本编码器,所以它的容量要更大一些,达到了11GB。不过你只要拥有最低8GB的显卡显存,就可以轻松的降低这个模型了。
以下是这四种模型的出图效果对比。
好了,接下来咱们进入正题,看看flex如何使用。
首先你要把康复UI升级到最新版本,然后根据你的设备情况,把我给你准备好的所有模型文件下载并安装到正确的文件夹中。接着打开我准备好的flex文生图工作流,在这里选择你要使用的大模型,选择计算精度。然后在clip 1选择对应的T5文本编码器,在clip 2选择clip l出图模式,选择flex模式VAE,选择flex专用的VIE。这些模型只要你提前下载好,放到我标注好的正确位置上都可以自动的加载并识别出来。然后你还要输入正向提示词,并控制引导系数在2到3.5之间。采样器选择owner,调度器选择simple,然后点击生成。一个由flex解析的高质量AI图像就这样水灵灵的生成好了。
那如果你的电脑配置不够,需要使用TTUF或者NF4版本的模型,则单独打开我准备好的另外两个工作流即可。
虽然咱们全篇都在说flex的优点,但是缺点也不少,例如对control net或者其他插件的支持很少,例如对电脑的配置要求很高。但我想这些倒也不必担心,flex才刚刚推出半个月的时间,各种支持flex的Laura和衍生模型已经面向我们了,我相信用不了多久,flex就将会拥有自己完整的生态圈。
好了,本期视频就到这里了,希望看完视频的你也能跟紧脚步,拥抱flex家族。最后如果你喜欢本期视频,记得点赞、关注、收藏。我们下博同学,咱们下期再见。
### 探索AI绘图新宠flex:全方位攻略
在AI绘图领域,flex无疑是一颗耀眼的新星。它由黑森林工作室精心打造,实力非凡。
**一、flex的卓越性能**
与其他模型相比,flex出图效果堪称一绝!在相同条件下对比,优势尽显。它刚诞生就开源三款12B参数大模型,数据量达22GB,效果惊人。
**二、使用flex的爽点**
1. 画面效果超棒,无需插件就能生成逼真照片,画质、细节、质感惊艳。
2. 攻克AI画手难题,动漫和真实风格手部细节都出色。
3. 生成文字表现出色,详细提示词可达直出海报水平。
4. 训练参数大,一个底模就能驾驭多种风格绘画。
5. 对提示词和分辨率要求降低,使用更便捷。
**三、flex衍生模型全知道**
黑森林官方推出3款模型。pro版本效果最佳但需APPI接口;DEV版本免费且有FP16和FP8可选;施奈尔版本是turbo加速版,出图快但效果稍逊;还有GGUF和NF4版本,可按需选。
**四、flex使用指南**
升级康复UI,下载安装模型文件,打开工作流,选好大模型和计算精度等,设置好参数点击生成,电脑配置不够还有其他工作流可选。
AI绘图,flex,开源大模型,出图效果,模型对比
[Q]:flex是什么?
[A]:它是由黑森林工作室开发的用于AI绘图的大模型。
[Q]:flex相比其他模型优势在哪?
[A]:刚诞生就开源三款12B参数大模型,出图效果好。
[Q]:使用flex模型出图有哪些爽点?
[A]:画面效果强、攻克画手难题、文字生成出色等。
[Q]:flex有哪些衍生模型?
[A]:pro、DEV、施奈尔、GGUF、NF4版本。
[Q]:如何使用flex?
[A]:升级康复UI后下载安装模型文件,按步骤操作。
[Q]:电脑配置不够能使用flex吗?
[A]:可以,有适合低配置的工作流。
[Q]:flex目前支持中文吗?
[A]:现在还不支持。
[Q]:施奈尔版本有什么特点?
[A]:是turbo加速版,能大幅降低出图等待时间。
评论 (0)
