秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

大家好,这里是和你们一起探索 AI 的花生~ 最新 ControlNet 有两款新模型非常热门,一个是用于提取图像线稿的预处理模型 Anyline,一个是 SDXL 线条类控制模型 Mistoline。它们不仅单独的功能强于目前的 canny、lineart、softedge 等模型,组合在一起更是可以快速准确地处理超复杂的图像,今天就为大家详细介绍一下它们的特点和用法。 相关推荐:一、Anyline Anyline 是一款新的线条类预处理模型,可以从大部分图像中快速提取高精度的线稿图。与其他常用的线条预处理器相比

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

大家好,这里是和你们一起探索 AI 的花生~

最新 ControlNet 有两款新模型非常热门,一个是用于提取图像线稿的预处理模型 Anyline,一个是 SDXL 线条类控制模型 Mistoline。它们不仅单独的功能强于目前的 canny、lineart、softedge 等模型,组合在一起更是可以快速准确地处理超复杂的图像,今天就为大家详细介绍一下它们的特点和用法。

相关推荐:

一、Anyline

Anyline 是一款新的线条类预处理模型,可以从大部分图像中快速提取高精度的线稿图。与其他常用的线条预处理器相比,Anyline 在轮廓精度、对象细节和字体识别(尤其是在大型场景中)方面具有显著优势。在大多数场景中,它在减少噪点方面也表现更好,能实现更清晰的图像处理。

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

下图是 Anyline 与其他预处理模型的效果对比,可以看到 Anyline 可以提取非常微小的细节,线条也非常完整清晰,即使是很小的文字也可以复现,相比之下 canny 和 lineart 在细节上多少都会有一些丢失。因此 Anyline 非常适合用来处理场景复杂或者需要精准控制细节的图像,比如文字、纹理材质、机械细节等。

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

Anyline 目前已经可以在 SD WebUI 和 ComfyUI 中使用了。SD WebUI 只需要将 controlnet 更新到最新版本,就能在预处理器列表中看到 softedge_anyline 选项了。初次使用会自动从网上下载一个 MTEED.pth 文件到 extensions\sd-webui-controlnet\annotator\downloads\TEED 文件夹中,如果自动下载失败可以手动安装(文末云盘有模型资源)

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

如果是 ComfyUI,需要先安装一个名为 comfyui-anyline 的插件,可以从 manager 中安装,也可以通过 github 克隆。安装完成后,再进入插件文件夹中,打开终端执行 pip install -r requirements.txt 命令。然后重启 comfyui,搜索 “anyline” 即可找到对应节点。

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

二、MistoLine

MistoLine 是一款强大的 SDXL ControlNet 控制模型,它可以根据用户提供的各种类型的线条图生成高质量的图像(短边大于 1024px),包括手绘草图、不同的 ControlNet 线条类预处理图和 3D 模型线框图等。

MistoLine 生成的图像在稳定性、细节还原上比现有的线条类 CN 模型表现都好。如果和 Anyline 配合使用,加上 SDXL 模型,可以很轻松地生成 1024*1024px 以上的高清图像,用来处理场景复杂、层次丰富、纹理丰富的图像效果非常好,因此目前最推荐的就是 Anyline 和 MistoLine 的搭配使用。

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

MistoLine 同样可以在 SD WebUI 和 ComfyUI 中使用, 使用时前需要下载 mistoLine_rank256.safetensors 模型(文末有资源包),安装到 extensions\sd-webui-controlnet\models 或者 comfyui\models\controlnet 中,然后重启应用,再按正常流程选用模型即可。使用时需要注意选择 SDXL 的 checkpoints 大模型。

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

文末的资源包内有还有搭建好的 Anyline+Mistoline ComfyUI 工作流,用来处理大幅的、场景复杂、需要清晰细节的图像非常方便。

秒杀 Canny ! 一文详解2款 ControlNet 新模型 Anyline & Mistoline

那么以上就是本期为大家推荐的 Controlnet 线条类新模型 Anyline 和 Mistoline。喜欢的话记得点赞、收藏、评论三连支持一波,我会更有动力为大家推荐更多 AI 干货内容。相关模型、工作流文件都在下方的云盘链接内,记得下载~

如果你也想学习使用 Midjourney 和 Stable Diffusion 这两款 AI 绘画工具,可以了解一下我最新制作的课程《零基础 AI 绘画入门》已经上线,课程包含对 Midjourney 及 Stable Diffusion WebUI 的系统入门教学,并提供配套资源、各类实用工具和提示词库,能帮助初学者快速掌握这 2 款目前最热门的 AI 工具,感兴趣的小伙伴可以戳的链接了解详情:夏花生的《零基础 AI 绘画录播课》

相关资讯

万能模型 ControlNet Union !10+控制效果一键生成!

大家好,这里是和你们一起探索 AI 的花生~ Controlnet 可以说是目前最重要的一款 AI 绘画控制插件,可以帮我们实现轮廓、深度、动作姿势、颜色等多种控制效果。由于每种控制条件都需要调用不同的控制模型,加上 SD1.5 和 SDXL 的生态并不互通,大家肯定都至少安装了十几种模型文件,给磁盘空间带来了很大的压力。 最近一款名为 ControlNet 的模型却改变了这个状况,它将十多种控制功能合为一体,只需要安装一个模型,就能和多种不同的预处理器搭配使用,今天就来看看它的具体用法。 相关推荐:一、Con

Stable Diffusion进阶!姥姥都能看懂的ControlNet超全教程!

前言 Hello,大家好,言川又来写教程啦!!这是一篇继《外婆都能看懂的 Stable Diffusion 入门教程》教程之后的一篇文章,如果你还没有安装并了解 stable diffusion 这个软件,那么你一定要先去看看入门教程的文章,然后安装 stable diffusion。一、Controlnet(图像精准控制)是什么? ControlNet 是一个用于控制 AI 图像生成的插件。它使用了一种称为"Conditional Generative Adversarial Networks"(条件生成对抗网络

AI绘画神级插件 Controlnet 连续更新!手把手教你安装体验新功能(附模型资源)

大家好,这里是和你们一起探索 AI 绘画的花生~ Stable Diffusion WebUI 的绘画插件 Controlnet 在 4 月份更新了 V1.1 版本,发布了 14 个优化模型,并新增了多个预处理器,让它的功能比之前更加好用了,最近几天又连续更新了 3 个新 Reference 预处理器,可以直接根据图像生产风格类似的变体。使用 Reference only 预处理器生成一张图片的多个变体 因为 Controlnet 在更新时涉及到多个网页里的不同的资源,所以今天就从头帮大家梳理一下更新 V1.1 所