← 返回 AI 开源导航

Controlnet

图像生成

一、项目简介

ControlNet 是通过额外条件(如边缘、姿态、深度、涂鸦)精确控制扩散模型生成结构的神经网络架构。它让文生图从「靠运气」走向「可控」,是 AI 绘画领域最具影响力的技术之一。

二、核心特性

  • 结构可控:用 Canny 边缘、OpenPose 姿态、深度图等约束构图;
  • 即插即用:无需重训底座模型;
  • 多种预处理器:覆盖常见控制需求;
  • 生态广泛:被 SD WebUI、ComfyUI 等广泛集成;
  • 支持微调自定义。

三、适用场景

  • 指定人物姿态生成;
  • 保持线稿/结构一致的出图;
  • 建筑、产品等需要精确构图的场景。

四、快速上手

# 在 SD WebUI / ComfyUI 中安装 ControlNet 扩展
# 加载控制模型并上传参考图(如 Canny 边缘图)即可生成

五、注意事项

  • 控制强度需调参,过强会限制创意;
  • 预处理器结果直接影响控制效果;
  • 需匹配底座模型版本(如 SD1.5 / SDXL)。