Controlnet
一、项目简介
ControlNet 是通过额外条件(如边缘、姿态、深度、涂鸦)精确控制扩散模型生成结构的神经网络架构。它让文生图从「靠运气」走向「可控」,是 AI 绘画领域最具影响力的技术之一。
二、核心特性
- 结构可控:用 Canny 边缘、OpenPose 姿态、深度图等约束构图;
- 即插即用:无需重训底座模型;
- 多种预处理器:覆盖常见控制需求;
- 生态广泛:被 SD WebUI、ComfyUI 等广泛集成;
- 支持微调自定义。
三、适用场景
- 指定人物姿态生成;
- 保持线稿/结构一致的出图;
- 建筑、产品等需要精确构图的场景。
四、快速上手
# 在 SD WebUI / ComfyUI 中安装 ControlNet 扩展
# 加载控制模型并上传参考图(如 Canny 边缘图)即可生成
五、注意事项
- 控制强度需调参,过强会限制创意;
- 预处理器结果直接影响控制效果;
- 需匹配底座模型版本(如 SD1.5 / SDXL)。