ControlNet挂上之后生成的图依然不像参考图，是很多人使用Stable Diffusion时最常遇到的问题之一。出现这种情况，原因通常不是模型坏了，而是三个环节出了偏差：预处理器选得不匹配、权重设置太保守、控制介入的时机不对。这篇文章就围绕这三个环节，把控制弱的问题彻底讲清楚。
先搞清楚控制为什么会变弱
ControlNet的工作原理是把一张额外的条件图（比如骨架图、边缘线稿、深度图）注入到扩散过程的每一层U-Net中，引导画面的结构走向。也就是说，它控制的是结构和构图，而不是风格和内容细节。如果你期望它控制的东西和它实际能控制的东西对不上，结果自然会觉得“没效果”。
控制变弱的第一类原因是预处理结果本身有问题。比如你上传了一张人物照片，却选择了Depth深度预处理器，生成的深度图一片模糊灰蒙，里面几乎没有可用的结构信息，后续ControlNet模型拿到的就是一份“劣质图纸”，画出来的结构自然飘忽不定。第二类原因是控制信号在生成过程中被稀释，也就是权重太低或者介入太晚，模型在前期已经把构图定死了，后期ControlNet再怎么发力也只能做微调。
还有一类容易被忽略的情况：多个ControlNet之间互相打架。比如同时挂了OpenPose和Lineart，一个控制骨骼姿态，一个控制轮廓线条，如果两者的参考图本身不一致，或者权重都很高，模型会在两套约束之间来回摇摆，最终表现出来的就是控制力互相抵消。排查控制弱的问题时，建议先把所有ControlNet单元关到只剩一个，确认单路控制正常后，再逐个加回去观察。
预处理器的选择逻辑：控制什么就用什么
预处理器决定了从参考图中提取哪一类信息，这是整个控制链路的源头。选错预处理器是最常见的翻车点。下面这个对照表可以帮助你快速判断：
| 控制目标 | 推荐预处理器 | 适用场景 |
|---|---|---|
| 人物姿态 | OpenPose | 指定动作、姿势复刻，不关心细节 |
| 轮廓外形 | Canny、Lineart | 保持物体边缘和外形，常用于线稿上色 |
| 空间层次 | Depth | 控制前后远近关系、场景纵深 |
| 建筑直线 | MLSD | 室内设计、建筑外观等横平竖直的场景 |
| 软边缘 | SoftEdge、HED | 比Canny更宽松的轮廓约束，保留一定发挥空间 |
| 涂鸦草图 | Scribble | 随手涂鸦扩展成完整画面 |
选择的核心逻辑是：你想控制画面的哪个维度，就选提取那个维度的预处理器。想控制人物动作就选OpenPose，它的输出是一套简洁的彩色骨架，只保留关节位置信息，人物长相、服装全都可以换。想保持一个产品的外形轮廓不变但更换材质和颜色，就选Canny或Lineart。想保持场景的空间布局但替换主体内容，Depth更合适。
另外要注意预处理器的参数。以Canny为例，它有低阈值和高阈值两个参数，阈值过低会提取出大量杂乱的噪点线条，干扰模型；阈值过高则会丢失关键边缘。Lineart有写实、动漫等不同模式，处理不同风格的参考图时用错模式，提取的线条质量也会明显下降。每次提取完成后，一定要肉眼检查预处理结果图：骨架是否摆对了位置，线条是否完整清晰，深度图是否能看出前后层次。预处理图本身不合格，后面的权重调到天上去也没用。
权重与介入时机的调参技巧
确定预处理器没问题之后，接下来就是控制强度。WebUI中主要有三个参数：控制权重、引导介入时机和引导终止时机。
控制权重默认是1，范围一般可以到2。权重0.4到0.6属于弱控制，画面只受轻微引导，适合想要 loosely 参考构图的情况；0.8到1.0是常规强度，大多数场景够用；1.2以上属于强控制，画面的结构和参考图会高度贴合，但过高会出现副作用，比如线条生硬、画面细节减少、与提示词产生冲突导致色彩异常。如果你的问题是控制太弱，优先把权重从1往1.3、1.5方向调整，观察效果变化。
引导介入时机控制ControlNet从第几步开始起作用。默认0表示从第一步就介入。如果生成结果的结构前期就跑偏了，保持介入时机为0很重要，因为扩散过程的前几步正是决定大构图的阶段，错过了就很难拉回来。引导终止时机默认是1（全程参与），如果你希望画面结构大致贴合但细节自由发挥，可以把它设到0.5到0.8，让ControlNet在生成后半段退出，释放细节创作的自由度。
三个参数的配合思路可以这样总结：控制不够像，先升权重；升权重后画面变僵或者提示词失效，就适当降低终止时机，缩短控制时长；想要结构只在前期锁定，就拉低终止时机而不是降低权重。此外，采样步数也有影响，步数太少（比如20步以下）时每个阶段分到的步数有限，控制信号的施展空间小，建议控制在25到35步之间测试。
常见翻车案例与排查清单
案例一：用OpenPose控制多人合影，结果人物动作乱套。原因是OpenPose预处理器检测到多个人时会输出多套骨架，但如果Detection Resolution不够或者人物重叠严重，骨架可能漏检或错检。解决办法是提高检测分辨率，或者在编辑器中手动修正骨架图。
案例二：Lineart上色时颜色总是溢出线稿边界。这通常是权重偏低加终止时机太早的组合导致的。把权重提到1以上，终止时机放到0.9左右，同时确认提示词里没有过于强势的背景描述与线稿冲突。
案例三：加了ControlNet之后画面质量明显下降，出现灰斑或扭曲。这是强控制与高分辨率修复冲突的典型表现。可以尝试在Hires Fix中关闭ControlNet，或者降低高分辨率修复的放大倍数。
最后给一份快速排查清单：一查预处理输出图是否正常；二查预处理器与ControlNet模型版本是否匹配，比如必须用OpenPose预处理器配control openpose模型，不能交叉乱配；三查权重是否过低；四查介入时机是否为0；五查是否有多路控制互相冲突；六查提示词是否与控制信号矛盾，比如参考图是侧身站姿，提示词却写了front view，两边打架时谁赢都不奇怪。
把预处理器、权重、时机这三个环节理顺之后，ControlNet的控制力基本可以做到指哪打哪。调参本质上是在“贴合参考”和“保留发挥”之间找平衡点，建议每次只动一个参数，多生成几张对比，很快就能建立起自己的参数手感。
ControlNet预处理器权重调整修改时间：2026-09-01 13:15:26