课目表/L2 节点字典/L2-02b 结构与风格条件

L2 字典 · 第二课 B

结构与风格条件:
图怎么给模型立规矩

一句话能说清大意,却锁不住构图和质感。手上有参考图时,模型要的不是“像它”这种模糊要求,而是明确约束:哪条线不能歪,哪种气质要带过来。这一节走参考图这条来路。

前情提要:上一节 L2-02 走完文字那一路:一句话经 token 切分与 CLIP 编码,变成 CONDITIONING。这一节换参考图:结构条件锁住轮廓与位置,风格条件只借气质,不改构图。

结构条件(ControlNet):把参考图的线稿、深度或分割结果,变成采样时躲不开的约束。反例:它不是风格滤镜,颜色与笔触都不归它管。风格条件(IPAdapter):只借参考图的配色与笔触,位置和轮廓仍由提示词与采样决定。反例:它不是低强度的 ControlNet,两者作用的层不同。

ControlNetApplyAdvancedAIO_Preprocessor ReferenceLatentIPAdapterAdvanced IPAdapterNoise ← L2-02 文本条件 → L2-02c 文字工具

01 / 结构条件把参考图变成“硬约束”

硬约束:位置、轮廓、前后关系照参考图走,模型没有商量余地。反例:它不是提示词里那句“请照着这个构图”,写多少遍都不如接一路控制来得直接。一张照片要变成硬约束,中间还得先加工成控制图。

完整的一条链有四步:参考图 → 预处理 → ControlNet 模型 → 压制进条件。前两步备料,第三步加载,最后一步才真正生效。ControlNet 的原理在 L1-04 讲过,这里只看节点怎么接、值是多少。

ControlNetApplyAdvanced真正施加 ControlNet 的地方+

线稿和深度图都备好了。什么时候真正起作用?在这一步。

ControlNetApplyAdvanced 同时收正向、负向、ControlNet 模型和控制图,吐出改过的正向与负向。强度和起止区间都在这里设。反例:它不是“加载器”,模型加载在上一册;这里负责把控制压进条件里。

positivenegativeCONTROL_NETIMAGEpositivenegative
strength控制强度,0–1。
start_percent从采样进度百分之几开始生效。
end_percent到百分之几停止生效。
04 深度 #12 0.35(0–1)、线稿 #48 0.3(0–1);03 0.25 / 0.2;02 两张都是 0.6;LINK #2 0.7,区间 0–0.7;01 #188 0.6,区间 0–0.8。

易错:它有两个输出,正负向都要接回采样器;只接正向会让负向绕开控制,效果变得不稳定。

AIO_Preprocessor把照片处理成控制图+

手上是一张照片,ControlNet 要的是一张线稿或深度图。中间这一步就是预处理。

一个节点集了多种预处理器,用下拉切换。输出一张 IMAGE,接到 ControlNetApplyAdvanced 的 image 口。反例:它不做美化,输出是给控制模型看的中间图,不是成品。

IMAGEIMAGE
preprocessor本套出现 DepthAnythingV2、LineartStandard、LineArt、OneFormer-ADE20K-SemSeg。
resolution本套统一为 512。
04 深度 #17 DepthAnythingV2Preprocessor、线稿 #50 LineartStandardPreprocessor;文生图+深度+语义 #25 OneFormer-ADE20K-SemSegPreprocessor;LINK #4 LineArtPreprocessor。

易错:预处理器类型必须与 ControlNet 模型同类;分辨率 512 意味着细节会被压缩,不等于原图全分辨率。

上面两步走的是像素级约束:先算出一张控制图,再把控制图的特点压进条件。还有一条更轻的路:不画控制图,把参考图压成潜变量,直接挂到条件上,让模型自己看着办。这就是 ReferenceLatent 干的事,Flux2 的编辑工作流常备这一手。

ReferenceLatent把参考潜变量塞进条件+

拿一张图当参考,又不想把它的构图硬套过来。Flux2 的编辑工作流靠这一步。

ReferenceLatent 把参考图编码后的 LATENT 挂到 CONDITIONING 上,采样时模型就能“看见”那张图。挂上去的是 1/8 草稿画布上的那层数据,不是原图像素。反例:它不是“把参考图拼进画布”;拼像素是另一回事,两个口也接不上。

CONDITIONINGLATENTCONDITIONING
04 子图 #341 与 #343 各出现一次,对应两路参考潜变量;02 子图出现四次(#145/#146/#148/#150),03 子图 #342/#344。

易错:要先把参考图 VAEEncode 成 LATENT,再接进来;直接把 IMAGE 插进 LATENT 口是接不上的。

两条路的分工可以这么记:ControlNet 管“线要落在这里”,ReferenceLatent 管“照这张图的样子改”。前者的输入是控制图,后者的输入是潜变量。

02 / 风格条件不改变构图,只改变气质

软约束:只借参考图的配色、光线与笔触,位置和轮廓交回给提示词与采样。反例:它不是“调低强度的 ControlNet”,两者作用的层不同,一个改条件,一个改模型。

判断标准很短:输出接 CONDITIONING 的,归结构这一路;输出接 MODEL 的,归风格这一路。IPAdapter 属于后者,它插在模型加载与采样器之间,主模型不动,只被改装一层。原理在 L1-05 讲过,这里看接法与真实参数。

IPAdapterAdvanced把图像向量注入模型+

风格参考图有了,你只想改气质、不改构图。这时候接的是它。

注意输出:MODEL,不是 CONDITIONING。它插在“模型加载”和“采样器”之间,直接改写模型的注意力。反例:它不是“换模型”,主模型还是原来那个,只是被改了一层。

MODELIPADAPTERIMAGECLIP_VISIONMODEL
weight风格权重,本套 0.70–0.80。
weight_typestyle transfer 或 strong style transfer。
start_at / end_at注入的起止进度;本套 end 为 0.877–1.0。
04 #37 0.70 · style · 0–0.95;03 #37 0.75 · style · 0–0.9;02 #134 0.70 · strong · 0–1;IPA #37 0.72 · strong · 0–0.877;LINK #10 0.80 · style · 0–1。

易错:把它当条件节点接在采样器后面,会直接接不上;它是“改装模型”,位置在采样之前。

IPAdapterNoise给风格配一个反例+

风格贴得太死,画面快变成参考图的复制品。给这一路配个反例。

IPAdapterNoise 生成一张渐变噪声图,接到 IPAdapterAdvanced 的 image_negative,用来压住过强的风格贴合。反例:它不是“负向提示词”,这里不给文字,只给一张噪声图。

IMAGE(可选)IMAGE
type本套统一 fade。
strength0.4
blur5
04 #41、03 #41、02 #132、IPA #41、LINK #8,五处参数完全一致。04 中 #41 接收 #33 的参考图,输出回 #37 的 image_negative。

易错:它输出的是图像,不是条件;不要接到 CONDITIONING 口。

两路可以同时开:04 的深度控制 #12 设 0.35,风格注入 #37 设 0.70,一个管构图,一个管质感。两条线互不抢口,因为一条走条件,一条走模型。

顺序也别记反:先有模型,再让 IPAdapter 改装模型,最后才交给采样器。ReferenceLatent 相反,它挂在条件上,跟着条件一起进采样器。

03 / 动手沿链找来源,再动手换参考图

1

打开 04,从 #4 KSampler 的 positive 口往回追。把中间经过的条件节点一个个列出来,再看 #13 与 #49 这两个 ControlNet 模型从哪加载。

目标:看清“文本 + 深度 + 线稿”如何合成同一路条件。

2

仍在 04,把 #17 的输入照片换成你自己的一张。预处理器保持 DepthAnythingV2Preprocessor,resolution 仍是 512,#12 的 strength 仍是 0.35,跑一次。

目标:控制强度不变时,看构图跟随程度随参考图怎么变。

3

打开 03,找到 #37 IPAdapterAdvanced(0.75 · style · 0–0.9)。把 weight 提到 0.9 跑一次;再把 03 里 ControlNetApplyAdvanced 的 strength 从 0.25 降到一半跑一次,对比两次画面。

目标:体会硬约束动构图、软约束动气质。

04 / 自检硬约束与软约束,各走各的口

勾选你真正掌握的条目(本机自动记住)