attention-couple-ComfyUI
プロンプトの領域指定を行うカスタムノードです。ComfyUIにはlatent coupleベースの領域指定法が存在しますが、こちらはUNet内のAttention層で領域分けします。
使い方
- custom_nodesにくろーん
- latent coupleと同様のノードを作る。参考：https://comfyui.creamlab.net/nodes/ConditioningSetMask
- loaderからattention coupleのノードをロードしてMODELとCONDITIONINGを繋げる
- 画像を作る
attention_couple.jsonも参考にしてください。
比較用として、modeをLatentにすると、latent coupleになります。といってもこのノードで何かするわけではなく入力をそのまま出力するモードになるだけです。
注意点
実験段階でたぶん色々問題があります。
- モデルのモジュールを無理やり書き換えるので他の機能になんらかの影響を与える可能性があります。
- Pytorch 2.0以上が必要です。
- サンプラーによっては想定しない動作が起こる可能性があります。（uncondとcondの順番が分からない・・・）
- どのプロンプトにも指定されていない領域があるとエラーが起こります。
- LoRAの領域指定は実装していないし見当もつきません。