「あづい…もぅマヂ無理…」（Hipoly3D LoRAの階層別適用による顔変化検証＋ControlNet）

2023/04/07

使用したAI Custom Model

ControlNetでポーズ指定する場合など、Hipoly3D LoRAで体型を整えたいことがよくありますが、このLoRAの適用強度を上げると顔もリアル3Dっぽくなってしまう難点があります。
これまではi2iで差し替えてきましたが、髪の毛まで2D風に直すのが難しい…などと考えていたところ、以下の記事でLoRAを階層別に適用することで顔への影響を減らせるという知見を得たので試してみました。
（今回は顔に対する調査のため、いくつか手や足がおかしくなっているものがありますが無視しています）

https://yamoberus.fanbox.cc/posts/5510761

※以下呪文の「HP3D」はLoRA階層別適用のため自分で付けたプリセット名です。プリセット指定は記事通り「HP3D:1,1,1,1,1,1,1,1,0,0,0,1,1,1,1,1,1」です。

1枚目：上記呪文通りのオリジナル（LoRA適用無し）
2枚目：LoRA強度0.6で適用、階層指定無し（<lora:hipoly3DModelLora_v10:0.6>, hiqcgbody）
3枚目：LoRA強度0.6で適用、階層指定あり（<lora:hipoly3DModelLora_v10:0.6:HP3D>, hiqcgbody）
4枚目：LoRA強度0.4で適用、階層指定無し（<lora:hipoly3DModelLora_v10:0.4>, hiqcgbody）
5枚目：LoRA強度0.4で適用、階層指定あり（<lora:hipoly3DModelLora_v10:0.4:HP3D>, hiqcgbody）
6枚目：LoRA強度0.3で適用、階層指定無し（<lora:hipoly3DModelLora_v10:0.3, hiqcgbody）
7枚目：LoRA強度0.3で適用、階層指定あり（<lora:hipoly3DModelLora_v10:0.3:HP3D>, hiqcgbody）
8枚目：ControlNet指定ポーズ（openposeモデル）

見てみると、階層適用することで頭や顔への影響がはっきりと下がり、体型のほうにはきちんとHipolyの効果が残っていることがわかります。

いっぽう、強度については0.4までは顔の違いがしっかり出ますが、0.3では顔にあまり差がありません。このLoRAは一般的に0.3～0.2くらいで適用するのがよいとされていますので、普段はそこまで気にしなくてもよいのかもしれません。

体型調整を強めにかけたいときに、この手法を使って適用度を0.4～0.5くらいに上げる、というのが適切な使い方でしょうか。

呪文

呪文を見るにはログイン・会員登録が必須です。

イラストの呪文（プロンプト）

jacket partially removed, heart in eye, burnt clothes, holding fishing rod, kanji, doujin cover, pentagram, tape gag, adjusting headwear, red socks, friends, cloud print, coke-bottle glasses, oral invitation, competition school swimsuit, barbell piercing, gradient legwear, prisoner, blood on breasts, wind chime, carrying over shoulder, tape measure, flaming weapon