ControlNet Reference Onlyを試す
使用したAI
Custom Model
前投稿（ https://www.chichi-pui.com/posts/c540dda9-bc0f-4957-9c25-b3433656d961/ ）の表題の子が可愛かったので、同じキャラクターで他の絵を出せないかと、ControlNetに最近追加されたReference Onlyモードを試してみました。
元画像をControlNetの参照画像にし、プリプロセッサを「reference_only」に設定するだけなので使い方は簡単です。
プロンプトは服装やポージングなど少し変更していくつか出してみました。
結果、髪と目（色と形）は確かに元の感じを維持してくれるのですが、顔つきはシードが変わることもあり、若干バリエーションが生じるようです。
また、元絵が帽子付きだったためどうしても同じ帽子姿で出てしまうことが多く、Negativeに帽子を指定してみたものの髪に何か付いてくる頻度が高いことは変わらなかったため、途中からは掲載2枚目の帽子無しだった画像を参照元に切り替えてみました。
そして、元絵が青色系の学生服だったため、服装をいろいろ変えてみても色合いは元絵に引きずられてしまうようです。
ポーズについても、顔ごと横向きなど大きな変更はプロンプト指定が効かず、何枚か試した中では体だけ横向き（顔はこちら向き）にするのが精一杯でした。
簡易LoRAのように使えるとは言われていますが、Reference Onlyは服装や帽子などはそのままポーズだけ変えるなどの使い方がメインで、キャラクター（人体）だけ維持して画角や服装は変えたいというならLoRAを作る、というのが本来の棲み分けでしょうか。
元画像をControlNetの参照画像にし、プリプロセッサを「reference_only」に設定するだけなので使い方は簡単です。
プロンプトは服装やポージングなど少し変更していくつか出してみました。
結果、髪と目（色と形）は確かに元の感じを維持してくれるのですが、顔つきはシードが変わることもあり、若干バリエーションが生じるようです。
また、元絵が帽子付きだったためどうしても同じ帽子姿で出てしまうことが多く、Negativeに帽子を指定してみたものの髪に何か付いてくる頻度が高いことは変わらなかったため、途中からは掲載2枚目の帽子無しだった画像を参照元に切り替えてみました。
そして、元絵が青色系の学生服だったため、服装をいろいろ変えてみても色合いは元絵に引きずられてしまうようです。
ポーズについても、顔ごと横向きなど大きな変更はプロンプト指定が効かず、何枚か試した中では体だけ横向き（顔はこちら向き）にするのが精一杯でした。
簡易LoRAのように使えるとは言われていますが、Reference Onlyは服装や帽子などはそのままポーズだけ変えるなどの使い方がメインで、キャラクター（人体）だけ維持して画角や服装は変えたいというならLoRAを作る、というのが本来の棲み分けでしょうか。
呪文
呪文を見るにはログイン・会員登録が必須です。
イラストの呪文（プロンプト）
jacket partially removed, heart in eye, burnt clothes, holding fishing rod, kanji, doujin cover, pentagram, tape gag, adjusting headwear, red socks, friends, cloud print, coke-bottle glasses, oral invitation, competition school swimsuit, barbell piercing, gradient legwear, prisoner, blood on breasts, wind chime, carrying over shoulder, tape measure, flaming weapon
イラストの呪文（ネガティブプロンプト）
jacket partially removed, heart in eye, burnt clothes, holding fishing rod, kanji, doujin cover, pentagram, tape gag, adjusting headwear, red socks, friends, cloud print, coke-bottle glasses, oral invitation, competition school swimsuit, barbell piercing, gradient legwear, prisoner, blood on breasts, wind chime, carrying over shoulder, tape measure, flaming weapon
- Steps 50
- Scale 7
- Seed
- Sampler DPM++ 2S a Karras
- Strength
- Noise
- Steps 50
- Scale 7
- Sampler DPM++ 2S a Karras
