SDXL移行テストのアレコレ
使用したAI
Stable Diffusion XL
RTX3060で1024解像度学習が出来るのか…→出来たあ！ になってきたので色々参考にしつつSDXL移行。
学習素材がコイカツのStudioだけでキャラクターの再現(髪・顔を中心で体型と服装は問わない)を行っていた。
SD1.5ではコイカツの3D風画像だけ出てくるように絵柄と画角を過学習させたLoRAを学習対象モデルにマージし、そのモデルを用いて学習する事で上手く差分としてキャラの特徴だけを抜き出していた(所謂コピー機学習)。
SDXLでは学習させたいキャプションを消し(所謂マルゼンスキーム)に3D、virtual youtuberを入れて3Dぽさを学習対象から外して学習を行った。
学習に用いたモデルはAnimagine XL V3.1
結果がこれ。SD1.5に比べてプロンプトの効きが半端ない。
SD1.5で作成したLoRAに比べて、SDXLでは学習に使用したのと別のモデルでは上手く生成が出来ない傾向にある。
※自作のキャラLoRAを使用しています
学習素材がコイカツのStudioだけでキャラクターの再現(髪・顔を中心で体型と服装は問わない)を行っていた。
SD1.5ではコイカツの3D風画像だけ出てくるように絵柄と画角を過学習させたLoRAを学習対象モデルにマージし、そのモデルを用いて学習する事で上手く差分としてキャラの特徴だけを抜き出していた(所謂コピー機学習)。
SDXLでは学習させたいキャプションを消し(所謂マルゼンスキーム)に3D、virtual youtuberを入れて3Dぽさを学習対象から外して学習を行った。
学習に用いたモデルはAnimagine XL V3.1
結果がこれ。SD1.5に比べてプロンプトの効きが半端ない。
SD1.5で作成したLoRAに比べて、SDXLでは学習に使用したのと別のモデルでは上手く生成が出来ない傾向にある。
※自作のキャラLoRAを使用しています
呪文
- Steps 28
- Scale 7
- Seed
- Sampler Euler a
- Strength
- Noise
- Steps 28
- Scale 7
- Sampler Euler a
