原神の甘雨に似たキャラをLoRAで生成する方法【Stable Diffusion WebUI】

結果

原神(Genshin Impact)の甘雨は普通の人間モデルと違って、2本の角とボディスーツのような服が特徴的です。人間には無い特徴のためか、LoRAで生成する際は少しパラメータの設定を細かく調整しないといけなかったり、とにかく数を生成してより良いものを厳選する必要が出ました。

生成する方法

LoRAという、特定の画像スタイルを再現したり、あるいは新しい画像スタイルを作成したりすることができるモデルを利用していきます。

実際に行ったこと

環境

OSWindows 11 (22HS)
CPUCore i7-11700K
メモリ16GB
GPURTX 3070

前提条件

  • Stable Diffusion WebUI(AUTOMATIC1111)がインストールされていること

今回使うモデルのダウンロード

こちらからダウンロードすることができます。civitaiというサイトで、ダウンロードには会員登録が必須です。

モデルがダウンロードできるところ

今回使うモデル(YesMix)はさまざまのモデルをマージし、さらに製作者独自の画像を学習させ微調整させたモデルになります。今回使用するLoraの使用者自体もこのモデルを利用していたので、非常に高い精度で狙ったキャラの生成ができると思います。

Loraのダウンロード

Ganyu (Genshin Impact) – Realistic + Anime – LoRA

上記のリンクからダウンロードすることができます。

Loraのダウンロードもモデルダウンロードの時と同じになります。

モデルの移動

上記のやり方に従っているのであれば、ホームディレクトリにStable Diffusion WebUIのフォルダが存在します。その中の models/Stable-diffusion のフォルダにモデルを移動させます。

Loraの移動

ダウンロードしたLoRAを、models/Lora のフォルダにモデルを移動させます。

Stable Diffusion WebUIの起動

すでに起動している方は再起動をお願いします。

すると、上部の「Stable Diffusion checkpoint」でダウンロードしたモデルが選択できるようになっています。

モデルの選択

画像生成

positive prompt((masterpiece, best quality)), close-up, straight on, face focus,((1 girl)), {long hair}, standing, hair ornamen, gloves, (incredible absurdity), (detailed light),lighting, colorful, (gothic architecture), pond, (gorgeous background), dynamic angle, delicate background, (shine),ganyu (genshin impact), twin horn, bare shoulder, bodysuit
negative prompt(worst quality, low quality:1.4), EasyNegative, drawn by bad-artist-anime, bad-hands-5, watermark, monochrome, greyscale

呪文が入力できたら、LoRAの適用をします。呪文(プロンプト)を入力する下側のLoraタブをクリックしてください。

クリックすると、プロンプト入力下にLora一覧が出てきます。

これらをクリックすると、プロンプトに文字が入力されます。Stable Diffusionはこれらの文字列を認識して、LoRAを適用していきます。また、

 <lora:ganyu_ned2_offset:0.65>

:のあとにある数値はどれぐらいそのLoRAを適用するかの値です。

1にしてしまうとイラストがおかしくなってしまったので今回は0.65に設定します。

次にパラメータを設定していきます。こちらは普段通りで大丈夫です。

Sampling methodDPM++ 2M Kerras
Sampling steps28
CFG Scale8
UpscalerR-ESRGAN 4x+ Anime6B
Upscaler(Hires steps)0
Upscaler(Denosing strength)0.65
Upscaler(Upscale by)2
Width512
Height768

width, height(幅、高さ)はご自由に設定くださいませ。

この設定でGenerateを押下すれば記事最初のようなイラストが生成されると思います。

お疲れさまでした!

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です