原神の甘雨に似たキャラをLoRAで生成する方法【Stable Diffusion WebUI】

結果

原神（Genshin Impact）の甘雨は普通の人間モデルと違って、２本の角とボディスーツのような服が特徴的です。人間には無い特徴のためか、LoRAで生成する際は少しパラメータの設定を細かく調整しないといけなかったり、とにかく数を生成してより良いものを厳選する必要が出ました。

生成する方法

LoRAという、特定の画像スタイルを再現したり、あるいは新しい画像スタイルを作成したりすることができるモデルを利用していきます。

実際に行ったこと

環境

前提条件

• Stable Diffusion WebUI（AUTOMATIC1111）がインストールされていること

今回使うモデルのダウンロード

こちらからダウンロードすることができます。civitaiというサイトで、ダウンロードには会員登録が必須です。

今回使うモデル（YesMix）はさまざまのモデルをマージし、さらに製作者独自の画像を学習させ微調整させたモデルになります。今回使用するLoraの使用者自体もこのモデルを利用していたので、非常に高い精度で狙ったキャラの生成ができると思います。

Loraのダウンロード

Ganyu (Genshin Impact) – Realistic + Anime – LoRA

上記のリンクからダウンロードすることができます。

Loraのダウンロードもモデルダウンロードの時と同じになります。

モデルの移動

上記のやり方に従っているのであれば、ホームディレクトリにStable Diffusion WebUIのフォルダが存在します。その中の　models/Stable-diffusion のフォルダにモデルを移動させます。

Loraの移動

ダウンロードしたLoRAを、models/Lora のフォルダにモデルを移動させます。

Stable Diffusion WebUIの起動

すでに起動している方は再起動をお願いします。

すると、上部の「Stable Diffusion checkpoint」でダウンロードしたモデルが選択できるようになっています。

画像生成

呪文が入力できたら、LoRAの適用をします。呪文（プロンプト）を入力する下側のLoraタブをクリックしてください。

クリックすると、プロンプト入力下にLora一覧が出てきます。

これらをクリックすると、プロンプトに文字が入力されます。Stable Diffusionはこれらの文字列を認識して、LoRAを適用していきます。また、

 <lora:ganyu_ned2_offset:0.65>

：のあとにある数値はどれぐらいそのLoRAを適用するかの値です。

1にしてしまうとイラストがおかしくなってしまったので今回は0.65に設定します。

次にパラメータを設定していきます。こちらは普段通りで大丈夫です。

width, height(幅、高さ)はご自由に設定くださいませ。

この設定でGenerateを押下すれば記事最初のようなイラストが生成されると思います。

お疲れさまでした！