VTuberの宝鐘マリンに似たキャラをLoRAで生成する方法

結果

宝鐘マリンはホロライブ3期生で、自称「永遠の17歳」のバーチャル海賊です。

彼女の特徴は、女海賊のコスプレをしていることで、実際には海賊船を持っていません。

左右で色の異なるオッドアイが特徴的で、眼帯をめくるとその姿を確認できます。

マリンは非常にエネルギッシュで、下ネタにも積極的に触れることがありますが、その一方で下品なことは好まないとも述べています。

彼女はまた、セルフプロデュース能力が非常に高く、自身のブランドを確立しています。趣味はかわいいものを集めることや、エロ本を探すこと、そして妄想や歌を楽しむことです。

特技には歯磨きやイラストを描くこと、モノマネがあります。好きな食べ物はフライドポテトと一気に酔える酒で、苦手なものには弾力があって噛み切れない食べ物や炭酸、焼酎があります。

彼女の配信は、その明るくて時には過激な性格から多くのファンに愛されています。

生成する方法

LoRAという、特定の画像スタイルを再現したり、あるいは新しい画像スタイルを作成したりすることができるモデルを利用していきます。

実際に行ったこと

環境

OSWindows 11 (22HS)
CPUCore i7-11700K
メモリ16GB
GPURTX 3070

前提条件

  • Stable Diffusion WebUI(AUTOMATIC1111)がインストールされていること

今回使うモデルのダウンロード

こちらからダウンロードすることができます。civitaiというサイトで、ダウンロードには会員登録が必須です。

モデルがダウンロードできるところ

今回使うモデル(YesMix)はさまざまのモデルをマージし、さらに製作者独自の画像を学習させ微調整させたモデルになります。今回使用するLoraの使用者自体もこのモデルを利用していたので、非常に高い精度で狙ったキャラの生成ができると思います。

Loraのダウンロード

Houshou Marine (5 Outfits) | Hololive

上記のリンクからダウンロードすることができます。

Loraのダウンロードもモデルダウンロードの時と同じになります。

モデルの移動

上記のやり方に従っているのであれば、ホームディレクトリにStable Diffusion WebUIのフォルダが存在します。その中の models/Stable-diffusion のフォルダにモデルを移動させます。

Loraの移動

ダウンロードしたLoRAを、models/Lora のフォルダにモデルを移動させます。

Stable Diffusion WebUIの起動

すでに起動している方は再起動をお願いします。

すると、上部の「Stable Diffusion checkpoint」でダウンロードしたモデルが選択できるようになっています。

モデルの選択

画像生成

今回入力したパラメータを下記に記しておきます。

Positive Promptmasterpiece, best quality, absurdres, perfect antomy, houshouBase, 1girl, solo, heterochromia, red eyes, yellow eyes, twintails, long hair, hair ribbon, large breasts, white gloves, frilled choker, red ascot, leotard, leotard under clothes, red jacket, cropped jacket, sleeveless jacket, black coat, off shoulder, bicorne, red skirt, miniskirt, leather belt, black thighhighs, standing, smile,
Negative Prompt(low quality,worse quality:1.2),bad-hands-5, bad-artist, gloves, green gloves, censored, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, artist name
Sampling methodDPM++ 2M SDE Karras
Sampling steps20
Hires. fixUpscalerR-ESRGAN 4x+ Anime6B
Hires steps0
Denoising strength0.7
Upscale by2
Width512
Height768
CFG Scale7
生成に使用したパラメーター

呪文が入力できたら、LoRAの適用をします。呪文(プロンプト)を入力する下側のLoraタブをクリックしてください。

クリックすると、プロンプト入力下にLora一覧が出てきます。

これらをクリックすると、プロンプトに文字が入力されます。Stable Diffusionはこれらの文字列を認識して、LoRAを適用していきます。また、

  <lora:HoushouMarineV2LORA:1>

:のあとにある数値はどれぐらいそのLoRAを適用するかの値です。

今回は1に設定します。

この設定でGenerateを押下すれば記事最初のようなイラストが生成されると思います。

お疲れさまでした!

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です