アイドルマスターの樋口円香に似たキャラをLoRAで生成する方法 

結果

樋口円香は『アイドルマスターシャイニーカラーズ』に登場するアイドルで、283プロダクション所属のユニット「noctchill」のメンバーです。

彼女はクールでシニカルな性格の高校2年生で、涼しげな目元と泣きぼくろが特徴的です。

幼馴染みである浅倉透、福丸小糸、市川雛菜と共に活動しています。

円香は何事にも冷静で、ツッコミ役に回ることが多いですが、根は真面目で誠実な人物です。自己肯定感が低く、他人からの期待に応えられないことを恐れています。

また、昆虫が苦手で、普段は庇護対象である小糸に助けを求めることも。アイドルとしては高いポテンシャルを持ちながらも、自分より優れた人間への称賛と嫉妬を抱えています。プ

ロデューサーや他のアイドルとの関係も複雑で、特にプロデューサーに対しては辛辣な態度を取りつつも、内心では彼に対する複雑な感情を抱いています。

生成する方法

LoRAという、特定の画像スタイルを再現したり、あるいは新しい画像スタイルを作成したりすることができるモデルを利用していきます。

実際に行ったこと

環境

OSWindows 11 (22HS)
CPUCore i7-11700K
メモリ16GB
GPURTX 3070

前提条件

  • Stable Diffusion WebUI(AUTOMATIC1111)がインストールされていること

今回使うモデルのダウンロード

こちらからダウンロードすることができます。civitaiというサイトで、ダウンロードには会員登録が必須です。

モデルがダウンロードできるところ

今回使うモデル(YesMix)はさまざまのモデルをマージし、さらに製作者独自の画像を学習させ微調整させたモデルになります。今回使用するLoraの使用者自体もこのモデルを利用していたので、非常に高い精度で狙ったキャラの生成ができると思います。

Loraのダウンロード

Higuchi Madoka 樋口円香 / THE iDOLM@STER ShinyColors

上記のリンクからダウンロードすることができます。

Loraのダウンロードもモデルダウンロードの時と同じになります。

モデルの移動

上記のやり方に従っているのであれば、ホームディレクトリにStable Diffusion WebUIのフォルダが存在します。その中の models/Stable-diffusion のフォルダにモデルを移動させます。

Loraの移動

ダウンロードしたLoRAを、models/Lora のフォルダにモデルを移動させます。

Stable Diffusion WebUIの起動

すでに起動している方は再起動をお願いします。

すると、上部の「Stable Diffusion checkpoint」でダウンロードしたモデルが選択できるようになっています。

モデルの選択

画像生成

今回入力したパラメータを下記に記しておきます。

Positive Promptbest quality, highres, 1girl, higuchi madoka, pantyhose, skirt, brown hair, mole under eye, mole, hair ornament, hairclip, pleated skirt, short hair, long sleeves, bangs, sweater, miniskirt, black sweater, black pantyhose, grey skirt, collared shirt, purple eyes, cowboy shot, (masterpiece:1.2), best quality, high resolution, unity 8k wallpaper, (illustration:0.8), extremely detailed face, perfect lighting, extremely detailed CG,
Negative Prompt(worst quality:2), (low quality:2) ,(normal quality:2), (depth of field, bokeh, blurry:1.4), (grayscale,monochrome:1.2),(bad_prompt_version2:1.0), bad-hands-5,badhandv4,vagina,(snuggled:1.4),sepia,analog,sketch, (mutated hands and fingers:1.4),text,title, deformed, bad anatomy, disfigured, poorly drawn face, extra limb, missing limb, disconnected limbs, out of focus, long neck, long body,bad hands,collapsed eyeshadow,multiple eyebrows,freckles,inaccurate limb,(abs, muscular, rib:1.0),lips,nose,(anime colored,flat color,anime screencap,animated painting,multiple angle,multiple views:1.4),(tie , long tie , bow tie:1.2),huge_thighs,large_thighs,hair ornament,braid
Sampling methodDPM++ SDE Karras
Sampling steps20
Hires. fixUpscalerR-ESRGAN 4x+ Anime6B
Hires steps0
Denoising strength0.7
Upscale by2
Width512
Height768
CFG Scale7
生成に使用したパラメーター

呪文が入力できたら、LoRAの適用をします。呪文(プロンプト)を入力する下側のLoraタブをクリックしてください。

クリックすると、プロンプト入力下にLora一覧が出てきます。

これらをクリックすると、プロンプトに文字が入力されます。Stable Diffusionはこれらの文字列を認識して、LoRAを適用していきます。また、

  <lora:higuchi_madoka_V10:0.65>

:のあとにある数値はどれぐらいそのLoRAを適用するかの値です。

今回は0.65に設定します。

この設定でGenerateを押下すれば記事最初のようなイラストが生成されると思います。

お疲れさまでした!

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です