Stable Diffusion Web UIで表情差分を作る

Stable Diffusion Web UI（AUTOMATIC1111）で生成したキャラクターの表情差分（喜怒哀楽）を作成したかったのでそのやり方を記事にします。

結果

表情を変えていくことはできましたが、目が元画像と若干違うなど違和感がでてきます。今回の実験では実施はしませんでしたが、promptに目の条件をしっかりと入れることによって回避することも可能だと思います。

基本的にはこの画面で差分を作っていきます。

画像を開くと、画像上に黒いペンで塗りつぶすことができます。この黒いペンで差分を作り出したいところを塗りつぶします。顔全体を塗りつぶしてもよいですが、前髪が元画像と変わってしまったりとあるので、最小限の塗りつぶしで差分を作り出すのがポイントです。

プロンプトはこんな感じです。

Positive Prompt	enjoy
Negative Prompt	lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts,signature, watermark, username, blurry, artist name,blush

ポジティブプロンプトの方に作り出したい差分の情報を入れます。

ネガティブプロンプトは品質向上のための呪文を書きます。

重要なパラメータはDenoising strengthです。このパラメータは入力画像と出力画像と相違度を表しています。この値が小さければ小さいほど元画像を保ち、表情を変化させます。大きい値だと大きな表情の変化が現れます。大体この値は0.5~0.7に設定するのがおすすめです。

うまくいけばこんな感じになります。