Inpaintを使用して服装や背景だけを変更

StableDiffusionで絵を書いていると、人を描くと微妙に服装が気にいらなかったり、

背景で一部だけおかしかったりということが良くあります。

それさえ無ければ良い絵なのに、という人のために今回は「Inpaint」と言う機能を使って、不要な部分の変更や削除を行う方法について説明します。

・微修正したい絵のプロンプトは必要

・変更したい状況に合わせて設定値を決定する

・「Masked content」の設定で、大きく絵が変わる

Inpaintを使用した服装や背景だけの変更方法の詳細が分かります。

※記事内に広告が含まれています。

inpaintとは

『Inpaint』はimg2imgで使用する、元画像を原本に編集を行う機能です。

制作者が不要と判断した部分を白塗りして、元画像の中から白塗りした部分だけを改めて作成します。

また白塗りした部分以外の修正も可能です。

キャラの一部や背景に不要なオブジェクトがある場合は、白塗りした部分を変更、キャラの背景を変えたい場合は白塗り以外を変更すると良いでしょう。

標準機能でついているため、追加インストールは不要です。

※ControlNetにも同機能がありますが、今回は通常機能の方を説明します。

取り込んだ画像がRisize toで指定した縦横幅と違う場合の処理ですが、基本的に同じ縦横幅の画像を使用した方が良い結果が得られます。

名称	効果
Just resize	指定した横縦幅に合わせてリサイズ
Crop and resize	一部カットしてリサイズ
Resize and fill	リサイズしてできた余白は塗りつぶして出力
Just resize (latent upscale)	latent upscaleを使用後、Just resize同様の処理を実行

範囲を指定した部分の境目に、どの程度ぼかしを加えるのか設定することができます。

Mask Blurの値を大きくするほど境界付近にぼかしが強くなっていますが、ただし大きすぎても違和感が大きくなってしまうので注意が必要です。

経験上0～15が一つの目安となりそうです。

範囲を指定した部分のみ変更するのか、それとも、範囲を指定した場所以外の全ての部分を変更するのか選択することができます。

この変更でinpaintで変更後の効果が大きく変わります。

個人的には、全く違うものにしたいorベースを変更したいことが多いため「latent noise」を良く使用します。

名称	効果	用途
fill	白く塗りつぶした周囲の色をベースにして描き直します	背景の中に異物が混じり、取り除きたい時に使用します。
original	白く塗りつぶした画像(元画像)をベースにして描き直します	指や口元など、ちょっとした形状の変化をさせたい時に使用します。
latent noise	ベース無しで１から描き直します	違う服装や背景にするときに使用します。
Just resize (latent upscale)	白く塗りつぶした画像の色をベースにして描き直します	同色で違う形状の服にするときなどに使用します。