【Stable Diffusion】「ControlNet1.1」の新機能紹介

今回は「ContorolNet1.1」で追加されていた新機能を幾つか紹介します

紹介する機能は「Shuffle」「Instruct Pix2Pix」「Inpaint」の３つです
「Inpaint」以外は現時点で実験的な機能になっているようですね

「ContorolNet1.1」について詳しく知りたい方は下のリンク先を確認してください

【Stable Diffusion】表情も検出してくれるようになった「ControlNet 1.1」

モデルダウンロード

https://huggingface.co/lllyasviel/ControlNet-v1-1

今回使用したのは

control_v11e_sd15_ip2p
control_v11e_sd15_shuffle
control_v11p_sd15_inpaint

の３つです
.pth.yamlは両方ダウンロードしてください

webUI上でプリプロセッサが見つからない場合はverが古いと思うのでアップデートの必要があります
記事を書いている段階では「v1.1.184」でした

使用画像

openposeなんかはイラストだとイマイチだったんですけど
今回使用したものはイラストでも良いらしいのでイラストを使ってみました

Prompt:super fine illustration,an extremely cute and beautiful girl,highly detailed beautiful face,nanachi,short stature,furry girl,running shorts,cat ear,Yellow eyes,blown hair,short hair,bright skin,looking at viewer,extremely_detailed_eyes_and_face<hypernet:furry_kemono:1>

Negative prompt: nsfw,lowres, bad hands, text,error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts,signature, watermark, username, blurry, artist name,fat,red face,nude,long body

Steps: 20, Sampler: DPM++ 2M Karras, CFG scale: 7, Face restoration: GFPGAN, Size: 512x768, Denoising strength: 0.6, Clip skip: 2, ENSD: 31337, Hires upscale: 1.6, Hires upscaler: Latent,model:MeinaPastelV4,vae:kl-f8-anime2