ControlNetって何？
どうやって導入・インストールできるの？
ControlNetを導入して使用することで、様々な補助を受けることが出来ます。
イメージしているポーズを生成したい場合に、何度もガチャを回して画像生成しなければならない時ってありますよね。
ControlNetを使うことによって、参照画像のポーズを抽出して同じポーズで生成できるようになります。
それだけでなく他にもあり、塗り方を新しくしてクオリティを高くしたり、手を修正したりすることが出来たりなど、多くのことが可能になるので導入した方がいい拡張機能となっています。
この記事では、ControlNetを簡単に導入する方法について解説します。
🟢生成AIで稼ぐ方法・活用法・使い方・最新AIニュースなどが読み放題！🟢
「AIグラビアでお金を稼ぐ方法」
「Stable Diffusion Web UIの使い方・高クオリティで画像生成する方法」
「AIイラストからVTuberを作成してお金を稼ぐ方法」
「初心者でも高クオリティの画像生成をSeaArtでする方法」
「最新の生成AIニュース」
月1,980円のメンバーシップに加入すると、これら全てお得に読めます！
興味がある方は是非加入してみてください！↓
ControlNetとは？何ができるの？
ControlNetは拡張機能であり、Stable Diffusion Web UIの初期設定に備わっている機能だけでは出来ないことが出来るようになります。
例えば以下の画像のように、参照画像から線画を抽出して別の塗り方にすることが出来ます。
他には、参照画像のポーズだけを棒人間に変換して抽出し、似たようなポーズで別の人物にして画像生成をすることも出来ます。
まだまだ多くの機能があり、Depthと呼ばれる機能を利用して、崩れた手を綺麗に修正することが出来たりします。
導入すると便利になるので必須で入れた方がいい拡張機能です。
ControlNetを導入する方法(ローカルとGoogle Colab)
ローカル環境を使っている人、またはGoogle Colabを使用している人のどちらもControlNetの導入方法について解説します。
Stable Diffusion Web UIを起動したら、以下の画像の手順に沿って操作してください。
①右上にある「Extensions」をクリックする。
②「Install from URL」をクリックする。
③URL for extension’s git repository項目内に「https://github.com/Mikubill/sd-webui-controlnet.git」のインストールURLをペーストする
④「Install」ボタンを押してインストールする
「Installed」をクリックしてください。
「sd-webui-controlnet」がインストールされているか確認してください。
「Settings」をクリックしてから「Reload UI」ボタンを押してStable Diffusion Web UIを再起動してください。
再起動したらControlNetが新しく追加されているのでクリックして開いてください。
ControlNetはModelがないと使用することが出来ず、現在の状況では「None」で何も入っていません。
ですから、一旦Stable Diffuison Web UIを終了させてから次はModelを入れていきます。
ControlNetのModelが配布されている、以下のリンクにアクセスしてください。
ダウンロードアイコンからControlNetで使用したい各モデルをダウンロードしてください。
yaml形式は軽量版になっています。
Google ColabでModelを追加する人の場合ですが、ダウンロードURLが必要になります。
ダウンロードアイコンの場所で右クリックしてください。
Google Chromeの場合は、「リンクのアドレスをコピー」をクリックするとダウンロードURLをコピーすることが出来ます。
ControlNetをコピペだけで導入できるコード(Google Colab)
Google Colabを使っている人でControlNetを導入するコードが分からない人は、とりあえず以下のコードをコピペして追加すると使用することが出来るので参考にしてください。
V1.7に対応しています！
#ControlNet
!git clone https://github.com/Mikubill/sd-webui-controlnet /content/stable-diffusion-webui/extensions/sd-webui-controlnet
#ControlNetのmodelディレクトリの作成
%mkdir -p /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/
#ControlNetのモデル「canny」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11p_sd15_canny_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11p_sd15_canny_fp16.safetensors
#ControlNetのモデル「depth」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11f1p_sd15_depth_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11f1p_sd15_depth_fp16.safetensors
#ControlNetのモデル「lineart」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11p_sd15_lineart_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11p_sd15_lineart_fp16.safetensors
#ControlNetのモデル「lineart_anime」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11p_sd15s2_lineart_anime_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11p_sd15s2_lineart_anime_fp16.safetensors
#ControlNetのモデル「normalbae」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11p_sd15_normalbae_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11f1p_sd15_normalbae_fp16.safetensors
#ControlNetのモデル「openpose」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11p_sd15_openpose_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11p_sd15_openpose_fp16.safetensors
#ControlNetのモデル「tile」
!wget https://huggingface.co/ckpt/ControlNet-v1-1/resolve/main/control_v11f1e_sd15_tile_fp16.safetensors -O /content/stable-diffusion-webui/extensions/sd-webui-controlnet/models/control_v11f1e_sd15_tile_fp16.safetensors
ControlNetとModelが入っているか確認する
ControlNetを導入してStable Diffusion Web UIを起動したら入っているか確認しましょう。
下にスクロールするとControlNetのタブが追加されているのでクリックして開いてください。
次は「Model」の項目をクリックして入っているか確認しましょう。
以下の画像のように、Model項目内にモデルが入っていることを確認できたら導入は完了になります。
ControlNetの使い方については、詳しく以下の記事で解説しているので読んでみてください。
🟢画像生成AIで理想の画像生成をするまでに時間がかかってしまう方へ🟢
すぐに理想的なポーズの画像生成をしたいと思いませんか？
以下のリンクにある内容では、イメージしていた画像生成が出来るまでの時間を大幅に減らすことが出来ます。
●こんな人におすすめです！●
・理想的なポーズの画像生成に困っている
・ポーズのバリエーションを増やしたい
・高クオリティーの画像生成をしたい
・コピペだけで簡単に画像生成したい
・可愛いAI美女、AIグラビアの画像生成に困っている
他にはない呪文内容などが豊富にあり参考にできるので困ることはありません。
詳細の内容についてはこちら！
まとめ
以上でControlNetの導入方法について解説しました。
今回解説した内容では、Google Colabを使っている人でコードを全く知らない人でもコピペするだけでControlNetを導入することが出来ます。
ControlNetを使用するときには、必ずModelも必要なので入れるようにしましょう。
参考にしてControlNetを導入してみてください。
にほんブログ村