ControlNet – Cannyの特性や使い方を解説 / Stable Diffusion web UI

Stable Diffusionの拡張機能、ControlNetのモデルの一つCanny（線画）モデル。インプットした画像から線画を抽出しそれに沿った画像生成が可能なモデルです。

今回はCannyの特性や使い方を実際に生成したアウトプットを形成しながら解説して行きたいと思います。

ControlNetの導入について

ControlNetは、Stable Diffusionの拡張機能の一つで、様々なモデルデータと組み合わせて活用することで思い通りの生成結果を導くことができるツールです。

ControlNetのインストールやモデルデータのダウンロードなどについては、「ControlNetをStable Diffusion web uiへインストール」をご覧ください。

ControlNetの「canny」の特徴

「canny」は線画情報を扱うControlNetのモデルになっており、inputした画像の線画を抽出し、その線画に沿った画像を生成することが可能になります。

ControlNetへのインプット

ControlNet「canny」からの解析情報

ControlNetの「canny」の活用方法

例えば元画像から髪の毛の色だけ変えたい、目の色だけ変えたい、服の色だけ変えたいなど、輪郭はそのままで、部分の詳細情報だけ調整する場合とても有効です。

「canny」からのアウトプットを元に色情報を変更

「canny」の特性まとめ

・cannyはControlNetで利用可能なモデルの一つ
・輪郭情報を抽出
・輪郭を保ったまま変更を加えたいときに便利