• TOP
  • NEWS
  • ABOUT
  • SERVICE
  • WORKS
  • PROJECT
  • BLOG
  • CONTACT
taziku
  • TOP
  • NEWS
  • ABOUT
  • SERVICE
  • WORKS
  • PROJECT
  • BLOG
  • CONTACT

ControlNet – Segmentationの特性や使い方を解説 / Stable Diffusion web UI

2023年9月15日
AI All Technology
ControlNet Stable Diffusion

Stable Diffusionの拡張機能、ControlNetのモデルの一つSegmentationモデル。インプットした画像からオブジェクトを抽出し分類し、それに沿った画像生成が可能なモデルです。

今回はSegmentationの特性や使い方を実際に生成したアウトプットを形成しながら解説して行きたいと思います。

ControlNetの導入について

ControlNetは、Stable Diffusionの拡張機能の一つで、様々なモデルデータと組み合わせて活用することで思い通りの生成結果を導くことができるツールです。

ControlNetのインストールやモデルデータのダウンロードなどについては、「ControlNetをStable Diffusion web uiへインストール」をご覧ください。

ControlNetの「Segmentation」の特徴

「Segmentation」は、プリプロセッサによってセグメントされる精度や領域が異なります。どの程度、元の画像のオブジェクトを取りたいかで、プリプロセッサを選択したほうが良さそうです。

ControlNetへのインプット

ControlNet「seg_ofada20k」からの解析情報

ControlNet「seg_ofcoco」からの解析情報

ControlNet「seg_ufada20k」からの解析情報

ControlNetの「Segmentation」の活用方法

完璧に形をとっているわけではないのですが、元写真で設置されていた家具は全て再現されています。ベースがオブジェクトであれば上手く使えそうなモデルだと思います。

「Segmentation」からの解析情報を元に再生成

「Segmentation」の特性まとめ

・SegmentationはControlNetで利用可能なモデル
・プロセッサーは3つ有り、seg_ofada20kが一番精度が高い
・細かい詳細な形までは完全に取れていないのでオブジェクト自体の再現は難しい

Stable Diffusion 最新情報

tazikuでは画像生成AI Stable Diffusion(スティーブルディフュージョン)AUTOMATIC1111を中心に、最新情報、機能紹介、様々なTipsを発信中!Stable Diffusionに関するまとめ記事、記事一覧は以下のリンクからご覧ください。

Stable Diffusion関連記事まとめ

Stable Diffusion記事一覧

AIの最新情報を随時発信中

Xやnoteでは、AI・生成AI・LLMなどの最新情報や、ChatGPTやMidjourneyのプロンプトテクニックを連載中!フォローよろしくお願いします。

生成AI・AIの導入・研修・DXの支援はtazikuへ

生成AI・LLMなど、AIを活用したAIの導入・DXコンサルティング、AI領域の研修・講演などのご相談はお気軽にお問い合わせフォーム、もしくは生成AIソリューションAI CREATIVE BASEから、ご相談・お問い合せください。

PREV ControlNet -Shuffleの特性や使い方を解説 / Stable Diffusion web UI
NEXT ControlNet - Referenceの特性や使い方を解説 / Stable Diffusion web UI
  • 投稿検索

  • ABOUT US?

    tazikuは東京・名古屋を拠点に活動するクリエイティブスタジオです。
    AI・生成AI・LLMとクリエイティブを掛け合わせ、新しいクリエイティブを提供します。
    Works
    Service
    Contact
  • AI CREATIVE BASE

    デザイン、ビジュアル、音声、空間演出。生成AIでクリエイティブワークフローに革新を与え、ビジネスの成果を最大化します。

    詳細を見る

  • MENU

    • BLOG
      • Think
      • Creative
      • Technology
        • AI
        • メタバース
    • Project
      • AIアニメプロジェクト
      • どうくつたんけん
  • NEW POST

    • 進化するMidjourney v7が描く次世代のAI画像生成
    • Claude 3.5の新機能 新モデル登場とPC操作機能
    • Claude 3 の連鎖プロンプト「プロンプトチェーン」を試す
    • Claude 3 で画像をピクセル化するプログラムを生成
    • Claude 3で登場人物の会話を生成する
© 2021 taziku / 株式会社タジク Based in Tokyo and Nagoya | プライバシーポリシー