Runway Gen-2のマルチモーションブラシの基本と日本人女性を動画化
テキストや画像から動画を生成可能な生成AI、Runway Gen-2から画像中の複数の要素の動きを同時に制御するマルチモーションブラシがリリースされ世界中で話題になっており、今回はマルチモーションブラシの機能を紹介しつつ、実際に画像から動画を生成しその過程をまとめました。
従来の機能の違い
今まで、モーションブラシという機能は用意されていましたが、これは動かせる範囲を指定するものとなりまして、動かしたい領域は指定できるものの細かくオブジェクトごとの動きの調整はできませんでした。
マルチモーションブラシを試す
Gen2のimage-to-videoでのみ動作し、設定下部のMotionBrushを選択すると利用可能となります。
マルチモーションブラシの設定
Brushは最大5つまでセットでき、それぞれで、以下のパラメーターを設定可能です。
・Horizontal(横-左右)
・Vertical(縦-上下)
・Proximity(奥行き)
・Ambient(面ゆらぎ)
それぞれのブラシ範囲をどのような動かし方をするかを設定可能です。
設定範囲と数値について
今回は人物をベースにしているので、あまりにも動かしすぎると破綻してしまうので、パラメーターは極めて小さく0.5〜1.0までとしています。
生成した動画
ものすごく動きがあるわけではないですが、目元や口元が動く動画が画像から生成できました。
設定や範囲、元画像次第で可能性は広がる
今回は実写に近い動画でしたが、様々なインプット画像に寄っても領域指定やパラメーターのベストな数字は異なります。かなり奥が深そうですが、可能性はかなり広がった気がします。この機能が追加されたことで、生成AIによる動画生成は一つ進んだ印象をうけました。
※当サイトに掲載されている商標、一部画像、スクリ-ンショット、文章に置いては著作権侵害を目的に利用しておらず、第三十二条で定められる引用の範囲で使用しています。万が一問題があれば、お問い合わせからご連絡ください。即刻削除いたします。また、本ブログは業務の研究開発のためのものとなり、一部、弊社に関連性が無いものも掲載しております。
生成AI・AIの導入・研修・DXの支援はtazikuへ
生成AI・LLMなど、AIを活用したAIの導入・DXコンサルティング、AI領域の研修・講演などのご相談はお気軽にお問い合わせフォーム、もしくは生成AIソリューションDXAIから、ご相談・お問い合せください。