動画生成AIのKaiber.aiで音楽から動画を生成

2023年4月22日
AI BLOG Technology

「txt2video」、「img2video」、「video2video」と試してきましたが、今回は動画生成AIのKaiber.aiで、音楽から動画を生成してくれる「audio2video」にチャレンジしてみたいと思います。

今回もプロンプトだけでは作成できないため、生成した曲がパブリックドメインで利用できる、作曲AIの「CREEVO」から生成された曲をお借りして試してみたいと思います。

元になる曲を探す

今回は以下の楽曲をお借りして利用させていただきました。オーディオは1秒1クレジットのようで17秒で17クレジットとなっています。

今回はテストのため、運営がセットしてくれているプロンプトを利用しました。

elect a subject：a portrait of a main character

select a style：film photograph, black and white, film grain, highly detailed, masterpiece, realistic, soft lights, cinematic focus

設定については、縦型の9:16、カメラワークはZoom in　Evolveは今回6で設定。オーディオリアクティビティ（オーディオによるカメラ操作）こちらも標準の6としました。

少し不気味だけど、人間ではなかなか考えつかないアートワークの動画が生まれました。原曲との雰囲気にも合っていて、これはこれで良い気がする。

想いもよらない表現に出会えるのもAIの面白さですね。次回はKaiberの規約や権利についてまとめてみようと思います。