画像を日本語で解説できるAI「Japanese InstructBLIP Alpha」を試す

先日、Stability AI Japanからリリースされた、画像からその内容の説明文を生成できるAI「Japanese InstructBLIP Alpha」を公開しました。

今回はその「Japanese InstructBLIP Alpha」のデモを写真ではなくてイラストレーションで試してみました。

質問と回答の精度

本記事のサムネイルに設定している画像についていくつかの質問をしてみました。

イラストですが、富士山などは認識しているのが分かります。ものすごく完結に買ってくるので少しそっけないですが、色々と試してみましたが、完結に正確に返答をしてくれます。

大小なども判別

どちらのオウムの方が大きいかというのも、きちんと理解していました。

Japanese InstructBLIP Alphaのライセンスは？

Japanese StableLM AlphaはHugging Face Hubで「JAPANESE STABLELM RESEARCH LICENSE AGREEMENT」に基づいて公開されており、商業利用はできないが、研究目的であれば推論や追加学習を試すことが可能とのことです。

「Japanese InstructBLIP Alpha」のデモは「Japanese InstructBLIP Alpha Demo」から利用可能です。