Musicとアートは常に密接に結びついています。何世紀にもわたって、アーティストは音楽にインスピレーションを受け、ミュージシャンはアートにインスピレーションを受けてきました。近年、人工知能(AI)がこの関係において役割を果たし始めています。
音楽を映像にするとどうなるのか?
本日、音声ファイルを入力として使用して画像を生成する、 AI を活用したツールが一般公開されました。
アクセス方法
Music-to-image AI ツールには、 HuggingFace経由でアクセスできます。完全に無料で使用できるので、アカウントの作成について心配する必要はありません。

ユーザーインターフェイスは簡単です。選択したオーディオ ファイルのアップロード パネル、画像を生成するボタン、結果の画像を表示する指定されたスペースがあります。
使い方
最初のステップは、「画像」を表示したい音声ファイルを選択することです。今回のテストでは、米津玄師の曲「Lemon」を選択しました。
ファイルをアップロードした後、AI が最終画像をレンダリングするまでに約 1 分かかりました。「エラー」が発生した場合は、スペースを複製して修正できます。

この結果についてどう思いますか?
AIが曲からイメージした表現
「この音楽を聴いて私が心に描くイメージは、暖かい夏の夕方、穏やかな湖を見下ろす丘の中腹に座っている若者の姿だ。ギターをかき鳴らし、心を込めて歌っている。その音楽は憧れと感動に満ちており、彼が歌に心を注ぎながら目に涙をためているのが見えるようだ。バック・ヴォーカルは彼と調和し、メロディに深みと豊かさを加えている。音楽がクライマックスに向かって盛り上がるにつれ、この青年の情熱とエネルギーが伝わってくる。そのイメージは親密さとつながりであり、音楽とパフォーマーが、聴き手とアーティストの間に共通の体験と理解の感覚を生み出している」
結構的を得てますよね。
短時間ですが「ビデオビジュアライザー」の制作出来ます。

ぜひ体験してみてください!