何が起きたのか
AI音楽生成プラットフォームのSunoは、同サービスで作った楽曲に合わせて画像や短い動画を生成する「Visuals」という機能を公開したと、The Vergeが報じた。動画クリップはトラックの歌詞に合わせて自動的にリップシンクさせることができ、テキストプロンプトから生成される静止画は、サムネイルやアルバムカバーなどの用途を想定している。このツールはウェブのほか、iOSとAndroidでも利用できる。
ユーザーは楽曲のうち15秒以内の部分を選び、参照画像を指定する。参照画像には、Sunoのキャラクタープリセット、アップロードした写真やアートワーク、プロンプトで生成した画像を使える。この画像は冒頭フレームにも最終フレームにもでき、クリップ同士をつなぎやすくなる。編集用タイムラインでは、より長い動画を組み立てたり、歌詞テキストを追加したり、フォーマットに合わせてアスペクト比を調整したりできる。
Visualsは、MiniMaxのH3を基に構築された「H3 Move」というモデルで動作する。Sunoによれば、同社はこのモデルをユーザー向けに調整し、特定のアーティストや著名人の肖像、著作物や知的財産を生成できないようにすることを目的としたテキストと画像のフィルターを追加したという。生成には、楽曲用のクレジットとは別に管理される新種の「Visualsクレジット」が消費されるため、この機能の利用にはユーザーに追加の費用がかかる。
背景
Visualsは、Sunoが10月に導入した、音声のナレーションやボイスオーバーを制作する機能「Speech」に続くものだ。新たなフォーマットへの進出は、同社の音楽ジェネレーターが複数の注目度の高い訴訟の対象となった後に行われた。すべてのユーザーがこの拡大を歓迎しているわけではない。Visualsを紹介するYouTube動画のコメント欄では、求めていないツールを追加する前に音質を改善するようSunoに求める声が上がっている。
ブリーフィング
1週間のテックニュースを1通のメールで。
読む価値のある記事を毎週お届けします。配信停止はいつでも可能です。
