アーカイブ / Audio / Generative AI
SunoとUdioの公開曲から、音楽生成の指示文と歌詞を読み解く
Data-Driven Analysis of Text-Conditioned AI-Generated Music
Data-Driven Analysis of Text-Conditioned AI-Generated Musicの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Suno website interface when “Custom” mode is selected. Here the user can input the lyrics as well as the style of the music. Last accessed Dec. 16, 2024.
概要
- 著者らは2024年5～10月に公開されたSunoとUdioの計101,953曲に付いた文章を収集した。
- 指示文、タグ、歌詞を数値化して群分けし、人が話題名を見直して探索図を作成した。
- 英語の歌詞42,163件から190群を得た一方、25,794件は外れ値となった。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Data-Driven Analysis of Text-Conditioned AI-Generated Musicの仕組み
- 01公開新着曲
- 02文章欄の抽出
- 03数値化と群分け
- 04話題名付きの図
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
この研究は、文章で指示して作られたAI音楽について、利用者が何を入力し、どのような歌詞の曲を公開しているかを調べる。SunoとUdioの公開曲に付いた文章を集め、曲を一つずつ見るだけでは捉えにくい話題や指示の書き方を探した。
両サービスでは指示文のほか、曲調を表すタグや歌詞も生成に関わる。ただし、同じ名称に見える記録欄でも意味が異なるため、集計前に各欄が何を表すか確かめる必要がある。
手法
著者らは両サービスの公開「新着曲」欄から記録を集め、曲ごとに指示文、タグ、歌詞を整理した。分析する欄に応じて、空欄、文章の長さ、言語、重複などで対象を選ぶ。例えば「夏の曲」を求める指示文を、内容の近い別の指示文と同じ群に置き、まとまりを探す。
文章は事前学習済みモデルで数値の並びに変える。これは意味が近い文章を近い値として扱うための表現で、UMAPという手法で値の次元を減らし、HDBSCANという手法で密集した文章を群に分ける。頻出語などから群の名前を付けて人が見直し、各記録を点で示す図にまとめる。
新規性
著者らが主張する進展は、文章で操作する音楽生成サービスの利用実態を、公開曲に付いた指示文、タグ、歌詞から調べる分析手順を組み立てた点にある。既存の文章分析技術を、この対象に適用している。
群の名前を自動で付けてから人が見直し、対話的に探索できる図も作成した。新しい音楽生成モデルや、生成音の品質向上を提案した研究ではない。
従来手法との違い
関連研究として、画像生成サービスの利用者が書いた指示文を、文章の群分けで調べた事例を挙げている。本研究はその手法を参考にしつつ、音楽生成の指示文に加えてタグと歌詞を分析対象にした。
著者らはAI音楽の検出用データセットSONICSにも言及するが、収集目的が異なる。確認できた本文の範囲では、従来手法との分類精度の比較や、SONICSを使った性能評価は示されていない。
実験結果
著者らは2024年5～10月の公開曲101,953曲を収集した。内訳はUdioが20,519曲、Sunoが81,434曲である。英語判定や重複などで選んだ指示文16,881件を分析し、81群を得た。
歌詞は英語判定、長さ、器楽曲の除外などを経た42,163件を分析し、190群を得た。このうち25,794件は群に入らない外れ値となり、群は人手で26の大分類にまとめられた。これらは著者らの探索的な分析結果であり、確認できた本文の範囲では群分けの正解率や他手法に対する改善率は示されていない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：音楽生成サービスの公開曲を調べる担当者が、月ごとに指示内容と歌詞の話題を確認する。入力は曲に対応する指示文、タグ、歌詞、公開日または収集日とし、出力は話題別の一覧と原文へ戻れる探索図にする。
元の文章データが必要で、追加の学習用データや音声センサーは想定しない。群の話題名には人の確認を付ける。サービスごとの欄の意味を対応付け、言語別の対象範囲を決めてから集計する構想であり、傾向を正しく捉えられるかは別途検証が要る。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象期間を決め、公開曲の指示文、タグ、歌詞、日付を曲単位で整理する。必要な元データはこれらの文章記録で、本文の手順に追加の学習用データや音声センサーは登場しない。人手で確認した話題名を評価用の記録として残す。
サービス間で欄の意味を対応付け、言語、空欄、重複の扱いを決める。単語の出現回数による一覧を比較基準とし、群分けが見つけた話題を担当者が原文で確認する。確認件数、話題名の修正件数、群に入らない文章の割合を測り、調査に使えるか判断する。
限界と課題
著者らが明記する制約として、SunoとUdioでは指示文やタグに当たる記録欄の意味が異なる。歌詞が利用者の作成かAI生成かも記録からは分からない。また、群分けのために英語へ絞った分析では、除外した言語の曲を扱えない。
編集上の検証事項は、公開曲の収集時期や公開範囲が観察結果に与える影響と、群の名前が内容を適切に表すかである。歌詞分析では多数が外れ値となり、著者らの目視では既存の群に近い例もあった。群を全曲の確定的な分類として扱うべきではない。
出典
元のタイトル・要旨を確認する（英語）
Data-Driven Analysis of Text-Conditioned AI-Generated Music: A Case Study with Suno and Udio
Online AI platforms for creating music from text prompts (AI music), such as Suno and Udio, are now being used by hundreds of thousands of users. Some AI music is appearing in advertising, and even charting, in multiple countries. How are these platforms being used? What subjects are inspiring their users? This article answers these questions for Suno and Udio using a large collection of songs generated by users of these platforms from May to October 2024. Using a combination of state-of-the-art text embedding models, dimensionality reduction and clustering methods, we analyze the prompts, tags and lyrics, and automatically annotate and display the processed data in interactive plots. Our results reveal prominent themes in lyrics, language preference, prompting strategies, as well as peculiar attempts at steering models through the use of metatags. To promote the musicological study of the developing cultural practice of AI-generated music we share our code and resources.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01