アーカイブ / Audio
音楽のどこが似ているかを測る:MATCHAの聴取判断と音声指標の照合
MATCHA
MATCHAの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Inter-annotator agreement per musical attribute and stimuli category, measured as mean agreement percentage (top) and Fleiss’ κ \kappa (bottom). Stimuli sections: Human-Plagiarism (HP), Human-Versions (HV), AI-SAO (AS) and AI-Media (AM). AS cases were instrumental and Voice was not annotated.
概要
- MATCHAは300組の音声三つ組について、83人から1105件の属性別聴取評価を集めた。
- 著者らの報告では、全体の回答一致率は旋律で81.6%、和声で75.0%だった。
- 人の判断と音声指標の対応は属性や音源群によって異なる。類似度だけで盗用や学習音源の記憶は確定できない。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、MATCHAの仕組み
- 01参照音と候補2件
- 02五属性を聴き比べ
- 03回答を集計
- 04音声指標と照合
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
MATCHAは、短い音楽がどの点で似ているかを人の耳で確かめ、その判断と音声から計算した類似度を照らし合わせる研究である。生成音楽が既存曲に近いとき、一つの類似度だけでは共通する要素を説明しにくい。
旋律は音の並び、和声は同時に鳴る音やその進み方、音色は楽器や声の響きの特徴を指す。どの属性で人と計算指標が一致するかを知れば、確認を要する音源を選ぶ際に、指標が示す近さの意味を説明しやすくなる。
手法
参加者は短い参照音と候補A・Bを聴き、旋律、和声、リズム、声、音色の各属性について、どちらが近いか、または「どちらでもない」を選ぶ。例えば参照曲のカバー版と別曲を候補にした組でも、属性ごとに別の回答ができる。三つの音を一組にする方式を三つ組比較という。
著者らは回答をMATCHAに集め、AとBの選択数の差を全回答数で割った選好値を作った。さらにMiRAの音声類似度指標と照合し、ケンドールのτという順位の揃い方を表す係数で対応を測る。入力は音声三つ組と属性別回答、出力は属性・音源群ごとの人の一致度と、各指標との対応である。
新規性
MATCHAは、参照音と二つの候補を聴き比べ、旋律・和声・リズム・声・音色ごとに人の選択を記録したデータセットである。人が作った楽曲とAI生成音楽を含む300組を扱う。
著者らの前進は、楽曲全体の類似度を一つにまとめず、属性別の回答一致度と既存の音声指標との対応を同じ課題で調べた点にある。指標によって対応する属性が異なることも示した。
従来手法との違い
比較する計算手法は、音楽の複製可能性を調べる既存の枠組みMiRAに含まれる四つの指標である。CoverIDは主に旋律・和声の対応を捉え、KL、CLAP、DEfNetは音声の別の特徴も扱う。KLは音声分類器の出力の違いを測る指標である。
著者らは各指標の結果を属性別の聴取判断と照合した。人が作った楽曲群ではCoverIDが旋律・和声と強く対応し、CLAPとDEfNetはリズム・音色・声を含む広い属性で対応した。ただし、全属性に対応する指標はなかった。
実験結果
著者らは300組の三つ組を評価した。内訳は、人が作った楽曲150組(盗用事例75組、別演奏版75組)とAI生成音楽150組(Stable Audio Open由来120組、報道事例30組)である。83人から計1105件の聴取評価を得て、各組を少なくとも3人が評価した。
著者らの報告では、旋律の回答一致率は全体で81.6%、和声は75.0%だった。声は歌声を含む151組で評価した。Stable Audio Open群では、偶然の一致を考慮するFleissのκが0.19以下で、「どちらでもない」が52~64%を占めた。同群での人の判断と指標のケンドールのτは−0.11~0.21だった。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:音楽制作会社が生成音源の公開前確認に使う。入力は確認対象の短い音源、比較を許された参照音源、候補を組にするための音源群とし、出力は五つの属性ごとの聴取結果と再確認する候補の一覧とする。
比較用音源と、担当者が付ける属性別の選択ラベルが必要になる。専用センサーを加える想定はなく、既存の類似度指標で候補を並べた後、音楽に詳しい担当者が三つの音を聴き比べる運用へ調整する。類似の判定を権利侵害の結論にはしない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:比較を許された参照音源と確認対象から短い区間を選び、参照音ごとに候補A・Bを組む。聴取評価自体に生成モデルの学習データは不要だが、学習音源の複製を主張するには学習元を別途確認する必要がある。
必要なラベルは複数の担当者による五属性の選択で、声のない組では声を評価しない。専用センサーは想定せず、使用する音声指標と聴取環境を決める。現行の類似度による候補順を基準に、属性別の回答一致率、指標との順位の対応、「どちらでもない」の割合を測り、区間の選び方を調整する。
限界と課題
著者らは、類似だけでは盗用や著作権侵害を確定できず、生成モデルが特定の学習音源を記憶したかも判断できないと述べる。強い類似が想定される音源を中心に選んだため、無作為に組み合わせた楽曲へ回答一致度を一般化できないとも指摘する。
著者らによると、Stable Audio Open群では生成時の音響上の乱れが判断を妨げた。編集上の検証事項として、実際の候補でも担当者間の判断が一致するか、生成方法を変えた場合に結果が保たれるかを確かめたい。一部音源は著作権上の制約で公開アクセスが限られる。
出典
元のタイトル・要旨を確認する(英語)
On the Human and Computer Alignment of Attribute-Based Music Matches
Recent advances in generative AI are raising ethical concerns regarding the originality of generated content and the potential replication of training data, with further implications for transparency, attribution, and intellectual property. In music, several computational approaches have been proposed to identify potential replication, using audio-based similarity metrics. Yet, their alignment with human judgments across distinct musical attributes remains underexplored. To address this gap, we conduct a perceptual experiment on music matches, defined as strongly similar musical excerpts. We focus on five musical attributes: melody, harmony, rhythm, voice, and timbre. We design a triplet-based forced-choice task comprising 300 cases, including plagiarism examples, cover songs, and AI-generated music. From this experiment, we introduce the MATCHA (Musical Attribute-based Triplet Comparison with Human Annotations) dataset: a collection of 1105 perceptual assessments of attribute-based music matches from 83 expert participants. Our findings reveal measurable agreement among participants in identifying matches across attributes. We further observe partial alignment between human judgments and computational similarity measures. Overall, this work underscores the importance of domain-specific and perceptually grounded evaluation frameworks for generative AI in creative practice.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




