アーカイブ / LLM
楽譜の表記形式と解答例で、言語モデルの音楽理論問題への回答を比較
In-Context Learning and Chain-of-Thought Prompting for Music Theory
概要
- RCM Level 6の公式試験問題を使い、音程、和音、調、終止形、拍子に関する回答を評価した。
- 著者らの報告では、文脈なしの最良値はChatGPTとMEIの52%、文脈ありの最良値はClaudeとMEIの75%だった。
- 問題数、採点規則、全組み合わせの成績は確認できず、二つの値の差を文脈提示だけの効果とは解釈できない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、In-Context Learning and Chain-of-Thought Prompting for Music Theoryの仕組み
- 01RCM試験問題
- 02楽譜形式で提示
- 03文脈条件を設定
- 04モデルの回答
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
言語モデルに音楽理論の問題を解かせるときは、譜面をどう表し、解答例を添えるかが入力条件になる。扱う課題には音程や和音の識別のほか、調の判定、終止形（楽句の締めくくり方）の分類、拍子の分析がある。
教材への利用を考えるなら、どの入力条件で得られた成績かを把握する必要がある。答えだけでなく、その説明が譜面の情報と一致するかも確かめられる形が望ましい。
手法
著者らは、カナダ王立音楽院（RCM）のLevel 6公式試験から問題を取り、ChatGPT、Claude、Geminiなどに回答させた。譜面情報の表し方としてABC、Humdrum、MEI、MusicXMLを評価した。これらは楽譜の情報を記述する形式で、例えば和音の識別では、提示された譜面情報をもとにモデルが和音を答える。
文脈内学習とは、回答時に問題と一緒に例や説明を示し、その場の回答に利用させる方法をいう。思考の連鎖を促す提示では、解答に至る手順を追った例を示す。実験では文脈ありと文脈なしの両条件を設け、表記形式と提示方法による回答成績を調べた。
新規性
本研究は、音楽理論の試験問題について、楽譜の表記形式と文脈を添える条件を組み合わせて評価した。音程や和音の識別に加え、調、終止形、拍子の分析も対象に含む。
著者らは、形式とモデルの組み合わせによって成績が異なることを報告した。示された値は試験問題への回答成績であり、例示によってモデルの知識が恒久的に変わったことを示すものではない。
従来手法との違い
基準となるのは、文脈を添えずに問題を解かせる条件である。これと、設計したプロンプトや手順を追った解答例を文脈として与える条件を比較し、ChatGPT、Claude、Geminiなどを調べた。
楽譜の表記形式にはABC、Humdrum、MEI、MusicXMLを用いた。報告された各条件の最良値は異なるモデルによるものなので、両者の差を一つのモデルに対する文脈提示の効果として扱うことはできない。
実験結果
著者らは、RCM Level 6の公式試験問題に含まれる音程と和音の識別、調の判定、終止形の分類、拍子の分析で評価した。文脈なしではChatGPTとMEIの組み合わせが52%、文脈ありではClaudeとMEIの組み合わせが75%で、それぞれの条件の最良値と報告している。
確認できた本文の範囲では、問題数、採点規則、各形式とモデルの全組み合わせの成績は示されていない。したがって、二つの値の差を文脈提示だけによる改善幅とみなすことや、別の教材でも同じ成績になると見込むことはできない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：音楽理論の演習で、授業用の譜例をMEI形式のデータにし、正答と解説を確認済みの類題とともにモデルへ渡す。音程や和音の答えに加え、判断の根拠となる譜面情報を文章で出力させ、教師が確認する。
必要な元データは譜例、問題文、例示用の類題と解説で、正答ラベルは教師が用意する。譜面を紙から取り込むならデータ化は別工程となる。この使い方の有効性は論文の報告結果からは確定できない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：授業で正答を確認済みの譜例を少数選び、MEI形式の入力、問題文、正答ラベル、手順を示す類題をそろえる。追加学習やセンサーは使わず、対象教材に合わせて提示文を調整する。
同じ問題を文脈なしと解答例ありで解かせ、教師の正答との一致件数と、説明が譜面に合う件数を別々に数える。譜例をMEIへ変換した場合は入力の誤りも点検し、回答の誤りとデータ化の誤りを分けて記録する。
限界と課題
著者らは今後の作業として、プロンプトの改良と、より高度な音楽理論への対象拡大を挙げている。確認できた本文の範囲では、これらを現手法の限界と明記した分析や、誤答の内訳は示されていない。
編集上の検証事項は、同じ譜例を別の形式へ変換したときに音楽的内容が保たれるか、生成された説明が譜面と整合するか、授業用の問題でも採点を再現できるかである。報告された成績だけで教育現場での有用性は判断できない。
出典
元のタイトル・要旨を確認する（英語）
Teaching LLMs Music Theory with In-Context Learning and Chain-of-Thought Prompting: Pedagogical Strategies for Machines
This study evaluates the baseline capabilities of Large Language Models (LLMs) like ChatGPT, Claude, and Gemini to learn concepts in music theory through in-context learning and chain-of-thought prompting. Using carefully designed prompts (in-context learning) and step-by-step worked examples (chain-of-thought prompting), we explore how LLMs can be taught increasingly complex material and how pedagogical strategies for human learners translate to educating machines. Performance is evaluated using questions from an official Canadian Royal Conservatory of Music (RCM) Level 6 examination, which covers a comprehensive range of topics, including interval and chord identification, key detection, cadence classification, and metrical analysis. Additionally, we evaluate the suitability of various music encoding formats for these tasks (ABC, Humdrum, MEI, MusicXML). All experiments were run both with and without contextual prompts. Results indicate that without context, ChatGPT with MEI performs the best at 52%, while with context, Claude with MEI performs the best at 75%. Future work will further refine prompts and expand to cover more advanced music theory concepts. This research contributes to the broader understanding of teaching LLMs and has applications for educators, students, and developers of AI music tools alike.
論文要旨に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01