アーカイブ / Audio
アラビア語の方言音声を3課題で評価するNADI 2025
NADI 2025
NADI 2025の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Overview of the NADI 2025 shared tasks.
概要
- NADI 2025は、アラビア語の方言音声を識別・音声認識・母音記号復元の3課題で評価する共通課題である。
- 著者らの報告では、方言識別の最高正解率は79.8％、音声認識の最良の8方言平均WERは35.68、母音記号復元の最良WERは55だった。
- 業務への適用には、対象音声の正しい転写文と方言ラベルを用意し、方言別の誤りと担当者の修正量を測る必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、NADI 2025の仕組み
- 01方言音声・記号なし文
- 02課題別の処理
- 03方言名・転写・記号付き文
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
NADI 2025は、地域ごとに異なるアラビア語の発話を処理するシステムを評価する。方言には発音、語彙、文の形の違いがあり、日常会話で使われる一方、正解ラベル付きの音声データは限られる。共通のテスト条件があれば、方言ごとの誤りを調べやすい。
アラビア語の文字では、短い母音などを示す記号が省かれることが多い。発話を文字にするだけでなく、その記号を補う課題も設け、話し言葉に対応する処理を調べる。
手法
NADI 2025は単一のモデルではなく、参加チームが共通のデータと評価方法で競う枠組みである。第1課題は発話音声からアルジェリア、エジプトなど8つの国・地域の方言を選ぶ。第2課題は音声認識、つまり発話を文字へ変える処理で、同じ8方言と他言語が混ざる発話を扱う。
第3課題は、母音記号などを省いた文字列に記号を補う。各文字列には対応する音声があり、例えば発話音声と記号なしの転写文から、発音に合う記号付き文を出す。参加者は課題ごとにシステムを作る。音声認識の評価では、予測文と正解文に同じ表記の正規化を施してから誤りを測る。
新規性
著者らは、従来は主に文字を扱っていたNADIを音声へ広げ、方言識別、音声認識、母音記号復元を同じ共通課題に収めた。方言識別と音声認識は8つの国・地域の方言を対象とする。
母音記号復元では、方言や他言語が混ざる発話も対象にし、文字に対応する音声を用意した。新しさは評価課題とデータの設計にあり、参加システムが共通のモデルを使ったという意味ではない。
従来手法との違い
以前のNADIは、SNSの投稿など文字による方言識別や翻訳を主に扱った。NADI 2025では録音された発話を入力にするため、発音だけでなく話者や録音条件の違いも検証上の要素になる。
著者らは3課題に基準システムを設けた。音声認識の基準は追加学習をしないWhisper Large-v3である。参加結果との差は各課題の同じテスト条件で読む必要があり、以前の文字課題との性能比較には使えない。
実験結果
著者らによると、44チームが登録し、テスト段階では8チームから有効な提出が計100件あった。方言識別のテスト音声は約8時間で、ELYDATA-LIAは正解率79.8％、平均コスト17.88を記録した。基準システムは正解率61.1％、平均コスト34.22だった。
音声認識のテストは計10,807発話で、Munsitの8方言平均の単語誤り率（WER）は35.68、基準は93.89だった。母音記号復元のテストは計1,332発話で、Abjad AIのWERは55、文字誤り率（CER）は13、最良の基準は65と16だった。WERとCERは低いほど誤りが少ない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：複数のアラビア語方言で受ける問い合わせの文字起こしを試す。入力は通話の録音音声、出力は担当者が修正できる転写文と方言候補とする。音声認識と方言識別を別々に実行し、両方を担当者へ示す。
必要な入力源は対象業務の通話録音で、音声を取得する録音系も要る。適応用には発話ごとの正しい転写文と確認済みの方言ラベルを用意し、対象音声に合わせて候補を調整する。対応時間が短くなるかは別途測る。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象業務の通話録音を方言別に集め、音声を取得する録音系と収録条件を記録する。学習・適応用には発話ごとの正しい転写文と確認済みの方言ラベルが必要になる。音声とラベルの対応を点検し、話者や収録元が評価用データと重ならないよう分ける。
文字起こしでは、追加学習なしのWhisper Large-v3を基準に置き、対象音声で適応させた候補と比べる。同じ表記規則と評価用データでWERとCERを測り、方言別にも集計する。担当者の修正量も記録して、業務で使えるかを判断する。
限界と課題
著者らは方言音声のラベル付きデータが乏しいことや、録音条件の違い、他言語が混ざる発話を課題として挙げる。音声認識のテスト件数は方言によって異なるため、全体平均だけでは各方言の誤り方は分からない。
編集上の検証事項は、業務の話者と録音条件での精度、方言別の誤り、転写文と音声の対応である。音声認識の最高成績のCERは表と要旨が12.20、結果本文が12.10と食い違うため、確定値として採用しない。
出典
元のタイトル・要旨を確認する（英語）
NADI 2025: The First Multidialectal Arabic Speech Processing Shared Task
We present the findings of the sixth Nuanced Arabic Dialect Identification (NADI 2025) Shared Task, which focused on Arabic speech dialect processing across three subtasks: spoken dialect identification (Subtask 1), speech recognition (Subtask 2), and diacritic restoration for spoken dialects (Subtask 3). A total of 44 teams registered, and during the testing phase, 100 valid submissions were received from eight unique teams. The distribution was as follows: 34 submissions for Subtask 1 "five teamsæ, 47 submissions for Subtask 2 "six teams", and 19 submissions for Subtask 3 "two teams". The best-performing systems achieved 79.8% accuracy on Subtask 1, 35.68/12.20 WER/CER (overall average) on Subtask 2, and 55/13 WER/CER on Subtask 3. These results highlight the ongoing challenges of Arabic dialect speech processing, particularly in dialect identification, recognition, and diacritic restoration. We also summarize the methods adopted by participating teams and briefly outline directions for future editions of NADI.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01