表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

雑音から風切り音まで扱う音声強調と、その音質を測るURGENT 2026

ICASSP 2026 URGENT Speech Enhancement Challenge

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理

概要

  • Track 1は、7種類の劣化や異なる標本化周波数の発話を、入力条件を事前に知らない単一の音声強調システムで扱う課題である。
  • Track 2は、強調後の音声に対する人のMOS評価を予測し、発話単位とシステム単位で照合する。
  • 有効提出は両課題で計29件。Track 1の非公開テストには模擬音声360件と実録音480件が含まれる。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、ICASSP 2026 URGENT Speech Enhancement Challengeの仕組み

左から右へ読む
  1. 01劣化した発話
  2. 02音声強調
  3. 03改善音声
  4. 04音質予測値

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

音声強調は、雑音や反響などで聞き取りにくくなった声を改善する処理である。著者らは、従来の評価が学習時に近い条件や限られた劣化に偏り、未知の環境や話者への対応が課題だったと説明する。

URGENT 2026は、異なる言語、声質、話し方、録音形式を一つのシステムで扱う課題を設けた。実際の録音には条件の違いが混在するため、特定の雑音だけで良い結果を得ても、利用先での性能は判断しにくい。

手法

Track 1は、雑音、残響、音割れ、帯域制限、符号化による歪み、通信時のデータ欠落、風切り音を含む発話を、一つのシステムで改善する課題である。入力の種類は事前に分からず、標本化周波数という音を毎秒何回記録するかの値も、例として8~48 kHzにまたがる。風切り音の入った発話なら、その音を抑えつつ話者の内容を保った音声を出す。

Track 2は、Track 1などの音声強調システムが出した音声からMOSを予測する。MOSは聞き手の音質評点の平均で、予測を発話単位とシステム単位で照合する。Track 1の学習用音声は発話、雑音、室内の反響を表すデータなどから作り、課題では大量のデータを一律に使うより、質を見て選ぶことも促している。

新規性

今回の課題は、従来からの頑健性や多言語対応に加え、学習データの選別と声の多様性を重視する。年齢やアクセントの違い、ささやき声、歌声、感情を込めた声も対象に含めた。

新設のTrack 2では、強調後の音声に対する人の音質評価を予測する。音声を改善するTrack 1と、改善結果の聞こえ方を見積もるTrack 2を、それぞれ評価する課題設計である。

従来手法との違い

Track 1の基準モデルは、入力から改善音声を推定するBSRNNと、雑音を含む音声を条件に改善音声を生成するFlowSEである。著者らは、生成型と識別型の処理を組み合わせた上位方式が、参照音声を使う指標と使わない指標の双方で、単独方式の基準モデルを上回ったと報告する。

Track 2の基準モデルはUni-VERSA-Extで、URGENT-PKは競争対象外の比較用モデルである。著者らによると、URGENT-PKはシステム単位の相関指標で最高値を得た。確認できた本文の範囲では、モデル間の点差は示されていない。

実験結果

著者らによると、Track 1には23件、Track 2には6件の競争参加があり、両課題の有効提出は計29件だった。Track 1の非公開テストには模擬音声360件と実録音480件が含まれ、学習データにない5言語も対象とした。複数の客観指標で選んだ上位6方式を人の聴取評価に進め、MOSと比較時の平均評点CMOSで最終順位を決めた。

Track 2の非公開テストは、16システム由来のMOS付き音声8,000件である。予測誤差と相関を発話単位・システム単位で評価した。著者らは上位方式の傾向を報告するが、確認できた本文の範囲では、各方式の指標値や差の大きさは示されていない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:社内会議の録音を改善し、聞き取りにくい発話を人が確認する用途を想定する。入力は会議用マイクの録音、出力は改善音声と発話ごとの音質予測値とし、予測値は確認する順番を決める参考にする。

適応には、対象の会議録音に加え、学習用の清潔な発話、雑音、室内の反響を表すデータを用意する。音質予測も使うなら、人が付けたMOSラベルが必要になる。マイクと収録条件を記録し、会議に近い学習データを選ぶ。実用時の精度は別途検証する。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:対象の会議用マイクで、雑音、残響、話者、標本化周波数が異なる録音を集める。適応用には清潔な発話、雑音、室内反響のデータを収録条件に合わせて選び、内容確認用の書き起こしラベルも用意する。

未処理音声とTrack 1の基準モデルBSRNNを比較対象に、同じ発話で候補方式の音を聞き比べる。人のMOS、書き起こしの文字正確率、話者の声の保持を確認する。Track 2も試すなら別途人のMOSラベルを集め、予測値と評点の相関を測る。

限界と課題

著者らは紙幅の制約を挙げ、結果の詳細な分析を今後示すとしている。確認できた本文の範囲では、各提出方式の指標値や、劣化・言語ごとの成績差は分からない。上位方式についての報告を、あらゆる録音条件での改善保証とは解釈できない。

編集上の検証事項は、対象の会議で話者の声質と発話内容が保たれるか、音質予測が人の評点と合うかである。必要な適応データ量や処理時間も、この本文だけでは判断できない。競争対象外のURGENT-PKの相関結果は、競争参加方式の最終順位と区別して読む必要がある。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

ICASSP 2026 URGENT Speech Enhancement Challenge

The ICASSP 2026 URGENT Challenge advances the series by focusing on universal speech enhancement (SE) systems that handle diverse distortions, domains, and input conditions. This overview paper details the challenge's motivation, task definitions, datasets, baseline systems, evaluation protocols, and results. The challenge is divided into two complementary tracks. Track 1 focuses on universal speech enhancement, while Track 2 introduces speech quality assessment for enhanced speech. The challenge attracted over 80 team registrations, with 29 submitting valid entries, demonstrating significant community interest in robust SE technologies.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01