アーカイブ / Audio
インドの精神科診療面接162件で調べた音声認識の言語・話者別の誤り
ASR Under the Stethoscope
ASR Under the Stethoscopeの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Real examples of patient-doctor conversion showing caveats in patient dialogue.
概要
- 著者らは、インド英語54件、ヒンディー語58件、カンナダ語50件の診療面接録音で8系統の音声認識を比較した。
- 掲載された単語誤り率は3言語ともGeminiが最も低く、カンナダ語では35.01％だった。
- Sarvamの話者別分析では、単語誤り率の中央値は患者56.75％、医師50.45％だった。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、ASR Under the Stethoscopeの仕組み
- 01診療面接の録音
- 028系統で文字起こし
- 03人手の転記と照合
- 04言語・話者別に集計
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
自動音声認識（ASR）は会話音声を文字に変える技術だ。精神科では患者の言い回しも面接記録の重要な部分になる。著者らによると、1時間の録音を手で転記するには5～8時間かかり、作業負担が大きい。
一方、診療面接には訛り、複数言語の混用、雑音、発話の重なりがある。認識の抜けや誤記は発言の解釈に影響し得るため、この研究は言語ごとの精度に加え、患者と医師・療法士のどちらの発話で誤りが多いかを調べた。
手法
著者らは、患者と医師・療法士による面接録音162件を使った。内訳はインド英語54件、ヒンディー語58件、カンナダ語50件で、静かな収録を心がけつつ、特別な防音措置は設けていない。たとえばヒンディー語の録音を対応モデルに入力し、その出力を人手の転記文と比べる。
主な指標は単語誤り率（WER）で、正解文の単語数に対する語の置換、脱落、余分な挿入の割合を表す。比較前に大文字・小文字、句読点、数字表記をそろえた。単語ごとの時刻を出せるモデルから選んだSarvamでは、発話を患者と医師・療法士に対応付け、性別や役割による違いも調べた。
新規性
著者らは、カンナダ語、ヒンディー語、インド英語の実際の診療面接で、8系統の音声認識を比較した初の体系的監査だと位置付ける。言語別の精度に加え、患者と医師・療法士の発話で誤りが異なるかを調べた。
さらにSarvamについて、話者の性別、役割、その組み合わせによる違いを分析した。単語誤り率を全体で一つ示すだけでなく、どの話者の発話に誤りが集まるかを確認できる点が、この監査の狙いである。
従来手法との違い
比較したのはWhisper、IndicWhisper、Sarvam、Google Speech-to-Text、Gemma3n、Gemini、Omnilingual、Vaani Whisperの8系統。IndicWhisperとVaani Whisperには英語の結果が掲載されていないため、英語で8系統すべてを順位付けすることはできない。
掲載された単語誤り率では、3言語ともGeminiが最も低い。話者属性の分析には、単語ごとの時刻を出せる4系統のうち、3言語で誤り率が最も低かったSarvamを使った。Sarvamの属性別結果は、他モデルにも同じ差があることを示さない。
実験結果
著者らの表では、Geminiの単語誤り率はインド英語14.15％、ヒンディー語18.52％、カンナダ語35.01％で、各言語の掲載モデル中で最も低い。Sarvamは同じ順に34.33％、39.03％、54.37％だった。いずれも、この施設で収録した診療面接での結果である。
Sarvamの話者別分析では、3言語を合わせた単語誤り率の中央値が患者56.75％、医師50.45％で、著者らは役割間に統計的な差を報告した。属性群の構成には偏りがあり、この差だけから話者の役割が誤りの原因だとは判断できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：精神科の面接記録を作る際、患者発話を人が重点的に確認する仕組みを試す。入力は対象施設の面接音声と、言語および患者・医師の発話区間を示すラベル。スマートフォンで収録した音声を認識し、出力した文字起こしを録音と並べて確認する。
出力は修正済みの記録と修正履歴にする。施設に合わせるには、人手で確認した正解文、話者区間、専門用語の表記を用意し、文字表記と区間の対応付けを調整する。モデルの追加学習を試す場合は、対象施設の音声と正解文を別途、学習用に確保する必要がある。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象施設の面接をスマートフォンなど実際に使う収録機器で録音し、人手で確認した正解文を作る。言語、患者・医師の発話区間を記録し、属性別にも比べるなら性別ラベルを用意する。追加学習なしの試験なら、新たな学習用データは要らない。
候補モデルの出力と正解文から言語別・話者別の単語誤り率を測り、現行の手作業転記を基準に修正時間も比べる。患者発話の脱落、薬剤名や症状表現の誤記を点検し、表記の統一と発話区間の対応付けを施設に合わせて調整する。追加学習を行う場合は、別に確保した対象施設の音声と正解文で検証する。
限界と課題
著者らは、患者発話の誤りにマイクの位置、背景雑音、発話の重なり、地域語彙や言語の切り替えが関わり得ると述べ、音響面の適応と追加の誤り分析を求めている。個々の原因を切り分けて実証した結果ではない。
編集上の検証事項は、単一施設の結果を別の収録環境へ移せるか、人数の少ない属性群の差が安定するかである。英語の医師は表では全員女性。また、既存の転記103件と追加の転記60件は合計163件となり、録音総数162件と食い違う。性別と役割を組み合わせた群の順位も、本文の説明と表の数値が一致しない。
出典
元のタイトル・要旨を確認する（英語）
ASR Under the Stethoscope: Evaluating Biases in Clinical Speech Recognition across Indian Languages
Automatic Speech Recognition (ASR) is increasingly used to document clinical encounters, yet its reliability in multilingual and demographically diverse Indian healthcare contexts remains largely unknown. In this study, we conduct the first systematic audit of ASR performance on real world clinical interview data spanning Kannada, Hindi, and Indian English, comparing leading models including Indic Whisper, Whisper, Sarvam, Google speech to text, Gemma3n, Omnilingual, Vaani, and Gemini. We evaluate transcription accuracy across languages, speakers, and demographic subgroups, with a particular focus on error patterns affecting patients vs. clinicians and gender based or intersectional disparities. Our results reveal substantial variability across models and languages, with some systems performing competitively on Indian English but failing on code mixed or vernacular speech. We also uncover systematic performance gaps tied to speaker role and gender, raising concerns about equitable deployment in clinical settings. By providing a comprehensive multilingual benchmark and fairness analysis, our work highlights the need for culturally and demographically inclusive ASR development for healthcare ecosystem in India.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01