アーカイブ / Audio
一つの録音から心音と呼吸音を分けるXVAE-WMT：分離手順と評価範囲
XVAE-WMT
XVAE-WMTの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Fig. 1: XVAE-WMT framework: (1) VAE Training, where the mixture is transformed into a wavelet scalogram and encoded into latent representations; (2) Explainable Latent-Space Analysis, where SHAP identifies the most informative latent dimensions and clustering reveals source-related structure; (3) Source-specific Decoding, where the selected latent dimensions are decoded into heart and lung representations; and (4) Soft-Mask Separation, where source-specific masks are applied to the mixture scalogram and inverse wavelet transformation produces the separated heart and lung signals.
概要
- XVAE-WMTは混合心肺音をウェーブレット変換し、変分オートエンコーダとソフトマスクで心音・呼吸音に分ける。
- 学習時に対になった正解波形は不要だが、学習後に潜在要素を音源へ対応付ける際には音源ラベルを使う。
- 著者らはSDR 26.8 dB、SIR 32.8 dB、SAR 28.6 dBを報告する。確認できた範囲ではデータ群別の内訳と比較法との差は分からない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、XVAE-WMTの仕組み
- 01混合心肺音
- 02ウェーブレット変換
- 03潜在要素選択
- 04復号とマスク
- 05心音・呼吸音
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
XVAE-WMTは、一つの録音に重なった心音と呼吸音を二つの波形に分ける方法である。両者は周波数帯が重なり、時間とともに変化するため、片方だけを取り出すのは難しい。個別の音を確認したい場面では、この重なりが妨げになる。
混合前のきれいな心音と呼吸音を、録音ごとに対でそろえることも難しい。そこで著者らは、対になった正解波形を学習に使わず、一つの録音経路から得た混合音を分離する方法を検討した。
手法
入力は一つの録音経路で得た混合波形である。連続ウェーブレット変換で、時刻ごとの音の成分を示す時間・周波数図に変える。変分オートエンコーダは、その図を潜在表現と呼ぶ数値の組に圧縮して復元するよう学ぶ。学習には復元誤差、潜在表現を整える項、隣接時刻の復元結果の急変を抑える項を用いる。
学習後、SHAPという寄与分析法で潜在要素を調べ、事後的な音源ラベルを使って心音用と呼吸音用に対応付ける。新しい録音では音源別の図を復元し、各時刻・周波数で混合音を配分するソフトマスクを作る。例えば心拍と呼吸が重なる録音に各マスクを適用し、逆変換して二つの波形を出す。
新規性
著者らの提案は、連続ウェーブレット変換による入力、時間的な急変を抑える学習損失、分離結果を混合音に結び付けるソフトマスクを、変分オートエンコーダに組み合わせた点にある。学習時に、混合前の心音と呼吸音を対にした正解波形は使わない。
学習後にはSHAPで内部の数値要素の寄与を調べ、心音用と呼吸音用の要素を選ぶ。著者らは、寄与の高い上位75％の要素を残しても分離品質を保てたと報告している。
従来手法との違い
著者らが比較対象に挙げる短時間フーリエ変換（STFT）は、音を短い区間ごとに周波数成分へ変える方法である。XVAE-WMTは、分析する時間幅を変えられる連続ウェーブレット変換を入力に使う。実験手順には、STFTの256周波数ビンとウェーブレット変換の200スケールが記されている。
既存の変分オートエンコーダによる方法に対して、著者らは時間的一貫性の損失、出力マスク、内部表現の分析を加えたと説明する。確認できた本文の範囲では、各変更の効果やSTFT版との差を示す数値は確認できない。
実験結果
著者らは二つのデータ群を用いた。一つはKaggle Respiratory Sound DatabaseとCirCor DigiScope Heart Sound Databaseの区間を無作為に組み合わせた混合音で、記載された区間数は心音24,383件、呼吸音18,144件である。もう一つは臨床用マネキンから収集したHLS-CMDSの区間を組み合わせた25,000件の混合音である。
著者らは信号対歪み比（SDR）26.8 dB、他音源の混入をみる信号対干渉比（SIR）32.8 dB、人工的な音の影響をみる信号対アーティファクト比（SAR）28.6 dBを報告する。確認できた本文の範囲では、これらの値のデータ群別内訳、評価分割、比較法との差は確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：一つの録音経路で収集した聴診記録を、担当者が確認する作業に試す。混合した心肺音を入力し、分離された心音と呼吸音を元の録音と並べて再生する。出力は診断結果ではなく、聞き直す区間を探すための二つの音声とする。
対象環境の単一マイクによる混合録音を学習用に集め、事後の音源対応付けには心音・呼吸音のラベルを用意する。収録条件に合わせて学習し、潜在要素を対応付け直す必要がある。分離が確認作業に役立つかは、この環境で検証する仮説である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象環境の単一マイクで得た混合心肺音を学習用に集め、収録条件を記録する。検証用には混合前の心音・呼吸音が分かる参照波形を別に確保し、事後分析用の音源ラベルも用意する。対象の録音条件で学習し直し、潜在要素を二つの音源へ対応付ける。
同じ録音をそのまま聞く手順を作業上の基準とし、担当者が聞き取りやすさと音の欠落を記録する。参照波形がある範囲ではSDR・SIR・SARを測る。未知の録音でも結果が安定するか、録音条件ごとに確かめる。
限界と課題
確認できた本文の範囲では、著者らが明示した臨床利用上の限界や、診断結果への影響を測った結果は確認できない。分離指標の値だけから、実際の聴診で診断に使えるとは判断できない。また、掲載された総合値が二つのデータ群にどう対応するかも分からない。
編集上の検証事項として、実際の録音に含まれる雑音や強い音の重なり、収録条件の違いで結果がどう変わるかを調べたい。事後分析用の音源ラベルの用意、選んだ潜在要素の再現性、分離音を聞く担当者の判断の安定性も確認が必要である。
出典
元のタイトル・要旨を確認する（英語）
XVAE-WMT: Explainable Wavelet-Temporal Variational Autoencoder for Blind Source Separation of Heart and Lung Sounds
The separation of cardiovascular sounds is a critical task in biomedical signal processing. In this paper, we introduce XVAE-WMT1, an unsupervised explainable generative AI algorithm combining a variational autoencoder (VAE) with explainable AI (XAI), wavelet-based inputs, a post-hoc output mask, and temporal consistency (TC) loss. Unlike existing supervised and VAE-based methods that rely on Short-Time Fourier Transform (STFT) and ignore latent interpretability, XVAE-WMT requires no paired clean recordings and integrates a Continuous Wavelet Transform (CWT) front-end for superior time-frequency localization. We assessed the latent space interpretability via different metrics, with SHAP (SHapley Additive exPlanations) enabling dimensionality reduction to the top 75% of latent features while preserving separation quality. Evaluated across two datasets using Signal-to-Distortion Ratio (SDR), Signal-to-Interference Ratio (SIR), and Signal-to-Artifacts Ratio (SAR), XVAE-WMT attains 26.8 dB SDR, 32.8 dB SIR, and 28.6 dB SAR.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01