逆転的な音声強化: SE モジュールとコーデックモジュールを使った段階的アプローチ

ノイズと残響が大きい環境では、従来の音声強化手法では過剰に音声を抑制してしまい、聴取時のアーティファクトや下流タスクのパフォーマンス低下を引き起こす。そこで我々は、軽量な SE モジュールとジェネレーティブなコーデックモジュールを組み合わせた新しい手法「逆転的な音声強化 (RestSE)」を提案する。SE モジュールがノイズを低減し、コーデックモジュールが残響除去と音声の復元を行う段階的なアプローチにより、音声品質を効果的に改善できる。