マスク越しフレーズ認識に向けたミリ波レーダによる口の形状変化の検出手法

情報処理学会

この論文をさがす

抄録

新型コロナウイルスの感染拡大の影響によりマスクの着用が普及しているが，音声の減衰や口の視覚情報の遮断により，発話内容が伝わりにくくなる．そこで本論文では，マスクを透過するミリ波レーダを用いて口の動きを読み取り，機械学習を用いて発話内容を推定する手法を提案する．口の動きによるミリ波レーダの受信信号の変化をレンジドップラー画像として識別し，それを特徴量として機械学習に入力することでフレーズの分類を行う．また本手法は口を動かすだけでフレーズ認識を実現できるため，声が出せない環境下でもコミュニケーションを支援することが期待される．

収録刊行物

キーワード

詳細情報 詳細情報について

問題の指摘

ページトップへ