サウンドスコープパッド

抄録

本稿では,人工知能,仮想現実,空間音響の技術を組み合わせることで能動的な音楽鑑賞体験を提供するアプリケーション,サウンドスコープパッドについて述べる.ユーザは,頭部を左右に動かしたり,耳を澄ませるように手を耳に近づけるジェスチャーをすることで,ユーザが聴きたい楽器パートの音を強調して聴くことができる.我々が以前構築したサウンドスコープヘッドフォンでも同じように聴きたいパートの音を強調することが可能であったが,方位センサ・加速度センサをヘッドバンド部に装着した特別なヘッドフォンでユーザの頭部方向を検出していた.一方,サウンドスコープパッドでは,タブレットの加速度・ジャイロセンサが検出したタブレット本体の角度情報と,タブレットのフロントカメラで撮影したユーザの顔画像から獲得したユーザの頭部方向の情報を統合することで,実空間におけるユーザの頭部方向の検出を可能とする.すなわち,アプリケーションに対応するタブレットさえあれば,どのようなヘッドフォンであっても聴きたいパートの音を強調しながら能動的に音楽鑑賞をすることが可能である.

収録刊行物

詳細情報 詳細情報について

問題の指摘

ページトップへ