遠隔存在感ロボットのためのフォルマントによる口唇動作生成手法

  • 石井 カルロス寿憲
    (株)国際電気通信基礎技術研究所知能ロボティクス研究所
  • 劉 超然
    (株)国際電気通信基礎技術研究所知能ロボティクス研究所
  • 石黒 浩
    (株)国際電気通信基礎技術研究所石黒浩特別研究室
  • 萩田 紀博
    (株)国際電気通信基礎技術研究所知能ロボティクス研究所

書誌事項

タイトル別名
  • Lip Motion Generation Method Based on Formants for Tele-presence Humanoid Robots
  • エンカク ソンザイカン ロボット ノ タメ ノ フォルマント ニ ヨル コウシン ドウサ セイセイ シュホウ

この論文をさがす

抄録

Generating natural motion in robots is important for improving human-robot interaction. We aim the development of a tele-operation system where the lip motion of a remote humanoid robot is automatically controlled from the operator’s voice. In the present work, we proposed a lip motion generation method where lip height and width degrees are estimated from formant information extracted from the speech signal. The method requires the calibration of only one parameter for speaker normalization, so that there is no need of prior construction of user-directed acoustic models. Lip height control is evaluated in two types of humanoid robots (Geminoid-F and Telenoid-R2). Subjective evaluation indicated that the proposed audio-based method is able to generate lip motion with naturalness superior to vision-based and motion capture-based approaches. Partial lip width control was shown to improve lip motion naturalness in Geminoid-F, which also has an actuator for stretching the lip corners. Issues regarding synchronization of audio and motion streams, and online real-time processing are also discussed.

収録刊行物

被引用文献 (4)*注記

もっと見る

参考文献 (20)*注記

もっと見る

詳細情報 詳細情報について

問題の指摘

ページトップへ