Bibliographic Information
- Other Title
-
- システム ハツワ ノ カンジョウ ブンルイ ニ ヨル セイギョ オ オコナッタ マルチモーダル タイワ システム
Search this article
Abstract
<p>本稿ではテキスト・音声・ジェスチャーを制御したマルチモーダルな対話システムの開発に取り組んだ。本対話システムは応答生成器と感情分類器によって構成されている。応答生成器にはGPT-2を用いた。GPT-2では、学習済みモデルをTwitterから収集したデータによって転移学習をした。感情分類器にはBERTを用いた。BERTの学習では、学習済みモデルを感情分析データセットであるWRIMEによってファインチューニングした。WRIMEでは1つの文章に8つの感情カテゴリのアノテーションがされている。そのためBERTでは多ラベルの学習を行い、分類時には最もスコアの高い感情カテゴリを対話システムの表出感情とした。表出感情を基に、事前に作成したデータセットからジェスチャーと音声の制御を抽出し、システム発話と共に出力した。</p>
Journal
-
- JSAI Technical Report, SIG-SLUD
-
JSAI Technical Report, SIG-SLUD 96 (0), 45-, 2022-12-01
The Japanese Society for Artificial Intelligence
- Tweet
Details 詳細情報について
-
- CRID
- 1390012801499069568
-
- NII Book ID
- AN10432166
-
- ISSN
- 24364576
- 09185682
-
- NDL BIB ID
- 032570751
-
- Text Lang
- ja
-
- Data Source
-
- JaLC
- NDL
-
- Abstract License Flag
- Allowed