重要語に着目した写真列からのレシピの自動生成

DOI Web Site Web Site 参考文献23件

書誌事項

タイトル別名
  • Recipe Generation from a Photo Sequence by Focusing on Verbalizing Important Terms
  • ジュウヨウゴ ニ チャクモク シタ シャシンレツ カラ ノ レシピ ノ ジドウ セイセイ

この論文をさがす

抄録

<p>本研究では，写真付きレシピの作成を容易にするために，写真列を入力としてレシピを生成するという課題と，それを解決する手法を提案する．レシピを正しく生成するためには，モデルは写真を説明する上で欠かせない物体や動作といった重要語と，それを含む表現を生成する必要がある．写真列を入力として文章を出力する類似課題である Visual storytelling の手法では，重要語の存在は考慮されていなかった．これに対して，本論文では，検索課題として取り組まれてきた手法を文生成モデルに組み込むことで，モデルは入力写真に適した重要語を過不足なく含む表現の情報を活用しながらレシピを生成する手法を提案する．日本語のレシピを対象に実験を行った結果，本手法を適用することで生成文の自動評価尺度や，写真に適した重要語が生成文中に含まれているかといった評価においてベースラインと比較して性能が向上したことを実験的に確認した．</p>

収録刊行物

  • 自然言語処理

    自然言語処理 27 (2), 257-279, 2020-06-15

    一般社団法人　言語処理学会

参考文献 (23)*注記

もっと見る

関連プロジェクト

もっと見る

キーワード

詳細情報 詳細情報について

問題の指摘

ページトップへ