Knowledge-Based Prompt Optimization for Black-Box LLMs
-
- MATSUMOTO Ayaka
- NTT Human Informatics Laboratories
-
- NOMOTO Narichika
- NTT Human Informatics Laboratories
-
- NAKATSUJI Makoto
- NTT Human Informatics Laboratories
-
- SATO Yoshihide
- NTT Human Informatics Laboratories
Bibliographic Information
- Other Title
-
- ブラックボックスLLMに対する知識活用型プロンプト最適化
Description
<p>近年、ブラックボックス的な性質を持つLLM(大規模言語モデル)は優れた性能で注目を浴びている。LLMは汎用性が高い一方で、モデルの内部パラメータを直接変更することが難しいという課題がある。それに対し、プロンプト最適化技術はモデルのパラメータを変更することなく高いパフォーマンスを引き出す有効なアプローチとして関心を集めている。しかし、プロンプトの最適化には高度な知識や試行錯誤が必要であり、手動によるプロンプト設計は非常に労力を要する。これに対し、本研究ではLLMエージェントが発話予測タスクを通じて、対話データを分析しながら動的に知識や経験を蓄積し、それらを必要に応じてプロンプトの生成に反映する新しいプロンプト最適化手法を提案する。本研究で提案する手法で、LLMエージェントは自らのプロンプト生成手法を自律的に最適化し、時間とともによりプロンプトを生成する能力を高める。</p>
Journal
-
- JSAI Technical Report, SIG-SLUD
-
JSAI Technical Report, SIG-SLUD 102 (0), 167-170, 2024-11-14
The Japanese Society for Artificial Intelligence
- Tweet
Details 詳細情報について
-
- CRID
- 1390583647828427008
-
- ISSN
- 24364576
- 09185682
-
- Text Lang
- ja
-
- Data Source
-
- JaLC
-
- Abstract License Flag
- Allowed