近年の光学顕微鏡や蛍光タンパクの技術発展により，細胞を生かしたまま経時観察して動画像として記録可能となってきた．これらの動画像中から細胞動態を抽出し解析するためには細胞追跡が必要である．従来の細胞追跡では，主に教師あり深層学習に基づくtracking-by-detectionの手法が広く用いられる．しかし観測対象や撮影技術に依存して様々な性質を示す動画像に対して，個別に追跡アルゴリズムを調整することや，学習に十分な量のデータを用意することが必要である．この問題を解決するため，細胞動画像を模したシミュレータを環境として利用することで，強化学習に基づく細胞追跡モデルを訓練する手法を提案する．シミュレータでは，細胞の特徴と細胞追跡の正解を含む動画像を無数に生成できるため，データ不足でも学習が可能である．また強化学習では，タスクの目的を設定しておけば，その達成方法は計算機が自動で獲得するため，追跡対象ごとにアルゴリズムを調整する必要がなくなる．

Recent advances in optical microscopy and fluorescent protein technology have made it possible to record moving images of cells over time while keeping them alive. Cell tracking is necessary to extract and analyze cell dynamics from these moving images. Tracking-by-detection methods based on supervised deep learning are widely used for cell tracing. However, it is necessary to individually adjust the tracking algorithm for each cell video that shows various characteristics, and, in addition, to prepare a sufficient amount of data for training. To address these issues, we propose a method for training cell tracking models based on reinforcement learning with a simulator that imitates cell videos as an environment. The simulator can generate a lot of cell videos containing cell features and correct answers for cell tracking. This enables training even when there is insufficient data. Additionally, reinforcement learning does not require individual algorithm adjustment, because the computer automatically finds ways to accomplish the task once the objective is given.