肖 智葳, 姜 文渊, 山本 雄平, 田中 ちひろ, 坂本 一磨, 中村 健二, 鳴尾 丈司, 田中 成典, Zhiwei Xiao, Wenyuan Jiang, Yuhei Yamamoto, Chihiro Tanaka, Kazuma Sakamoto, Kenji Nakamura, Takeshi Naruo, Shigenori Tanaka
情報処理学会論文誌 65(12) 1775-1787 2024年12月15日
近年,深層学習の著しい発展により,カメラ映像から物体追跡の精度が飛躍的に向上した.しかし,長時間にわたって多数の人物を追跡するには,既存手法ではオクルージョンにより追跡が失敗するという課題がある.この課題を解消するため,オクルージョン箇所において人物の軌跡が分断されたことで生成されるtracklet(短時間において正確に追跡した短い軌跡)と,対象人物とを再度同定する手法が提案されている.しかし,オクルージョンによる身体部位の遮蔽の度合いや,姿勢と向きより生じる人物画像の変化に対応できず,人物同定が安定しないことが分かっている.そこで,本研究では,深層距離学習を用いて選手個人の画像群から特徴空間上の重心を算出し,trackletにおけるすべての選手画像を考慮した人物同定および追跡手法を提案し実装する.実証実験から,選手個人の追跡精度が画期的に向上したことにより,フィールドスポーツにおける選手追跡結果を素早く作成できることを確認した.
Rapid development of deep learning in recent years has led to improved tracking accuracy of objects in video. However, existing methods of multiple object tracking face challenges in long-term tracking due to occlusion. To address this problem, tracking algorithms that split trajectories where occlusion occurs have been proposed for generating tracklets, short trajectories accurately tracked in a short time, re-identified as target individuals. Nevertheless, handling variations in the degree of body part occlusion and the dispersion of individual images due to changes in posture and orientation is difficult in these approaches and it leads to unstable identification results. In this study, the authors develop a method utilizing deep metric learning to calculate the centroid in the feature space of individual player image sets. This approach considers all player images in the tracklet for identification and tracking, demonstrating a significantly high improvement in the tracking accuracy of individual players. This method confirms the efficient generation of player tracking results in field sports.