Act-ChatGPT: Introducing Action Features into Multi-modal Large Language Models for Video Understanding
動画理解のためのマルチモーダル大規模言語モデルに、アクション特徴量を組み込む手法を提案。
論文を見る →Portfolio
ML Engineer
電気通信大学大学院にて情報学を専攻し、柳井研究室(Yanai Lab)でマルチモーダル大規模言語モデル・画像認識の研究に従事。 現在は機械学習エンジニアとして活動しています。
動画理解のためのマルチモーダル大規模言語モデルに、アクション特徴量を組み込む手法を提案。
論文を見る →VLLMの内部表現を用いたハルシネーション検知モデルのアンサンブル手法。
arXivを見る →