Presentation Information

[10a-N304-7]Recognition of Chemical Laboratory Equipment Using Vision-Language Models for Automated Laboratory Notebook Generation

〇(M2)Yuto Shimazaki1, Yutaro Iwabuchi2, Kan Hatakeyama3, Yasuhiko Igarashi1,2 (1.Tsukuba Univ., 2.NIMS, 3.Tokyo Univ.)

Keywords:

VLM,Laboratory notebook,Multimodal AI

近年,実験プロセス自動化への期待が高まる一方,手作業の実験ではノートへの暗黙知の記録漏れが課題である.本研究では,実験ノート自動生成に向け,マルチモーダルAI(VLM)を用いた化学実験器具の認識を試みた.カタログ画像を用いてVLMをファインチューニングして器具分類モデルを構築し,その前後での認識結果を比較した.本発表では,化学実験器具認識に対するVLMの有効性を評価した結果について議論する.