講演情報

[10a-N304-7]実験ノート自動生成に向けたVLMによる化学実験器具認識

〇(M2)島崎 悠人1、岩淵 雄太郎2、畠山 歓3、五十嵐 康彦1,2 (1.筑波大、2.NIMS、3.東大)

キーワード:

VLM、実験ノート、マルチモーダルAI

近年,実験プロセス自動化への期待が高まる一方,手作業の実験ではノートへの暗黙知の記録漏れが課題である.本研究では,実験ノート自動生成に向け,マルチモーダルAI(VLM)を用いた化学実験器具の認識を試みた.カタログ画像を用いてVLMをファインチューニングして器具分類モデルを構築し,その前後での認識結果を比較した.本発表では,化学実験器具認識に対するVLMの有効性を評価した結果について議論する.