Presentation Information
[A-8-13]A Study on Hand Gesture Recognition Using an Event-based Vision Sensor and Edge AI
◎Masaharu Nakayama1, Osamu Watanabe1 (1. Takushoku University)
Keywords:
Event based vision,EVS,Gesture recognition
イベントベースビジョンセンサ（EVS）は，輝度変化が生じた画素のみを非同期に出力するため，高い時間分解能や低消費電力，低データ量といった特長を持ち，動きを伴うジェスチャ認識への応用が期待される．本研究は，安価かつ汎用的なエッジデバイスであるRaspberry Pi 5とAIアクセラレータHailo-8L上で，イベントデータを用いたハンドジェスチャ認識を実現する実用的なエッジ推論システムの構築を最終目的とする．本稿では，その第一段階として，EVS（Prophesee GENX320）から得られるイベントデータを畳み込みニューラルネットワーク（CNN）で学習・分類し，ジェスチャ認識の実現可能性を検討した．イベント列を時間窓またはイベント窓で区切り，ON/OFFの極性を別チャネルに分離した2次元フレームへ集約してCNNに入力し，待機・遷移・手形保持を含む8種類の動作状態を分類した．評価の結果，イベント窓方式（10,000イベント）で最大77.1%の分類精度が得られ，本手法の実現可能性を確認した．