スマートグラスのIMUセンサーを用いた人間行動認識に関する研究

研究背景、概要、目的

スマートフォンのセンサーに基づく人間認識は様々な研究が行われてきたが、近年スマートグラスに基づく人間の行動認識がますます注目を集めている。
頭の動きから情報を得ることができるスマートグラスはスマートフォンやスマートウォッチよりデータの収集が安定し、ノイズが少なく、装着位置の差が生じにくい。
しかし,スマートグラスのカメラを用いる場合、バッテリーの過度な消費や、映像という容量の大きさによる処理時間の増加など計算コストの増加という問題が発生する。
そこで、スマートグラスから収集されたIMUセンサーデータのみを用いて人間の行動認識を行い、精度の高い分類を目指す。

参考文献

・Linfeng Xu, Qingbo Wu, Liao Pan, Fanman Meng,Hongliang Li, Ce He, and Yu Dai. Towards Continual egocentric activity recognition: A multi-modal egocentric activity dataset for continual learning. arXiv preprint arXiv:2303.13032, 2023.
・Iveta Dirgov´a Lupt´akov´a, Michal Kubovˇc´ık, and J´an Posp´ıchal. Wearable sensor-based human activity recognition with transformer model. Sensors, Vol. 22, No. 5, p. 1862, 2022.
・Hanxin Wang, Shuchang Zhou, Qingbo Wu, Hongliang Li, Fanman Meng, Linfeng Xu, and Heqian Qiu. Confusion Mixup Regularized Multimodal Fusion Network for Continual Egocentric Activity Recognition. In Proceedings of the 2023 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), pp. 15904–15913,2023.