マルチモーダルセンサを用いた行動認識技術

Posted on Posted in 行動認識

近年,スマートウォッチなどのウェアラブルデバイスには,カメラやマイク,加速度センサなどの様々なセンサが搭載されています.本研究では,手首装着型センサデバイス上のマルチモーダルセンサを用いた行動認識技術を開発しています.マイクで行動のときに発生する音,加速度センサで行動のときの手の動き,カメラで行動のときに使っているオブジェクトの情報を捉え,機械学習技術により行動を推定します.

[手法説明スライド]
pervasive2010

T. Maekawa, Y. Yanagisawa, Y. Kishino, K. Ishiguro, K. Kamei, Y. Sakurai, and T. Okadome: Object-based Activity Recognition with Heterogeneous Sensors on Wrist, Proc. of International Conference on Pervasive Computing (Pervasive 2010), pp. 246-264 (May 2010). (Acceptance rate = 25/157 = 16%)

Japan company developing sensors for seniors, The Washington Post, Yahoo! News, abc NEWS, Forbes, Bloomberg, The Boston Globe, The Seattle Times, THE AGE, National Public Radio, CBS NEWS (Associated Press), Feb. 22, 2011.

ntt