Touchable Wall: アクティブ音響センシングを用いた大画面タッチプロジェクションシステム
Touchable Wall: Touch-Operated Large-Screen Projection System with Active Acoustic Sensing

2019年08月08日

プロジェクタ映像に対する操作においては、手に何も持たずに、かつ画面上で直接ポインティング操作を行うことが望ましい。そこで、アクティブ音響センシングを用いた新しい大画面タッチプロジェクションシステム、Touchable Wallを提案した。 面振動アクチュエータにより非可聴帯域で平面を振動させ、その弾性特性変化を音の共鳴として取得する。この特徴量を機械学習することで、「真の」タッチ検出とその位置・圧力の推定を行う。

In user operation on the projector image, it is desirable to perform a pointing operation directly on the screen without holding anything in the users’ hand. We proposed Touchable Wall, a new touch-operated large-screen projection system using acoustic vibration sensing. We apply a continuous signal in the inaudible range of an actuator to a surface and acquire its elastic compliance change as a resonance of sounds. We perform “true” touch detection, position estimation, and pressure estimation by using machine learning techniques.

Takefumi Hiraki, Masaaki Fukumoto, Yoshihiro Kawahara

Contact: hiraki@sens.sys.es.osaka-u.ac.jp