カメラ･モジュールを使用しないハンド･ポスチャ検出

ハンド･ポスチャによる機械の制御を夢見たことはありますか？
もし携帯電話で手の動きに基づいて友人に絵文字を送ることができるとしたらどうですか？
その夢がついに現実となりました。 このソリューションは、STのマルチゾーンToF（Time-of-Flight）測距センサを使用するもので、カメラは不要です。 AIアルゴリズムはSTM32マイクロコントローラ上で動作するため、複雑な処理が不要で、しかも低消費電力です。
独自のハンド･ポスチャを定義し、データセットを収集し、AIモデルを学習させることでアプリケーションを開発できます。

このハンド･ジェスチャ認識ソリューションは、STのマルチゾーンToF測距センサを使用して一連のハンド･ジェスチャを検出し、 NUCLEO-F401REで実行できます。
開発プロセスは、以下のステップに基づきます。

• まず、独自のハンド･ポスチャを定義します。
• 8 x 8マルチゾーンToF測距センサ（VL53L5CX、VL53L7CX、VL53L8CXなど）からの距離および信号データを使用して、数人のユーザからデータセットを収集します。
• STM32 Model zooからの学習スクリプトでAIネットワークを学習させます。
• STM32Cube.AI Developer CloudまたはSTM32 Model zooに含まれる「Hand Posture Getting Started」を使用して、選択したSTM32マイクロコントローラにAIモデルを実装します。

このアプローチによりアプリケーションを素早く開発できることに加え、ハンド･ポスチャの自由度が高く、しかもメモリ使用量と消費電力を抑えることができます。
ToF測距センサは、アプリケーションに応じてユーザの前に（PC、満足度調査ボックス）、天井に向けて（調理台）、または移動物体に固定して（スマート･グラス）設置できます。

マルチゾーンToF測距センサ（参照： VL53L5CX、 VL53L7CX、 VL53L8CX）