人の行動認識(HAR)は、センサ・データに基づいて人の特定の行動または動作を識別する時系列分類タスクです。 行動は、歩行、起立、着座などの屋内で行う活動のほか、自転車の運転やサイクリングなどの屋外活動も可能です。 このデモは、Bluetooth Low Energyを介して接続するスマートフォン・アプリが付属する小型ボード「Sensor Tile」上で動作します。

アプローチ

- 3軸加速度計データを活用
- 5つのクラス:静止、歩行、ランニング、自転車、運転
- 前/後処理:重力フィルタリング、基準回転、時間フィルタリング
メイン・モデルはST独自の畳込みニューラル・ネットワーク・モデルですが、ファンクション・パックFP-AI-SENSING1およびFP-AI-MONITOR1では別のCNNモデルやSVCモデルなどのモデルもいくつか提案されています。

センサ

画像:3軸加速度センサ(リファレンス・デバイス: LSM6DSM

データ

データフォーマット
3D-accelerometer acquired @ 26Hz
5アクティビティ/1アクティビティ185分
センサーは様々な場所(バックパック、手首、手など)に保持。

結果

モデルST独自の畳込みニューラル・ネットワーク
入力サイズ24 x 3
メモリフットプリント:
ウエイト用 12 KB フラッシュ
アクティベーション用 1 .8 KB RAM
STM32L476 (Low Power) @ 80 MHzでの性能
使用例:1 classification/sec
前処理/後処理: 0.02 MHz
NN 処理: 0.35 MHz
消費電力 (1.8 V)
- システム:~ システム:~ 580 uA (最適化 BLE を使用)
- STM32:~510 uA
コード最適化ツール
STM32Cube.AI
STM32Cube.AI
対応製品

STM32L4シリーズ

STM32L4シリーズ

リソース

コード最適化ツール STM32Cube.AI

無償のSTM32Cube拡張パッケージX-CUBE-AIにより、ニューラル・ネットワークや機械学習モデルといった学習済みAIアルゴリズムを、STM32に最適化されたCコードへ自動変換できます。

STM32Cube.AI STM32Cube.AI STM32Cube.AI

対応製品 STM32L4シリーズ

Arm® Cortex®-Mベース32bitマイコンのSTM32ファミリは、マイコン・ユーザに高いレベルの自由を提供します。完全統合性および開発の容易さを維持しながら、高性能、リアルタイム性能、豊富な機能、デジタル信号処理、低消費電力 / 低電圧駆動、およびコネクティビティを兼ね備えた製品を提供します。

STM32L4シリーズ STM32L4シリーズ STM32L4シリーズ

おすすめ情報:

予知保全 | 加速度センサ | NanoEdge AI Studio | ビデオ | パートナー | 産業機器

Rtoneによるオンデバイス学習による異常検知

STM32マイクロコントローラ上で動作する産業機器の異常検出ソリューション。

物体検出 | 画像 | STM32Cube.AI | GitHub | ビデオ | データセット | アイデア | スマート・ビルディング

個人用保護具の検出

物体検出AIモデルを使用した作業員の個人用保護具の検出。

スマート・ホーム | スマート・ビルディング | スマート・オフィス | 画像分類 | 画像 | STM32Cube.AI | GitHub | ビデオ | デモ

人検出(Visual Wake Word)

高性能マイクロコントローラによる人検出機能の実装。