アプローチ
- カメラ･モジュール（B-CAMS-OMV）を使用してシーンをキャプチャし、96 x 96ピクセルに縮小しました。
- 人検出の管理には、Google Visual Wake Wordからの学習済みNNモデルを選択しました。
- このモデルは、すでにファンクション･パックFP-AI-VISION1（ STM32H747ディスカバリ･キット用）に統合されています。
- このモデルはSTM32Cube.AIを使用して最適化されています。
センサ
データ
2クラス：人がいる / 人がいない
96 x 96カラー画像（MobileNet v1 0.25の場合）
128 x 128カラー画像（MobileNet v2 0.35の場合）
結果
モデル： 量子化されたMobileNet v1 0.25
入力サイズ：96 x 96 x 3
メモリフットプリント：
ウエイト用 214 KB フラッシュ
アクティベーション用 40 KB RAM
精度： 85%（Cocoサブセット･データセットに対して）
STM32H747* @ 400 MHz でのパフォーマンス
推論時間： 36 ms
フレームレート： 28 fps
モデル： 量子化されたMobileNet v2 0.35
入力サイズ：128 x 128 x 3
メモリ･フットプリント
使用Flashメモリ 402KB（重みデータ）
使用RAM：224KB（アクティベーション･バッファ）
精度： 91%（Cocoサブセット･データセットに対して）
STM32H747* @ 400 MHz でのパフォーマンス
推論時間： 110 ms
フレームレート： 9 fps
* STM32CubeAI 7.1.0ベースのFP-AI-VISION1 3.1.0を使用して測定
コード最適化ツール STM32Cube.AI
無償のSTM32Cube拡張パッケージX-CUBE-AIにより、ニューラル･ネットワークや機械学習モデルといった学習済みAIアルゴリズムを、STM32に最適化されたCコードへ自動変換できます。
対応製品 STM32H7シリーズ
Arm® Cortex®-Mベース32bitマイコンのSTM32ファミリは、マイコン･ユーザに高いレベルの自由を提供します。完全統合性および開発の容易さを維持しながら、高性能、リアルタイム性能、豊富な機能、デジタル信号処理、低消費電力 / 低電圧駆動、およびコネクティビティを兼ね備えた製品を提供します。