arXiv (ML)AI
オンデバイス機械学習対応のフル搭載センサー型スマートアイウェアプラットフォーム
Fully-sensorized smart-eyewear platform for on-device Machine Learning
この記事についてAIに質問する →
日本語要約青い用語にマウスを合わせると解説が表示されます
本論文で発表されたARGOは、快適性、高い計算スループット、エネルギー効率を両立させるために設計されたスマートアイウェアプラットフォームである。従来のクラウド依存型のソリューションとは異なり、ARGOはSTM32N6マイクロコントローラと統合されたニューラル処理ユニット(NPU)を活用することで、デバイス上での機械学習を実現している。これにより、遅延を最小化しながらユーザーのプライバシーをローカルデータ処理によって保護することができる。
研究チームの主な貢献は、ハードウェア、ファームウェア、人工知能の統合的な共設計にあり、都市環境での障害物認識をリアルタイムで行うための最適化されたYOLOv11モデルの展開に焦点が当てられている。対象NPUとの互換性を確保するために、研究者らはHead-wise Parallel Attention(HPA)という新たなアーキテクチャ改善を導入した。これにより、元の計算ロジックを保持しながらアクセラレータの効率的な実行が可能になる。
Walking On The Road(WOTR)データセットで学習されたモデルは、厳格なメモリ制約下でmAP50-95スコア24を達成し、メモリフットプリントはわずか2.483MBに抑えられている。プラットフォームはRGBカメラ、Time-of-Flightセンサー、マイク、環境センサーを統合した多模式センサースイートを搭載し、200mAhバッテリーで約113分の連続動作時間を保ちながら10FPSを実現している。
これらの結果から、高性能でプライバシーを保護し、かつ社会的に受け入れられやすい補助装置の実現可能性が実証されている。同時に、競争力のあるエッジAIソリューションは、綿密に統合された多分野的な共設計アプローチをますます必要とすることが強調されている。