精密な距離測定とマルチセンサーイメージングは、個別に捉えれば確立された技術ですが、これらを単一のコヒーレントなシステムに融合させることは非常に困難です。本記事では、熱異常検知、可視光画像による確認、レーザー距離測定を、手動の補正なしで同一のオペレーターインターフェースに統合する技術について解説します。

精密な距離測定とマルチセンサーイメージングは、個別に捉えれば確立された技術ですが、これらを単一のコヒーレントなシステムに融合させることは容易ではありません。熱異常検知、可視光画像による確認、そしてレーザー測定距離が、手動による補正を介さず、同一の瞬間に同一のインターフェースへ統合されるシステムを実現する技術について本稿で解説します。

これは私たちのチームが本プロジェクトで取り組んだ課題です。可視光カメラ、熱画像センサー、レーザー距離計を単一のエッジコンピューティングプラットフォーム上に実装・検証し、個々のセンサーではなく、それらの「境界」における工学的な難題を解決することを目指しました。

マルチセンサーフュージョン概念:可視光カメラ、赤外線サーモグラフィ、レーザー距離計を統合したエッジコンピューティングプラットフォーム

本記事では、コンセプト設計、コンポーネント選定の理由、実装した測定フレームワーク、そして開発プロセスから得られた教訓を詳述します。

コンセプト:設計要件としての「センサーフュージョン」

私たちの設計アプローチは、以下の原則に基づいています:

  • rawデータよりも測定の一貫性を優先: 個々のセンサーのスペックを最大化するよりも、空間的・時間的な一貫性を重視しました。
  • 生のデータではなく、導出パラメータを出力: システムは生のセンサーデータではなく、水平距離、高度差、仰角といった「解釈可能な出力」を生成するよう設計しました。
  • 現場での実用性を重視: 変動する光環境、極端な温度変化、振動といったフィールド環境での使用を前提とした設計です。
システムアーキテクチャ

本システムは4つの統合サブシステムで構成されています:

  • エッジコンピューティングプラットフォーム: システムのオーケストレーション、センサーフュージョン、リアルタイム演算を担当。
  • 可視光カメラモジュール: 高解像度の光学観測と電動ズーム機能。
  • 熱画像モジュール: あらゆる条件下で機能するパッシブ赤外線センサー。
  • レーザー距離計モジュール: 斜距離および角度センサーにより、水平距離とターゲットの高度を算出。
マルチセンサーフュージョンシステムアーキテクチャ図
コンポーネント選定の理由
エッジコンピューティング:NXP i.MX8M Plus

NXP i.MX8M Plusを採用した理由は、クアッドコアArm Cortex-A53、Cortex-M7(リアルタイムコア)、および2.3 TOPSのNPUが単一のSoC上に統合されているためです。特にCortex-M7は、センサーの同期というリアルタイム性が求められる処理において重要な役割を果たしました。

可視光カメラ:ZCM8M30M33QX10

8MP解像度と10倍の光学ズームを備えた本モジュールは、遠距離の目標確認に最適です。光学ズームを採用することで、デジタルズーム特有の画質劣化を防ぎ、ターゲットを鮮明に捉えることが可能です。

熱画像モジュール:TCM300K50U1-FL35

640×512の非冷却赤外線センサーと35mmレンズを搭載。熱画像と可視光画像は、シーンに対する「注目点」が異なることが多いため、オペレーターの認知負荷を考慮した情報の提示方法(UX)が極めて重要です。

レーザー距離計:LRFX00M3LS

斜距離と角度を精密に測定します。物理的な軸ズレによる視差(Parallax)を補正するため、取り付け幾何形状に合わせた入念なキャリブレーションが不可欠です。

測定フレームワーク

斜距離 D と仰角 θ から空間パラメータを導出します:

水平距離: H = D × cos(θ) 高度差: Δh = D × sin(θ)
学んだ教訓
  • 同期処理の難しさ: 出力レートやプロトコルの異なる複数のセンサーを統合する際、一貫したタイムスタンプ管理が最大の課題でした。
  • エッジAIの余力: NPUを搭載しておくことで、初期段階では簡易的な推論、将来的にターゲット自動検出などの高度な機能へのロードマップを柔軟に描くことができました。
結びとして

本プロジェクトは、光電子技術、組み込みファームウェア、応用測定を一つのシステムとして結実させる非常に有意義な試みでした。IADIYでは、このようなセンサーフュージョンに関する高度な技術支援を行っております。光学センシングと組み込み演算の統合でお困りの際は、ぜひ当社のエンジニアリングチームまでご相談ください。

熱画像モジュール、レーザー距離計の統合、またはAI組み込みシステムの開発でお悩みですか?

エンジニアリングチームに問い合わせる

当社の 熱画像モジュールレーザー距離計モジュール、および AI組み込みシステム もぜひご覧ください。