可視光・赤外線マルチスペクトル融合開発サービスとは
可視および赤外のマルチスペクトル融合開発サービスは、可視、近赤外、短波赤外、または熱赤外イメージング チェーンのソフトウェア、ハードウェア、およびアルゴリズム エンジニアリングを組み合わせます。この範囲には、センサーと光学系の選択、カメラ モジュール、ドライバー、同期とキャリブレーション、クロススペクトル画像位置合わせ、融合強化、ターゲット分析、エッジデプロイ、SDK、エンジニアリング プロトタイプ、および書面による受諾が含まれる場合があります。波長の組み合わせ、デバイス、プラットフォーム、パフォーマンス目標、および提供範囲は、アプリケーション シナリオ、既存の機器、利用可能なデータ、および書面による技術契約から定義されます。
プロジェクトの進め方
エンゲージメント モデルは、利用可能な機器、データ条件、およびターゲット成果物 (アルゴリズムとデータの実現可能性の検証、既存システムの適応、または完全なデバイスとシステム開発) から選択されます。
アルゴリズムとデータの実現可能性の検証
- 該当する状況
- 代表的なサンプルまたはデータ収集パスが利用可能で、プロジェクトが最初に画像位置合わせ、融合、またはアプリケーション アルゴリズムの実現可能性を検証する必要がある場合に適しています。
- サービス範囲
- データ品質のレビュー、校正条件の評価、アルゴリズムのプロトタイプ、結果の分析、およびターゲット プラットフォームの予備的な評価。
- 主な成果物
- アルゴリズムのプロトタイプ、評価記録、技術的制限リスト、およびその後の開発のための推奨事項。
既存システムの適応
- 該当する状況
- カメラ、モジュール、またはコンピューティング プラットフォームがすでに存在し、インターフェイス、同期、キャリブレーション、アルゴリズム、または展開機能を追加する必要がある場合に適しています。
- サービス範囲
- インターフェイスとドライバーの適応、タイミング同期、キャリブレーション ツール、融合アルゴリズム、コンピューティング プラットフォームの適応、およびシステム統合。
- 主な成果物
- 適応ソフトウェア、SDK、統合結果、構成情報、検証記録。
デバイスとシステムの開発を完了する
- 該当する状況
- プロジェクトで、画像デバイス、ハードウェア、機械設計からアルゴリズム、ソフトウェア、エンジニアリング プロトタイプ、承認に至るまでの調整された開発が必要な場合に適しています。
- サービス範囲
- システム定義、コンポーネントの選択、ハードウェアと機械の設計、低レベルのソフトウェア、アルゴリズム、エッジデプロイ、プロトタイプの検証。
- 主な成果物
- 設計情報、ソフトウェアとアルゴリズム、SDK、エンジニアリング プロトタイプ、テスト記録、および承認文書。
用途と技術的価値
低光量、逆光、煙、オクルージョン、温度変化、または複雑な背景では、単一のイメージング モダリティではテクスチャ観察、熱ターゲット分析、インテリジェント認識を同時にサポートできない場合があります。マルチスペクトル システムは、可視光テクスチャと赤外線放射または反射情報を組み合わせて、人間の観察、デバイス制御、およびアルゴリズムによる決定のための統合されたイメージングとデータ チェーンを提供します。
主な開発範囲
マルチスペクトルシステムの定義
動作波長、視野、距離、照度、温度範囲、同期方法、環境制約を定義します。
カメラモジュールとハードウェア
センサー、レンズ、フィルター、照明、インターフェース、電力、熱設計、機械的スペースを評価します。
ドライバーとイメージング パイプライン
MIPI CSI-2、USB、GigE、GMSL、露出制御、ISP、エンコード、およびビデオ ストリームを適応させます。
同期、校正、補正
共通のタイムベース、内部および外部パラメータ、歪みモデル、座標系、および温度ドリフト補正手順を確立します。
クロススペクトルの画像位置合わせと融合
レジストレーション、視差補正、融合強化、顕著なターゲットの保存、アーティファクトの抑制を開発します。
マルチスペクトルインテリジェント分析
ターゲットシナリオに合わせて、検出、追跡、セグメンテーション、異常認識、低照度強化、または熱ターゲット分析を開発します。
エッジデプロイと SDK
RK3588、Jetson、x86、または FPGA 支援プラットフォームを適応させ、インターフェイスと例を提供します。
プロトタイプとエンジニアリングの検証
統合されたプロトタイプ、テスト フィクスチャ、シナリオの検証、問題の解決、マイルストーンの承認を完了します。
サポートされているスペクトルとイメージング チェーン
モバイル デバイスでは、水平にスワイプして完全な表を表示します。
| 入力タイプ | 一般的な使用方法 | エンジニアリングの焦点 |
|---|---|---|
| RGB | テクスチャ、カラー、ディテール、および従来の視覚アルゴリズム | 解像度、低照度性能、ダイナミックレンジ、ISP、レンズ |
| NIR | 夜間照明、低照度認識、マテリアルコントラスト強化 | 照明波長、フィルタリング、反射率、目の安全性 |
| SWIR | 選択された材料の評価、曇りのイメージング、および工業検査 | コンポーネントの入手可能性、レンズ、コスト、およびデータの入手可能性 |
| MWIR / LWIR | 熱ターゲットイメージング、温度差解析、昼夜環境センシング | コアパフォーマンス、NUC、レンズ、温度ドリフト、および温度測定境界 |
マルチスペクトル融合システムのパイプライン
システム開発には通常、マルチチャネル収集、時間同期、幾何学的キャリブレーション、クロススペクトルレジストレーション、融合強化、ターゲット分析、およびエッジ出力が含まれます。各段階は、最終的なイメージングと下流のアルゴリズムの結果に影響を与えます。
- 01マルチチャンネル収集
- 02時刻同期
- 03幾何学的なキャリブレーション
- 04クロススペクトル画像位置合わせ
- 05融合強化
- 06ターゲット分析
- 07エッジ出力
プロジェクトの成果物
回路図、PCB またはインターフェイス情報、BOM の推奨事項、機械的および熱的制約、およびエンジニアリング プロトタイプ。
ドライバー、ファームウェア、取得および同期プログラム、ISP またはエンコード構成、およびデバイス診断ツール。
キャリブレーション、画像位置合わせ、融合、拡張、およびシナリオのアルゴリズム。モデルとパラメーターはプロジェクト バージョンによって管理されます。
SDK、API、サンプル プロジェクト、データ形式、展開スクリプト、およびサードパーティ システム統合手順。
校正記録、テストデータ、問題リスト、パフォーマンスレポート、受入記録、およびメンテナンスの推奨事項。
テストと検収
合格基準では、書面による技術契約で定義されているテスト方法と合格条件とともに、該当するデバイス、レンズ、距離、照度、温度、テスト データ、ソフトウェア バージョン、およびランタイム プラットフォームを特定する必要があります。
技術・納品範囲の境界
サーマル イメージングでは、自動的に放射温度測定が行われません。フレーム レート、アルゴリズム メトリクス、電力、環境評価、温度測定機能、および生産ステータスは、実際のデバイス、データ、ターゲット プラットフォームでの検証後に確認する必要があります。サードパーティのコンポーネント、ソフトウェア、ライセンス、データ、および顧客の機器は、実際の可用性と条件に従うものとします。
よくある質問
既存のカメラとハードウェア プラットフォームを維持できますか?
既存のセンサー、レンズ、出力形式、トリガー方法、ドライバーのサポート、およびコンピューティングのヘッドルームを評価する必要があります。インターフェース、時間同期、または視野の一致がプロジェクトの目標を満たしていない場合は、アダプター ボード、同期ユニット、または改訂されたカメラ モジュールが必要になる場合があります。
どの赤外線帯域がサポートされていますか?
プロジェクトには、NIR、SWIR、および中波または長波の熱赤外線が含まれる場合があります。デバイス、レンズ、校正方法、およびコストの範囲は、ターゲットの距離、環境条件、温度範囲、およびコンポーネントの入手可能性によって異なります。
プロジェクトは融合アルゴリズムのみをカバーできますか?
はい。プロジェクトは、使用可能なデュアルスペクトルまたはマルチスペクトル データ、キャリブレーション情報、およびターゲット プラットフォームの詳細を提供する必要があります。その後、データ評価、アルゴリズムのプロトタイプ、エンジニアリングの実装、プラットフォームの導入、検収を含む段階的に作業を進めることができます。
RK3588 または Jetson への展開に対応していますか?
プロジェクトでは、RK3588、Jetson、x86、または FPGA 支援プラットフォームを評価できます。実現可能性の検証では、展開範囲が確認される前に、オペレーターのサポート、数値精度の変換、メモリ帯域幅、ビデオ パイプライン、エンドツーエンドの遅延が検査されます。
マルチスペクトル融合システムの許容基準はどのように定義されるべきですか?
基準では、カメラ、レンズ、距離、照明、温度、ターゲット タイプ、テスト データ、ソフトウェア バージョン、ランタイム プラットフォームを定義し、同期、画像位置合わせ、フュージョン アーティファクト、レイテンシ、およびダウンストリーム タスク メトリクスを個別に指定する必要があります。
サーマルイメージングは温度測定と同等ですか?
いいえ。温度測定基準は、放射コア、校正手順、放射率設定、環境補償を備えた場合にのみ適切です。従来のサーマルイメージング プロジェクトでは、イメージングとターゲット分析の機能のみが評価されます。
相談
電話
WeChat
トップに戻る