3Dカメラが深度データとスペクトルデータをマージ
コンパクトなハイパースペクトルストライププロジェクター（HSP）は、HSP、モノクロセンサーアレイ、および高度なプログラミングを組み合わせて、オブジェクトの形状と構成のより完全な画像をユーザーに提供します。画像から4次元情報（3つの空間情報と1つのスペクトル情報）をリアルタイムでキャプチャします。
HSPは、スマートフォンのFace IDシステムやゲームシステムのボディトラッカーなどのポータブル3Dイメージング技術からヒントを得て、キャプチャされたすべてのピクセルから幅広いスペクトルデータを取得する方法を追加します。この圧縮されたデータは、数百色を組み込むことができるスペクトル情報を備えた3Dマップに再構築され、オブジェクトの形状だけでなくその材料組成も明らかにするために使用されます。
通常のRGB（赤、緑、青）カメラは、3つのスペクトルチャネルを提供します。ただし、ハイパースペクトルカメラは多くのチャネルでスペクトルを提供します。 HSPは深度とハイパースペクトルの測定値を同時にエンコードし、同様のシステムで通常使用される高価なハイパースペクトルカメラの代わりにモノクロカメラを使用できるようにします。
HSPは、既製のデジタルマイクロミラーデバイス（DMD）を使用して、カラフルなバーコードのようなパターンのストライプを表面に投影します。回折格子を介して白色光の投影を送信すると、重なり合うパターンが色に分離されます。各色はモノクロカメラに反射され、そのピクセルに数値のグレーレベルが割り当てられます。各ピクセルは、反射するカラーストライプごとに1つずつ、複数のレベルを持つことができます。これらは、オブジェクトのその部分の全体的なスペクトル値に再結合されます。
微調整されたスペクトルは、可視光を超えて到達する可能性があります。多重化されたファインバンドスペクトルとしてセンサーに反射して戻るものを使用して、材料の化学組成を特定できます。同時に、パターンの歪みが3D点群に再構築されます。これは基本的にターゲットの画像ですが、プレーンなスナップショットが提供できるよりもはるかに多くのデータが含まれています。
センサー