Triton Smartカメラは、ISP（イメージシグナルプロセッシング）を2つ搭載しています。一つはイメージセンサー内のISP、もう一つは通常の画像処理を行うカメラ本体のFPGA上のISPです。

IMX501センサーが取得した高ダイナミックレンジかつ低ノイズのRGB画像は、センサー内ISPとカメラFPGA上のISPそれぞれに送られ、個別に処理されます。AI用ISPは、受け取った画像をAIエンジンに適した入力テンソル形式に前処理し、推論結果を出力テンソルとして生成します。同時に、同じ画像がFPGA上のISPにも送られ、こちらは標準的なマシンビジョンカメラと同様の画像処理を行います。最終的に、AIによる入出力テンソルはGigE Visionのチャンクデータとして、FPGAで処理された画像データに埋め込まれた上でホストPCへ送信されます。

カメラ上でAI推論を直接実行することで、Triton SmartはAI処理をホストPCに依存しない、真のエッジAI処理を実現します。この独自のハードウェアアーキテクチャにより、ビジョンシステム全体の設置スペースを削減すると同時に、ローカルPCのリソースを他の画像処理やアプリケーション処理に活用できます。