Emergent Vision Technologies の 25GigE カメラが NVIDIA AI 医療機器を強化

25GigE カメラが NVIDIA AI 医療機器を強化

2022 月に開催された XNUMX GTC AI 開発者会議で、NVIDIA は、医療機器向けの Clara Holoscan SDK AI コンピューティング プラットフォームが、Emergent Vision Technologies の Bolt 25GigE カメラを使用して超高速フレーム レートを達成したことを発表しました。 NVIDIA によると、これらのテクノロジは、手術ガイダンスに新しいレベルのリアルタイムの認識と制御を提供します。

高速での低遅延、低ジッター

25GigE カメラ ボルト 手術室では、低遅延で信頼性の高い高速手術ビデオ ストリームが必要です。 超高速カメラは上記のすべてを提供し、手術ナビゲーション、内視鏡などの画像誘導介入、および医療用ロボットの AI アプリケーションを強化するのに役立ちます。Emergent の Bolt HB-9000-G 25GigE カメラ, を使用して、NVIDIA は Clara Holoscan SDK v4 用に 240 fps で 0.3K ビデオをキャプチャし、開発者が複数のセンサーからのデータを組み合わせて、外科的ガイダンスを提供できる AI アプリケーションを構築できるようにしました。

高速 25GigE SFP28 インターフェイスを介して、HB-9000-G は 290 x 4200 のフル解像度で最大 2160 fps のフレーム レートに達します。 HB-9000-G は、Gpixel の 9.07MP GMAX2509 CMOS イメージ センサーを備えていると同時に、NVIDIA の Clara Holoscan SDK に不可欠な低遅延および低ジッター機能も提供します。

比類のないエッジ AI パフォーマンス

高速 GigE Vision カメラ Emergent Vision Technologies から GPU サポートと統合できます。 GPUDirect テクノロジを使用して、ホスト メモリと CPU の相互作用を排除できます。 NVIDIA の GPUDirect を使用すると、ネットワーク アダプターとストレージ ドライバーが GPU メモリとの間で直接読み書きできるため、不要なメモリ コピーが排除され、CPU オーバーヘッドが減少し、レイテンシが短縮されます。 Emergent Vision Technologies の 10Gige、25GigE、および 100GigE ネットワーク インターフェイス カード (NIC) は、GPUDirect テクノロジをサポートしています。

高速 GigE Vision カメラによる GPU Direct 機能

Emergent Vision Technologies の高速 GigE Vision カメラは、GPU サポートと統合できます。 GPUDirect テクノロジを使用して、ホスト メモリと CPU の相互作用を排除できます。 NVIDIA の GPUDirect により、ネットワーク アダプターとストレージ ドライバーは、GPU メモリとの間で直接読み書きを行うことができます。

このアプリケーションでは、NVIDIA は ConnectX SmartNIC と NVIDIA Rivermax SDK を GPUDirect RDMA とともに活用し、CPU をバイパスして高速カメラ入力を可能にしました。 これにより、カメラから AI システムへのデータの高速イーサネット出力が可能になり、NVIDIA によると、エッジ AI に比類のないパフォーマンスがもたらされました。 同社は、Emergent カメラと Clara Holoscan を統合することでこの機能を実証し、その結果がそれを物語っていました。

従来の GStreamer および OpenGL ベースの内視鏡検査パイプラインは、220 p 1080 Hz ストリームで 60 ミリ秒のエンドツーエンドのレイテンシーを持っていますが、Clara Holoscan 高速パイプラインは、10K 4Hz ストリームでわずか 240 ミリ秒のエンドツーエンドのレイテンシーを提供しました 。 さらに、NVIDIA チームは、NVIDIA IGX Orin エッジ AI コンピューティング プラットフォームを活用することで、8 ミリ秒という低レイテンシを達成しました。 IGX Orin で 4 ミリ秒未満の 60K 50 Hz でデータをストリーミングする場合、15 の同時 AI ビデオ ストリームと 30 のモデルを同時実行できます。

詳細については、NVIDIA ブログを参照してください。

Clara Holoscan SDK の詳細を表示します。