La cámara 25GigE de Emergent Vision Technologies ayuda a potenciar los dispositivos médicos NVIDIA AI

En la conferencia de desarrolladores de IA GTC de 2022 en septiembre, NVIDIA anunció que su plataforma informática Clara Holoscan SDK AI para dispositivos médicos logró velocidades de cuadro ultrarrápidas utilizando Emergent Vision Technologies. Cámaras Bolt 25GigE. Según NVIDIA, las tecnologías proporcionarán nuevos niveles de conocimiento y control en tiempo real para la orientación quirúrgica.

Baja latencia, baja fluctuación a altas velocidades

Los quirófanos requieren transmisiones de video quirúrgico confiables de alta velocidad con baja latencia. Las cámaras de ultra alta velocidad ofrecen todo lo anterior, lo que ayuda a potenciar las aplicaciones de inteligencia artificial para la navegación quirúrgica, la intervención guiada por imágenes, como el endoscopio y los robots médicos. Uso de Emergentes Cámara Bolt HB-9000-G 25GigE, NVIDIA capturó video 4K a 240 fps para su Clara Holoscan SDK v0.3, lo que permitió a los desarrolladores combinar datos de varios sensores y crear aplicaciones de inteligencia artificial que pueden brindar orientación quirúrgica.

A través de su interfaz 25GigE SFP28 de alta velocidad, el HB-9000-G alcanza velocidades de cuadro de hasta 290 fps con una resolución completa de 4200 x 2160. El HB-9000-G cuenta con el sensor de imagen CMOS GMAX9.07 de 2509MP de Gpixel y al mismo tiempo ofrece las capacidades de baja latencia y baja fluctuación que son cruciales para el SDK Clara Holoscan de NVIDIA.

Rendimiento de IA perimetral inigualable

Cámaras GigE Vision de alta velocidad de Emergent Vision Technologies se puede integrar con soporte GPU. La tecnología GPUDirect está disponible para eliminar la memoria del host y la interacción de la CPU. GPUDirect de NVIDIA permite que los adaptadores de red y los controladores de almacenamiento lean y escriban directamente en/desde la memoria de la GPU, lo que elimina las copias de memoria innecesarias, reduce los gastos generales de la CPU y reduce la latencia. Las tarjetas de interfaz de red (NIC) de 10 Gige, 25 GigE y 100 GigE de Emergent Vision Technologies son compatibles con la tecnología GPUDirect.

En esta aplicación, NVIDIA aprovechó ConnectX SmartNIC y NVIDIA Rivermax SDK con GPUDirect RDMA que omite la CPU para habilitar la entrada de cámara de alta velocidad. Hacerlo permitió la salida de datos de Ethernet de alta velocidad de las cámaras al sistema de IA, lo que resultó en un rendimiento inigualable para la IA de borde, según NVIDIA. La empresa demostró esta capacidad integrando cámaras Emergent con Clara Holoscan, y los resultados hablaron por sí solos.

Las canalizaciones de endoscopia tradicionales basadas en GStreamer y OpenGL tienen una latencia de extremo a extremo de 220 ms en una transmisión de 1080 p 60 Hz, pero las canalizaciones de alta velocidad de Clara Holoscan proporcionaron una latencia de extremo a extremo de solo 10 ms en una transmisión de 4K. Corriente de 240 Hz. Además, el equipo de NVIDIA logró una latencia tan baja como 8 ms al aprovechar la plataforma informática NVIDIA IGX Orin edge AI. Al transmitir datos a 4K 60 Hz a menos de 50 ms en el IGX Orin, es posible ejecutar 15 transmisiones de video AI simultáneas y 30 modelos simultáneos.

Consulte el blog de NVIDIA para obtener información adicional.

Vea más información sobre el SDK de Clara Holoscan.