La carte FPGA de Microchip envoie en temps réel des données de capteurs à l’IA Nvidia
Microchip Technology a développé une carte FPGA capable de collecter et de traiter des données de capteurs exploitables directement pour l’intelligence artificielle.
Le PolarFire FPGA Ethernet Sensor Bridge collecte des données à partir d’une série de sources, notamment des caméras, et les envoie au logiciel Holoscan de Nvidia fonctionnant sur des GPU Jetson en périphérie.
Les FPGA PolarFire permettent la prise en charge de plusieurs protocoles, et cette première carte fonctionne avec des capteurs de caméra basés sur MIPI CSI-2 et la couche physique MIPI D-PHY. Les versions futures prendront en charge les capteurs avec des interfaces telles que SLVS-EC 2.0, 12G SDI, CoaXPress 2.0 et JESD204B.
Nvidia Holoscan aide à rationaliser le développement et le déploiement d’applications d’IA et de calcul à haute performance (HPC) pour obtenir des informations en temps réel. Le système réunit en une seule plateforme les équipements matériels et logiciels nécessaires pour le streaming de capteurs à faible latence et la connectivité réseau avec des bibliothèques optimisées pour le traitement des données, des modèles d’IA pour démarrer le développement du pipeline d’inférence de l’IA, des applications modèles pour faciliter le prototypage rapide et des microservices de base pour exécuter le streaming, l’imagerie et d’autres applications.
La carte pont PolarFire convertit les données des capteurs à large bande passante en un flux Ethernet pour les plateformes Nvidia IGX et Jetson exécutant le logiciel Holoscan pour l’IA de pointe et la robotique, ainsi que pour permettre l’inférence AI/ML dans les applications médicales, industrielles et automobiles.
Les détails sont sur le PolarFire FPGA Ethernet Sensor Bridge page web.
capteurs de caméra basés sur MIPI CSI-2
Si vous avez apprécié cet article, vous aimerez les suivants : ne les manquez pas en vous abonnant à :
