Stage en Machine Learning et Vision embarquée sur drones

Au cours des deux dernières années nous avons collecté de nombreuses données de télémétrie et de retour vidéo. L’environnement urbain dans lequel évoluent les drones est complexe et il est intéressant de pouvoir identifier des structures remarquables telles que les fenêtres ou les balcons pour améliorer le déplacement du drone et l’application de produit.

En relation directe avec le responsable logiciel et en collaboration avec le reste de l’équipe de R&D, vous devrez, dans le cadre de ce stage effectuer les tâches suivantes :

1. Analyse des données
- Analyse globale de toutes les données collectées : odométrie, GPS, sonars, lidars, et vision stéréographique ;
- Sélection d’algorithmes d’IA adaptés pour la vision ;
- Essais des algorithmes sur les données vidéo existantes et analyse des résultats.

2. Segmentation vidéo
- Annotation de jeux de données.
- Extraction de formes intéressantes (fenêtres, débord de toit, volet roulant, etc.…).
- Optimisation du code pour des performances en temps réel sur un ordinateur de bord de type Jetson.
- Intégration dans la solution logicielle existante.

3. Stratégies de fusion de données
- Réalisation de vols d’essais avec des capteurs complémentaires ;
- Comparaison des informations visuelles avec les retours de sonars et lidars ;
- Proposition d’une logique de fusion de données et essais.