Sentinel

Qu’est-ce que Sentinel ?

Sentinel est le logiciel de téléopération d’Avea Robotics pour le contrôle à distance de robots, la capture de données et les déploiements. Il est conçu pour les équipes de robotique qui doivent piloter des robots à distance tout en diffusant les signaux de commande et les données capteurs avec une faible latence.

La plateforme se positionne comme un système unifié pour les workflows d’IA physique. Selon le site, elle prend en charge le contrôle en temps réel, la visualisation immersive à distance, le retour haptique et le streaming vidéo multi-flux, et peut être intégrée au URDF d’un robot ainsi qu’à son API de contrôle des articulations pour le déploiement.

Fonctionnalités clés

• Contrôle robotique en temps réel : Permet un pilotage à distance fluide avec une latence annoncée aussi basse que 10 millisecondes, ce qui est important pour une téléopération précise.
• Vue immersive : Offre une perception de la profondeur aux opérateurs à distance, les aidant à évaluer les distances et à manipuler les robots à distance.
• Retour haptique : Renvoie des signaux haptiques en temps réel afin que les opérateurs puissent ressentir l’interaction avec l’environnement pendant la téléopération.
• Streaming multi-flux : Diffuse jusqu’à 6 flux vidéo Full HD sans affecter le fonctionnement, ce qui facilite la surveillance depuis plusieurs angles de caméra.
• Prise en charge de plateformes robotiques : Indique la prise en charge de robots standard 6-DoF, de bras industriels 6-DoF, du retargeting bras entier 7-DoF et de robots humanoïdes.
• Collecte de données et stockage local : Peut collecter les états des articulations du robot, les flux caméra, les nuages de points, les flux RGB et les cartes thermiques, avec des flux vidéo et de données chiffrés et stockés localement.

Comment utiliser Sentinel

Un workflow typique commence par un appel de démonstration ou d’évaluation, au cours duquel l’équipe teste Sentinel en téléopérant des robots à distance dans les locaux d’Avea. Ensuite, le client partage l’URDF du robot et son API de contrôle des articulations afin que Sentinel puisse être intégré à la pile robotique existante.

Une fois connecté, l’équipe lance le conteneur Docker de Sentinel et commence à téléopérer le robot à distance. Avea indique également former l’équipe du client et assurer un support continu après le déploiement.

Cas d’usage

• Collecte de données pour l’entraînement de Physical AI : Les opérateurs pilotent à distance des robots afin de générer des données de mouvement et de capteurs étiquetées pour l’entraînement et l’amélioration des modèles.
• Déploiement réel à distance : Les équipes peuvent faire fonctionner des robots dans différents environnements sans être physiquement présentes sur la machine.
• Autonomie supervisée : Des opérateurs humains surveillent le comportement autonome et interviennent si nécessaire pour garder les systèmes sous contrôle.
• Tests d’intégration robotique : Les équipes de robotique peuvent valider Sentinel sur différentes architectures de robots avant un déploiement plus large.
• Téléopération humanoïde ou multi-DoF : Les équipes travaillant sur le contrôle bimanuelle, du torse ou de la locomotion peuvent utiliser la plateforme pour des configurations robotiques plus complexes.

FAQ

Quel matériel Sentinel prend-il en charge ? Sentinel prend en charge un éventail croissant de plateformes matérielles robotiques et de capteurs. Le site indique que la liste la plus à jour est disponible dans la documentation.

Quelles données Sentinel peut-il collecter ? Selon le site, Sentinel peut collecter les états des articulations du robot, les flux caméra et les nuages de points. Il prend également en charge le streaming de caméras RGB et de cartes thermiques.

Sentinel peut-il fonctionner avec des robots personnalisés ? Oui. Le site indique que Sentinel est conçu pour être flexible et peut être étudié pour des architectures robotiques personnalisées et des besoins d’intégration spécifiques.

Les données sont-elles chiffrées ? Oui. Le site précise que les flux vidéo et de données de Sentinel sont chiffrés de bout en bout, et que les données sont collectées et stockées localement.

Alternatives

• Configurations de téléopération manuelle construites avec des outils sur mesure : Elles peuvent convenir à des équipes réduites ou à des prototypes, mais elles nécessitent généralement davantage d’intégration et de maintenance en interne qu’une plateforme dédiée.
• Middleware robotique généraliste et piles de contrôle : Les outils de cette catégorie aident à connecter le matériel et les logiciels robotiques, mais ils ne sont pas toujours centrés sur la téléopération à distance, le streaming vidéo ou l’expérience opérateur.
• Systèmes de gestion de robots orientés autonomie d’abord : Ils privilégient l’exécution autonome et la gestion de flotte plutôt que le contrôle à distance human-in-the-loop et l’intervention humaine.
• Outils généraux d’accès à distance ou de visioconférence : Ils peuvent offrir une visibilité à distance, mais ne proposent pas de contrôle spécifique aux robots, de gestion des états articulaires ni de workflows de téléopération.