UStackUStack
Sentinel icon

Sentinel

Sentinel de Avea Robotics es software de teleoperación remota para controlar robots, capturar datos de sensores y apoyar despliegues con baja latencia.

Sentinel

¿Qué es Sentinel?

Sentinel es el software de teleoperación de Avea Robotics para control remoto de robots, captura de datos y despliegue. Está diseñado para equipos de robótica que necesitan operar robots a distancia mientras transmiten señales de control y datos de sensores con baja latencia.

La plataforma se posiciona como un sistema unificado para flujos de trabajo de Physical AI. Según el sitio, admite control en tiempo real, visualización remota inmersiva, retroalimentación háptica y transmisión de video de múltiples fuentes, y puede integrarse con el URDF y la API de control articular de un robot para su despliegue.

Características clave

  • Control de robots en tiempo real: Permite una operación remota fluida con una latencia descrita de tan solo 10 milisegundos, lo que es importante para una teleoperación precisa.
  • Vista inmersiva: Proporciona percepción de profundidad para los operadores remotos, ayudándoles a estimar distancias y manipular robots a distancia.
  • Retroalimentación háptica: Devuelve señales hápticas en tiempo real para que los operadores puedan percibir la interacción con el entorno durante la teleoperación.
  • Transmisión de múltiples fuentes: Transmite hasta 6 flujos de video Full HD sin afectar la operación, lo que permite la supervisión desde varios ángulos de cámara.
  • Compatibilidad con plataformas robóticas: Indica soporte para robots estándar de 6 DoF, brazos industriales de 6 DoF, retargeting de brazo completo de 7 DoF y robots humanoides.
  • Recopilación de datos y almacenamiento local: Puede recopilar estados articulares del robot, flujos de cámara, nubes de puntos, flujos RGB y mapas de calor, con video y flujos de datos cifrados y almacenados localmente.

Cómo usar Sentinel

Un flujo de trabajo típico comienza con una demo o llamada de evaluación, donde el equipo prueba Sentinel teleoperando robots de forma remota en la oficina de Avea. Después, el cliente comparte el URDF del robot y la API de control articular para que Sentinel pueda integrarse con la pila existente del robot.

Una vez conectado, el equipo ejecuta el contenedor Docker de Sentinel y comienza a teleoperar el robot de forma remota. Avea también indica que capacita al equipo del cliente y brinda soporte continuo después del despliegue.

Casos de uso

  • Recopilación de datos para entrenamiento de Physical AI: Los operadores conducen robots de forma remota para generar datos etiquetados de movimiento y sensores para el entrenamiento y la mejora de modelos.
  • Despliegue remoto en el mundo real: Los equipos pueden operar robots en distintos entornos sin estar físicamente presentes en la máquina.
  • Autonomía supervisada: Los operadores humanos supervisan el comportamiento autónomo e intervienen cuando es necesario para mantener los sistemas bajo control.
  • Pruebas de integración de robots: Los equipos de robótica pueden validar Sentinel frente a distintas arquitecturas robóticas antes de un despliegue más amplio.
  • Teleoperación de humanoides o multi-DoF: Los equipos que trabajan con control bimanual, de torso o de locomoción pueden usar la plataforma para configuraciones robóticas más complejas.

Preguntas frecuentes

¿Qué hardware admite Sentinel?
Sentinel admite una gama creciente de plataformas de hardware robótico y sensores. El sitio indica que la lista más actualizada está disponible en la documentación.

¿Qué datos puede recopilar Sentinel?
Según el sitio, Sentinel puede recopilar estados articulares del robot, flujos de cámara y nubes de puntos. También admite la transmisión de cámaras RGB y mapas de calor.

¿Puede Sentinel funcionar con robots personalizados?
Sí. El sitio indica que Sentinel está diseñado para ser flexible y que se puede evaluar para arquitecturas robóticas e ինտегraciones personalizadas.

¿Los datos están cifrados?
Sí. El sitio afirma que los flujos de video y datos de Sentinel están cifrados de extremo a extremo y que los datos se recopilan y almacenan localmente.

Alternativas

  • Configuraciones de teleoperación manual basadas en herramientas personalizadas: Pueden funcionar para equipos únicos o prototipos, pero normalmente requieren más integración y mantenimiento internos que una plataforma dedicada.
  • Middleware de robótica general y pilas de control: Las herramientas de esta categoría ayudan a conectar el hardware y el software del robot, pero no siempre están enfocadas en teleoperación remota, transmisión de video o experiencia del operador.
  • Sistemas de gestión de robots centrados en autonomía: Priorizan la ejecución autónoma y la gestión de flotas en lugar del control remoto y la intervención humana en el circuito.
  • Herramientas generales de acceso remoto o videoconferencia: Pueden ofrecer visibilidad remota, pero no proporcionan control específico para robots, manejo de estados articulares ni flujos de trabajo de teleoperación.
Sentinel | UStack