Sentinel

O que é o Sentinel?

Sentinel é o software de teleoperação da Avea Robotics para controlo remoto de robots, captura de dados e implementação. Foi concebido para equipas de robótica que precisam de operar robots à distância, transmitindo sinais de controlo e dados de sensores com baixa latência.

A plataforma é posicionada como um sistema unificado para fluxos de trabalho de Physical AI. Segundo o site, suporta controlo em tempo real, visualização remota imersiva, feedback háptico e streaming de vídeo com múltiplas feeds, podendo ser integrada com o URDF de um robot e a API de controlo das articulações para implementação.

Principais Funcionalidades

• Controlo de robots em tempo real: Permite uma operação remota fluida com latência descrita como baixa até 10 milissegundos, o que é importante para teleoperação precisa.
• Vista Imersiva: Fornece perceção de profundidade para operadores remotos, ajudando-os a avaliar distâncias e a manipular robots à distância.
• Feedback háptico: Devolve sinais hápticos em tempo real para que os operadores sintam a interação com o ambiente durante a teleoperação.
• Streaming com múltiplas feeds: Transmite até 6 feeds de vídeo Full HD sem afetar a operação, o que suporta a monitorização a partir de vários ângulos de câmara.
• Suporte a plataformas robóticas: Indica suporte para robots standard de 6-DoF, braços industriais de 6-DoF, retargeting de braço completo de 7-DoF e robots humanoides.
• Recolha de dados e armazenamento local: Pode recolher estados das articulações do robot, feeds de câmara, point clouds, streams RGB e heatmaps, com vídeo e streams de dados encriptados e armazenados localmente.

Como Usar o Sentinel

Um fluxo de trabalho típico começa com uma chamada de demonstração ou avaliação, em que a equipa testa o Sentinel ao teleoperar robots remotamente no escritório da Avea. Depois disso, o cliente partilha o URDF do robot e a API de controlo das articulações para que o Sentinel possa ser integrado com a stack existente do robot.

Depois de ligado, a equipa executa o contentor Docker do Sentinel e começa a teleoperar o robot remotamente. A Avea também refere que forma a equipa do cliente e fornece suporte contínuo após a implementação.

Casos de Uso

• Recolha de dados para treino de Physical AI: Os operadores conduzem robots remotamente para gerar dados rotulados de movimento e de sensores para treino e melhoria de modelos.
• Implementação remota no mundo real: As equipas podem operar robots em diferentes ambientes sem estarem fisicamente presentes na máquina.
• Autonomia supervisionada: Operadores humanos monitorizam o comportamento autónomo e intervêm quando necessário para manter os sistemas sob controlo.
• Testes de integração de robots: As equipas de robótica podem validar o Sentinel em diferentes arquiteturas de robot antes de uma implementação mais ampla.
• Teleoperação de humanoides ou multi-DoF: Equipas que trabalham com controlo bimanual, de torso ou de locomoção podem usar a plataforma para configurações de robot mais complexas.

FAQ

Que hardware o Sentinel suporta?
O Sentinel suporta uma gama crescente de plataformas de hardware robótico e sensores. O site indica que a lista mais atualizada está disponível na documentação.

Que dados o Sentinel pode recolher?
Segundo o site, o Sentinel pode recolher estados das articulações do robot, feeds de câmara e point clouds. Também suporta streaming de câmaras RGB e heatmaps.

O Sentinel pode funcionar com robots personalizados?
Sim. O site indica que o Sentinel foi concebido para ser flexível e que pode ser analisado para arquiteturas de robot personalizadas e requisitos de integração.

Os dados são encriptados?
Sim. O site afirma que os streams de vídeo e dados do Sentinel são encriptados de ponta a ponta e que os dados são recolhidos e armazenados localmente.

Alternativas

• Configurações de teleoperação manual construídas com ferramentas personalizadas: Podem funcionar para equipas únicas ou protótipos, mas normalmente exigem mais integração e manutenção internas do que uma plataforma dedicada.
• Middleware e stacks de controlo robótico gerais: As ferramentas nesta categoria ajudam a ligar hardware e software robóticos, mas nem sempre são focadas em teleoperação remota, streaming de vídeo ou experiência do operador.
• Sistemas de gestão de robots com foco em autonomia: Priorizam a execução autónoma e a gestão de frotas em vez do controlo remoto e da intervenção human-in-the-loop.
• Ferramentas gerais de acesso remoto ou videoconferência: Podem oferecer visibilidade remota, mas não fornecem controlo específico para robots, gestão de estados das articulações ou fluxos de teleoperação.