Sentinel

Cos'è Sentinel?

Sentinel è il software di teleoperazione di Avea Robotics per il controllo remoto dei robot, l'acquisizione dei dati e il deployment. È progettato per team di robotica che devono operare i robot a distanza, trasmettendo segnali di controllo e dati dei sensori con bassa latenza.

La piattaforma è posizionata come un sistema unificato per i workflow di Physical AI. Secondo il sito, supporta il controllo in tempo reale, la visualizzazione remota immersiva, il feedback aptico e lo streaming video multi-feed, e può essere integrata con la URDF del robot e con la sua API di controllo dei giunti per il deployment.

Funzionalità principali

• Controllo robot in tempo reale: Consente un’operatività remota fluida con una latenza dichiarata fino a 10 millisecondi, importante per una teleoperazione precisa.
• Visualizzazione immersiva: Offre percezione della profondità agli operatori remoti, aiutandoli a valutare le distanze e a manipolare i robot da lontano.
• Feedback aptico: Restituisce segnali aptici in tempo reale, così gli operatori possono percepire l’interazione con l’ambiente durante la teleoperazione.
• Streaming multi-feed: Trasmette fino a 6 feed video full HD senza influire sulle operazioni, supportando il monitoraggio da più angolazioni.
• Supporto alle piattaforme robotiche: Indica supporto per robot standard a 6 DoF, bracci industriali a 6 DoF, full-arm retargeting a 7 DoF e robot umanoidi.
• Raccolta dati e archiviazione locale: Può raccogliere stati dei giunti del robot, feed delle camere, point cloud, stream RGB e heatmap, con flussi video e dati cifrati e archiviati localmente.

Come usare Sentinel

Un flusso di lavoro tipico inizia con una demo o una call di valutazione, in cui il team testa Sentinel teleoperando da remoto i robot nell’ufficio di Avea. Dopo di ciò, il cliente condivide la URDF del robot e l’API di controllo dei giunti, così Sentinel può essere integrato con lo stack robotico esistente.

Una volta connesso, il team esegue il container Docker di Sentinel e inizia a teleoperare il robot da remoto. Avea afferma inoltre di formare il team del cliente e di fornire supporto continuo dopo il deployment.

Casi d'uso

• Raccolta dati per l’addestramento di Physical AI: Gli operatori guidano i robot da remoto per generare dati etichettati di movimento e sensori per l’addestramento e il miglioramento dei modelli.
• Deployment remoto nel mondo reale: I team possono operare robot in ambienti diversi senza essere fisicamente presenti alla macchina.
• Autonomia supervisionata: Gli operatori umani monitorano il comportamento autonomo e intervengono quando necessario per mantenere i sistemi sotto controllo.
• Test di integrazione dei robot: I team di robotica possono validare Sentinel su diverse architetture robotiche prima di un rilascio più ampio.
• Teleoperazione umanoide o multi-DoF: I team che lavorano con controllo bimanuale, del torso o della locomozione possono usare la piattaforma per configurazioni robotiche più complesse.

FAQ

Quale hardware supporta Sentinel? Sentinel supporta una gamma in crescita di piattaforme hardware robotiche e sensori. Il sito afferma che l’elenco più aggiornato è disponibile nella documentazione.

Quali dati può raccogliere Sentinel? Secondo il sito, Sentinel può raccogliere stati dei giunti del robot, feed delle camere e point cloud. Supporta anche lo streaming di camere RGB e heatmap.

Sentinel può funzionare con robot personalizzati? Sì. Il sito afferma che Sentinel è progettato per essere flessibile e che si può discutere di architetture robotiche personalizzate e requisiti di integrazione.

I dati sono cifrati? Sì. Il sito indica che i flussi video e dati di Sentinel sono cifrati end-to-end e che i dati vengono raccolti e archiviati localmente.

Alternative

• Setup di teleoperazione manuale realizzati con tool personalizzati: Possono funzionare per team singoli o prototipi, ma in genere richiedono più integrazione e manutenzione interna rispetto a una piattaforma dedicata.
• Middleware e stack di controllo robotico generici: Gli strumenti di questa categoria aiutano a collegare hardware e software del robot, ma non sono sempre focalizzati sulla teleoperazione remota, sullo streaming video o sull’esperienza dell’operatore.
• Sistemi di gestione robot orientati all’autonomia: Danno priorità all’esecuzione autonoma e alla gestione della flotta piuttosto che al controllo remoto human-in-the-loop e all’intervento umano.
• Strumenti generici di accesso remoto o videoconferenza: Possono offrire visibilità remota, ma non forniscono controllo specifico per robot, gestione degli stati dei giunti o flussi di teleoperazione.