Sentinel

Sentinelとは？

Sentinelは、Avea Roboticsの遠隔ロボット制御、データ取得、デプロイメント向けテレオペレーションソフトウェアです。低遅延で制御信号とセンサーデータを配信しながら、遠隔からロボットを操作する必要があるロボティクスチーム向けに設計されています。

このプラットフォームは、Physical AIワークフローのための統合システムとして位置付けられています。サイトによると、リアルタイム制御、没入型の遠隔視聴、ハプティックフィードバック、マルチフィード動画配信をサポートし、デプロイメントに向けてロボットのURDFや関節制御APIと連携できます。

リアルタイムロボット制御: 低10ミリ秒とされるレイテンシーで滑らかな遠隔操作を可能にし、精密なテレオペレーションに重要です。
没入型ビュー: 遠隔オペレーターに奥行き知覚を提供し、距離の判断や遠隔からのロボット操作を支援します。
ハプティックフィードバック: リアルタイムの触覚信号を返し、テレオペレーション中に環境との相互作用を感じ取れるようにします。
マルチフィード配信: 操作に影響を与えることなく最大6系統のフルHD動画フィードを配信し、複数のカメラアングルからの監視を支援します。
ロボットプラットフォーム対応: 6-DoF標準ロボット、6-DoF産業用アーム、7-DoFフルアームリターゲティング、ヒューマノイドロボットへの対応を記載しています。
データ収集とローカル保存: ロボットの関節状態、カメラフィード、点群、RGBストリーム、ヒートマップを収集でき、動画とデータストリームは暗号化され、ローカルに保存されます。

一般的なワークフローは、デモまたは評価用の通話から始まります。そこでチームはAveaのオフィスでロボットを遠隔テレオペレーションしながらSentinelをテストします。その後、顧客がロボットのURDFと関節制御APIを共有し、Sentinelを既存のロボットスタックに統合します。

接続後、チームはSentinelのDockerコンテナを実行し、ロボットの遠隔テレオペレーションを開始します。Aveaはまた、顧客チーム向けのトレーニングと、導入後の継続サポートも提供すると述べています。

Physical AI学習のためのデータ収集: オペレーターが遠隔でロボットを操作し、モデル学習と改善のためのラベル付き動作データとセンサーデータを生成します。
遠隔での実環境デプロイメント: チームは機械のそばに物理的にいなくても、さまざまな環境でロボットを操作できます。
監督付き自律制御: 人間のオペレーターが自律動作を監視し、必要に応じて介入してシステムを制御下に保ちます。
ロボット統合テスト: ロボティクスチームは、広範な展開前にさまざまなロボットアーキテクチャに対してSentinelを検証できます。
ヒューマノイドまたは多自由度のテレオペレーション: 両腕、胴体、移動制御に取り組むチームは、より複雑なロボット構成にこのプラットフォームを利用できます。

Sentinelはどのハードウェアをサポートしていますか？
Sentinelは、対応するロボットハードウェアプラットフォームとセンサーを拡大中です。サイトでは、最新の一覧はドキュメントで確認できるとしています。

Sentinelはどのようなデータを収集できますか？
サイトによると、Sentinelはロボットの関節状態、カメラフィード、点群を収集できます。また、RGBカメラとヒートマップの配信もサポートしています。

Sentinelはカスタムロボットで動作しますか？
はい。サイトでは、Sentinelは柔軟性を重視して設計されており、カスタムロボットアーキテクチャや統合要件について相談できるとしています。

データは暗号化されますか？
はい。サイトでは、Sentinelの動画とデータストリームはエンドツーエンドで暗号化され、データはローカルに収集・保存されるとしています。

カスタムツールで構築した手動テレオペレーション環境: 単一チームや試作では使えますが、専用プラットフォームよりも社内統合と保守が多く必要になることが一般的です。
汎用ロボティクスミドルウェアと制御スタック: このカテゴリのツールはロボットのハードウェアとソフトウェアの接続を助けますが、遠隔テレオペレーション、動画配信、オペレーター体験に必ずしも重点を置いていません。
自律性優先のロボット管理システム: これらは、人間参加型の遠隔制御や介入よりも、自律実行とフリート管理を優先します。
汎用のリモートアクセスやビデオ会議ツール: 遠隔での可視化は提供できても、ロボット固有の制御、関節状態の取り扱い、テレオペレーションのワークフローは提供しません。