Rokoko

Что такое Rokoko?

Rokoko предоставляет студийные инструменты motion capture для создания анимации тела, пальцев и лица. Линейка продуктов включает аппаратные средства motion capture для полного тела и отслеживания рук, а также инструменты для захвата лица, поддерживающие рабочие процессы iOS и Android.

Основная цель системы Rokoko — помочь 3D-цифровым создателям захватывать выступления, а затем редактировать, ретаргетить, экспортировать или стримить данные движения в распространённые 3D- и real-time пайплайны.

Ключевые возможности

• Беспроводной motion capture для полного тела (Smartsuit Pro II): Беспроводной костюм mocap для захвата движения полного тела.
• Отслеживание движения пальцев (Smartgloves II / Smartgloves): Перчатки mocap для детального захвата движений пальцев.
• Захват лица для мобильных рабочих процессов (Face Capture): Инструменты высококачественного захвата лица для рабочих процессов iOS и Android.
• Точный motion capture без дрейфа (Coil Pro): Coil Pro обеспечивает «точность motion capture без дрейфа» с использованием EMF-поля.
• Аккаунт Rokoko Studio для записей: Захваченные тейки автоматически сохраняются в аккаунте Rokoko Studio.
• Инструменты редактирования и ретаргетинга: Поддержка исправления footlocks, сглаживания движений и ретаргетинга на кастомного персонажа.
• Опции экспорта и стриминга в реальном времени: Настройки экспорта включают частоту кадров и тип файла (FBX, BVH, CSV), а также опции скелета (например, Newton, HIK, UE5). Для real-time рабочих процессов возможен стрим в 3D-инструменты через плагины.

Как использовать Rokoko

1. Настройте оборудование: Наденьте совместимое(ые) устройство(я) (например, Smartsuit и/или Smartgloves) и подключите оборудование к питанию и Wi-Fi.
2. Захватывайте и управляйте тейками: Записывайте выступления, и тейки автоматически сохранятся в вашем аккаунте Rokoko Studio.
3. Редактируйте и подготавливайте движение: Используйте инструменты Rokoko Studio для исправления footlocks, сглаживания движения и ретаргетинга на вашего персонажа.
4. Экспортируйте или стримьте в пайплайн: Выберите настройки вывода, такие как частота кадров, тип файла (FBX/BVH/CSV) и маппинг скелета (например, Newton/HIK/UE5). Для real-time рабочих процессов включите стрим через доступные плагины в ваш 3D-инструмент.

Применение

• Инди-анимационная продукция: Захватывайте движение тела и пальцев для ускорения анимационных рабочих процессов, затем ретаргетьте на кастомного персонажа для финальных сцен.
• Полный motion capture выступлений для анимации персонажей: Комбинируйте костюм для полного тела с перчатками для пальцев и инструментами захвата лица для синхронизированной анимации тела и лица.
• Мобильный захват лица для VFX или real-time аватаров: Используйте Face Capture в рабочих процессах iOS/Android и передавайте выступление лица в downstream-инструменты.
• Real-time пайплайны Unreal Engine: Используйте стрим и плагины для прямой передачи данных motion capture в проекты Unreal Engine.
• Настройка без камер для обучения и исследований: Используйте описанный workflow «настройка за минуты» для захвата без камер, подходящий для образовательных или исследовательских сессий с повторяемыми данными движения.

FAQ

Какие данные motion capture может захватывать Rokoko?

Инструменты Rokoko предназначены для захвата анимации тела, пальцев и лица (в зависимости от используемого(ых) устройства(й)).

Где хранятся записанные тейки?

Захваченные тейки автоматически сохраняются в вашем аккаунте Rokoko Studio.

В какие форматы файлов можно экспортировать?

Экспорт Rokoko включает типы файлов, такие как FBX, BVH и CSV, с настраиваемой частотой кадров и опциями скелета.

Можно ли стримить данные Rokoko в реальном времени?

Да. На сайте указано, что real-time рабочие процессы могут стримить напрямую в ваш 3D-инструмент с помощью плагинов Rokoko Studio.

С каким ПО интегрируется Rokoko?

Rokoko работает с Blender, Unreal Engine, Maya и другими, и перечислены доступные плагины для real-time рабочих процессов, включая Unreal, Unity, Blender, Maya, iClone и др.

Альтернативы

• Другие экосистемы оборудования motion capture (тело/руки/лицо): Альтернативные решения mocap предлагают похожие рабочие процессы от захвата до анимации, но могут использовать другие типы сенсоров и разные программные пайплайны.
• Системы motion capture на основе маркеров: Эти альтернативы обычно полагаются на внешние камеры и маркеры, что меняет время настройки и тип рабочего процесса захвата по сравнению с быстрой настройкой Rokoko.
• Плагины и инструменты рабочих процессов realtime mocap от сторонних разработчиков: Если данные захвата уже получены в другом месте, можно рассмотреть инструменты, ориентированные на ретаргетинг, экспорт и стриминг в реальном времени, без предоставления аппаратных устройств.
• Мобильные приложения для захвата лицевой анимации: Для лицевой анимации специально существуют мобильные инструменты; они отличаются интеграцией с тем же пайплайном mocap для тела/пальцев и опциями экспорта/ретаргетинга.