RadianceKit

Что такое RadianceKit?

RadianceKit — это нативное Mac‑приложение для 3D Gaussian Splatting. Оно позволяет импортировать фото или видео, локально восстанавливать сцену на Apple Silicon с использованием вычислений GPU через Metal, а затем просматривать, редактировать и экспортировать результат в одном рабочем процессе.

Приложение позиционируется как полноценная альтернатива инструментам, зависящим от облачной обработки, Python или отдельных шагов выравнивания и экспорта. Оно создано для тех, кто хочет создавать фотореалистичные 3D‑сцены на Mac, сохраняя данные на своём устройстве.

Ключевые возможности

• Нативное обучение на GPU Apple Silicon — RadianceKit запускает обучение Gaussian Splatting на Mac с M1, M2, M3 и M4 с использованием Metal, поэтому обработка выполняется локально, а не в облаке.
• Рабочий процесс в одном приложении — импортируйте медиа, выравнивайте позиции камер, обучайте модель, проверяйте реконструкцию и экспортируйте всё из одного приложения без настройки через командную строку.
• Режимы Simple и Expert — Simple Mode даёт пошаговый сценарий для быстрого старта, а Expert Mode добавляет навигатор проекта, интерактивный 3D‑вид, графики потерь в реальном времени и детальные элементы управления обучением и экспортом.
• Интерактивный редактор Gaussian — пользователи могут выделять и удалять области прямо в 3D‑виде с помощью кисти, что помогает убирать нежелательные артефакты или части реконструкции.
• Несколько вариантов экспорта — сцены можно экспортировать в PLY, Compressed PLY, SPZ, glTF, .splat или SOG, а также создавать орбитальные видео или автономные веб‑просмотрщики.
• Локальная обработка и конфиденциальность — приложение обрабатывает сцены на Mac пользователя и не требует загрузки в облако для обучения.

Как использовать RadianceKit

Обычно рабочий процесс начинается с запуска приложения и импорта фотографий или видео. Затем RadianceKit выравнивает камеры, обучает сцену Gaussian Splatting на GPU Apple Silicon Mac и позволяет пользователю просматривать реконструкцию в реальном времени.

После этого можно переключаться между пошаговым режимом для простых задач и экспертной компоновкой для настройки параметров и подробного анализа. Когда сцена готова, её можно очистить с помощью редактора и экспортировать в формат, подходящий для публикации, архивации или просмотра в браузере.

Сценарии использования

• Реконструкция сцены в стиле фотограмметрии на Mac — преобразуйте обычные фото или видео в 3D‑сцену для исследования, не покидая Mac.
• Локальные рабочие процессы 3D‑съёмки — выполняйте реконструкцию на устройстве, когда не нужна загрузка в облако или важно хранить исходные медиа локально.
• Очистка реконструкций — удаляйте «плавающие» артефакты, лишние объекты или другие нежелательные области с помощью встроенного кистевого редактора.
• Технические эксперименты и настройка параметров — используйте Expert Mode для просмотра кривых обучения и изменения настроек для более управляемой реконструкции.
• Публикация интерактивных результатов — экспортируйте сцену как веб‑просмотрщик или орбитальное видео для демонстрации и проверки без дополнительного ПО у зрителя.

FAQ

• Требуется ли RadianceKit облачная обработка? Нет. Обучение выполняется локально на Mac с использованием вычислений GPU Apple Silicon через Metal.
• Нужны ли Python или инструменты командной строки? Нет. Приложение представлено как полный рабочий процесс с импортом, обучением, редактированием и экспортом внутри одного Mac‑приложения.
• Какие Mac поддерживаются? В источнике указано, что RadianceKit требует Mac с Apple Silicon (M1 или новее) и macOS 26 Tahoe или новее, а для больших сцен рекомендуется 16 ГБ ОЗУ.
• Какие типы файлов можно импортировать? Можно импортировать видео .mp4, .mov, .m4v и .avi, а также распространённые фотоформаты, включая .jpg/.jpeg, .png, .heic, .tiff/.tif и .bmp. Также поддерживаются уже существующие splats, такие как .ply, .spz и .splat, а также bundles сцены и камер.
• Поддерживается ли 360‑видео напрямую? Пока нет. На странице указано, что Insta360 .insv и сшитое 360 equirectangular‑видео на данный момент напрямую не поддерживаются.

Альтернативы

• Облачные NeRF- или фотограмметрические сервисы — они могут выполнять реконструкцию без локальных вычислений на GPU, но требуют загрузки медиа и использования онлайн‑процесса обработки.
• Настольные приложения для фотограмметрии — традиционные инструменты фотограмметрии ориентированы на реконструкцию по изображениям и могут использовать другие процессы выравнивания и экспорта, чем Gaussian Splatting.
• Инструменты Gaussian Splatting на Python — они могут давать более низкоуровневый контроль для технических пользователей, но требуют настройки вне готового Mac‑приложения.
• Другие приложения для 3D‑съёмки и реконструкции — смежные приложения могут быть больше сосредоточены на захвате, сканировании или редактировании, а не на полном пайплайне Gaussian Splatting от импорта до экспорта.