RadianceKit

O que é o RadianceKit?

RadianceKit é uma app Mac nativa para 3D Gaussian Splatting. Permite importar fotos ou vídeo, reconstruir uma cena localmente em Apple Silicon usando computação de GPU Metal e depois pré-visualizar, editar e exportar o resultado num único fluxo.

A app é apresentada como uma alternativa completa a toolchains que dependem de processamento na cloud, Python ou etapas separadas de alinhamento e exportação. Foi concebida para quem quer criar cenas 3D fotorrealistas num Mac, mantendo os dados na própria máquina.

Principais funcionalidades

• Treino nativo em GPU Apple Silicon — O RadianceKit executa o treino de Gaussian Splatting em Macs M1, M2, M3 e M4 usando Metal, por isso o processamento acontece localmente em vez de na cloud.
• Fluxo numa só app — Importe media, alinhe posições de câmara, treine o modelo, inspecione a reconstrução e exporte tudo na mesma app, sem configuração por linha de comandos.
• Modos Simple e Expert — O Simple Mode oferece um fluxo orientado para arranques rápidos, enquanto o Expert Mode adiciona um navegador de projeto, viewport 3D interativo, curvas de loss em tempo real e controlos detalhados de treino e exportação.
• Editor interativo de Gaussian — Os utilizadores podem selecionar e apagar regiões diretamente na vista 3D com uma ferramenta de pincel, o que ajuda a remover artefactos indesejados ou partes de uma reconstrução.
• Múltiplas opções de exportação — As cenas podem ser exportadas como PLY, Compressed PLY, SPZ, glTF, .splat ou SOG, com opções para criar vídeos orbitais ou visualizadores web autocontidos.
• Processamento local e privacidade — A app processa as cenas no Mac do utilizador e não requer upload para a cloud para treinar.

Como usar o RadianceKit

Um fluxo típico começa ao abrir a app e importar fotos ou um vídeo. O RadianceKit depois alinha as câmaras, treina a cena de Gaussian Splatting na GPU Apple Silicon do Mac e permite ao utilizador inspecionar a reconstrução em tempo real.

A partir daí, os utilizadores podem alternar entre um modo guiado para tarefas simples ou um layout para especialistas para afinação de parâmetros e inspeção detalhada. Quando a cena estiver pronta, podem limpar o modelo com o editor e exportá-lo num formato adequado para partilha, arquivo ou visualização na web.

Casos de uso

• Reconstrução de cenas em estilo fotogrametria no Mac — Converta fotos ou vídeo comuns numa cena 3D explorável sem sair do Mac.
• Fluxos de trabalho de captura 3D local — Execute a reconstrução no dispositivo quando não é desejado upload para a cloud ou quando é importante manter os ficheiros de origem localmente.
• Limpeza de reconstruções — Remova artefactos flutuantes, objetos soltos ou outras regiões indesejadas usando o editor de pincel integrado.
• Experimentação técnica e afinação de parâmetros — Use o Expert Mode para inspecionar curvas de treino e ajustar definições para um trabalho de reconstrução mais controlado.
• Partilha de resultados interativos — Exporte uma cena como visualizador web ou vídeo orbital para apresentação e revisão sem exigir software extra de quem vê.

FAQ

• O RadianceKit requer processamento na cloud? Não. O treino é executado localmente no Mac usando computação de GPU Apple Silicon através de Metal.
• Preciso de Python ou ferramentas de linha de comandos? Não. A app é apresentada como um fluxo completo com importação, treino, edição e exportação dentro de uma única app Mac.
• Que Macs são suportados? A fonte diz que o RadianceKit requer um Mac Apple Silicon (M1 ou posterior) com macOS 26 Tahoe ou posterior, e recomenda 16 GB de RAM para cenas maiores.
• Que tipos de ficheiros pode importar? Pode importar vídeos como .mp4, .mov, .m4v e .avi, bem como formatos de foto comuns incluindo .jpg/.jpeg, .png, .heic, .tiff/.tif e .bmp. Também abre splats existentes como .ply, .spz e .splat, além de bundles de cena e câmara.
• Suporta diretamente vídeo 360? Ainda não. A página diz que Insta360 .insv e vídeo 360 equiretangular já costurado não são suportados diretamente neste momento.

Alternativas

• Serviços de NeRF ou fotogrametria baseados na cloud — Podem lidar com a reconstrução sem depender de computação GPU local, mas exigem upload de media e uso de um fluxo de processamento online.
• Aplicações desktop de fotogrametria — As ferramentas tradicionais de fotogrametria focam-se na reconstrução baseada em imagens e podem seguir fluxos de alinhamento e exportação diferentes dos de Gaussian Splatting.
• Toolchains de Gaussian Splatting baseadas em Python — Podem oferecer mais controlo de baixo nível para utilizadores técnicos, mas exigem configuração fora de uma app Mac empacotada.
• Outras apps de captura e reconstrução 3D — Apps adjacentes podem dar prioridade à captura, scanning ou edição, em vez de um pipeline completo de Gaussian Splatting desde a importação até à exportação.