RadianceKit

RadianceKit란?

RadianceKit는 3D Gaussian Splatting용 네이티브 Mac 앱입니다. 사진이나 동영상을 불러오고, Metal GPU compute를 사용해 Apple Silicon에서 로컬로 장면을 재구성한 뒤, 하나의 워크플로에서 결과를 미리 보고 편집하고 내보낼 수 있습니다.

이 앱은 클라우드 처리, Python, 또는 별도의 정렬 및 내보내기 단계를 사용하는 도구 체인을 대체하는 완전한 대안으로 포지셔닝되어 있습니다. Mac에서 사진처럼 사실적인 3D 장면을 만들면서 데이터를 자신의 기기에 그대로 두고 싶은 사용자를 위해 설계되었습니다.

주요 기능

• 네이티브 Apple Silicon GPU 학습 — RadianceKit는 Metal을 사용해 M1, M2, M3, M4 Mac에서 Gaussian Splatting 학습을 실행하므로, 처리가 클라우드가 아니라 로컬에서 이루어집니다.
• 단일 앱 워크플로 — 커맨드라인 설정 없이 같은 앱에서 미디어를 가져오고, 카메라 위치를 정렬하고, 모델을 학습하고, 재구성을 확인하고, 내보낼 수 있습니다.
• Simple 및 Expert 모드 — Simple Mode는 빠른 시작을 위한 안내형 흐름을 제공하고, Expert Mode는 프로젝트 내비게이터, 인터랙티브 3D 뷰포트, 실시간 손실 곡선, 세부 학습 및 내보내기 제어를 추가합니다.
• 인터랙티브 Gaussian 편집기 — 사용자는 브러시 도구로 3D 뷰에서 영역을 직접 선택해 삭제할 수 있어, 원치 않는 아티팩트나 재구성 일부를 제거하는 데 도움이 됩니다.
• 다양한 내보내기 옵션 — 장면은 PLY, Compressed PLY, SPZ, glTF, .splat, 또는 SOG로 내보낼 수 있으며, 궤도 영상이나 독립형 웹 뷰어를 만들 수 있는 옵션도 제공합니다.
• 로컬 처리와 개인정보 보호 — 앱은 사용자의 Mac에서 장면을 처리하며, 학습을 위해 클라우드 업로드가 필요하지 않습니다.

RadianceKit 사용 방법

일반적인 워크플로는 앱을 열고 사진 또는 동영상을 가져오는 것으로 시작합니다. 그러면 RadianceKit가 카메라를 정렬하고, Mac의 Apple Silicon GPU에서 Gaussian Splatting 장면을 학습한 뒤, 사용자가 재구성을 실시간으로 확인할 수 있게 합니다.

그다음 사용자는 간단한 작업을 위한 안내형 모드와 파라미터 조정 및 세부 검사를 위한 전문가 레이아웃 사이를 전환할 수 있습니다. 장면이 준비되면 편집기로 모델을 정리한 뒤, 공유, 보관 또는 웹 보기용 형식으로 내보낼 수 있습니다.

사용 사례

• Mac에서의 사진측량식 장면 재구성 — Mac을 벗어나지 않고 일반 사진이나 동영상을 탐색 가능한 3D 장면으로 변환합니다.
• 로컬 3D 캡처 워크플로 — 클라우드 업로드를 원하지 않거나 원본 미디어를 로컬에 유지하는 것이 중요할 때 기기에서 재구성을 실행합니다.
• 재구성 정리 — 앱 내 브러시 편집기로 떠 있는 아티팩트, 불필요한 객체, 기타 원치 않는 영역을 제거합니다.
• 기술적 실험 및 파라미터 조정 — Expert Mode로 학습 곡선을 확인하고 설정을 조정해 더 세밀하게 재구성 작업을 수행합니다.
• 인터랙티브 결과물 공유 — 장면을 웹 뷰어 또는 궤도 영상으로 내보내, 보는 쪽에 추가 소프트웨어 없이도 발표와 검토에 활용합니다.

FAQ

• RadianceKit는 클라우드 처리가 필요한가요? 아니요. 학습은 Metal을 통한 Apple Silicon GPU compute를 사용해 Mac에서 로컬로 실행됩니다.
• Python이나 커맨드라인 도구가 필요한가요? 아니요. 이 앱은 하나의 Mac 앱 안에서 가져오기, 학습, 편집, 내보내기를 모두 제공하는 완전한 워크플로로 소개됩니다.
• 어떤 Mac이 지원되나요? 소스에 따르면 RadianceKit는 macOS 26 Tahoe 이상을 실행하는 Apple Silicon Mac(M1 이상)이 필요하며, 큰 장면에는 16 GB RAM을 권장합니다.
• 어떤 파일을 가져올 수 있나요? .mp4, .mov, .m4v, .avi 같은 비디오와 .jpg/.jpeg, .png, .heic, .tiff/.tif, .bmp를 포함한 일반적인 사진 형식을 가져올 수 있습니다. 또한 .ply, .spz, .splat 같은 기존 splat과 장면 및 카메라 번들도 엽니다.
• 360도 영상도 바로 지원하나요? 아직은 아닙니다. 페이지에는 Insta360 .insv와 스티칭된 360 equirectangular 영상은 현재 직접 지원되지 않는다고 명시되어 있습니다.

대안

• 클라우드 기반 NeRF 또는 사진측량 서비스 — 로컬 GPU compute에 의존하지 않고 재구성을 처리할 수 있지만, 미디어 업로드와 온라인 처리 워크플로가 필요합니다.
• 데스크톱 사진측량 앱 — 전통적인 사진측량 도구는 이미지 기반 재구성에 초점을 맞추며, Gaussian Splatting과는 다른 정렬 및 내보내기 워크플로를 따를 수 있습니다.
• Python 기반 Gaussian Splatting 도구 체인 — 기술 사용자에게 더 낮은 수준의 제어를 제공할 수 있지만, 패키지된 Mac 앱 밖에서 별도 설정이 필요합니다.
• 기타 3D 캡처 및 재구성 앱 — 인접한 앱들은 가져오기부터 내보내기까지의 완전한 Gaussian Splatting 파이프라인보다 캡처, 스캔, 편집을 우선시할 수 있습니다.