볼륨 기반 서브서피스 산란을 구현한 재조명 가우시안 스플래팅 기술
VolS-GS: Relightable Gaussian Splatting with Volumetric Subsurface Scattering
빛이 물체 내부를 통과하는 볼륨 기반의 재조명 기술을 구현한 'VolS-GS'라는 가우시안 스플래팅 프레임워크가 등장했습니다.
이 기술은 빛이 물체 내부를 통과하는 과정을 재현하여, 피부나 반투명 물체처럼 복잡한 물리 현상을 포착함으로써 더욱 현실적이고 정교한 가상 환경을 구현할 수 있게 해요.
- 기존 방식이 표면만 모델링했던 한계를 넘어, 이 방법은 가우시안 장면 전체를 도메인으로 삼아 빛의 내부 산란 과정을 수송 솔버로 재현합니다.
- 서브서피스 스캐터링 같은 복잡한 물리 현상을 포착하여 피부나 반투명 물체 등 더욱 현실적이고 정교한 가상 환경 구현에 기여할 전망입니다.
- 다만, 이 모델은 실제 재료의 물리적 측정을 하는 것이 아니라 이미지를 기반으로 빛의 전파 경로를 추정한다는 점을 염두에 두어야 합니다.
VolS-GS는 단일 광원(one-light-at-a-time, OLAT) 캡처를 통해 물체를 재구성하고, 이를 새로운 조명 및 시점에서 렌더링할 수 있는 재조명 가우시안 스플래팅 프레임워크입니다. 기존의 재조명 방식들은 각 기본 요소(primitive)에서 외관을 독립적으로 모델링하는 경향이 있어, 빛이 한 위치에 들어와 다른 곳에서 나오는 서브서피스 산란과 같은 비국소적 효과를 표현하기 어렵다는 한계가 있었습니다.
이러한 한계를 극복하기 위해, VolS-GS는 가우시안 장면의 공간적 지지(spatial support)를 미분 가능한 유한 체적 수송 솔버(differentiable finite-volume transport solver)의 도메인으로 활용합니다. 이를 통해 빛이 물체 내부를 통과하며 전파되도록 모델링할 수 있습니다. 구체적으로, 작은 네트워크가 각 가우시안에 산란 및 흡수 계수를 예측하고, 이 솔버가 입사광을 재분배하여 빛의 이동 경로를 제공합니다.
이 방법론은 계수를 측정하는 것이 아니라 이미지에 맞춰 피팅하며, 솔버가 제공하는 전송 형태의 경로를 통해 개별 요소의 외관을 집계합니다. 또한, 학습된 그림자 및 반사광 항이 다른 구성 요소를 압도하지 않도록, 그림자 항은 가시성(visibility), 투과율(transmittances), 그리고 산란 솔버 결과로부터 예측됩니다. 세 가지 OLAT 실험에서 VolS-GS는 보류된 조명 및 시점에서 재조명 품질을 일관되게 개선하는 것으로 나타났습니다.
용어 풀이
- 벤치마크
- 모델 성능을 같은 조건에서 비교하려고 만든 시험 문제 모음.
기존 재조명 방식의 한계는 무엇인가요?
기존 방식들은 각 기본 요소에서 외관을 독립적으로 모델링하는 경향이 있어서, 빛이 한 위치에 들어와 다른 곳에서 나오는 서브서피스 산란 같은 비국소적 효과를 표현하기 어려웠어요.
VolS-GS는 어떻게 내부 빛의 전파를 모델링하나요?
가우시안 장면의 공간적 지지를 미분 가능한 유한 체적 수송 솔버의 도메인으로 활용해요. 이를 통해 빛이 물체 내부를 통과하며 전파되도록 모델링할 수 있어요.
이 기술은 물리적 측정을 하나요?
아니에요. 이 방법론은 계수를 측정하는 것이 아니라 이미지에 맞춰 피팅하며, 솔버가 제공하는 전송 형태의 경로를 통해 개별 요소의 외관을 집계해요.