TypeGPU가 실시간 물리 시뮬레이션 샌드박스를 선보이며, 사용자들에게 새로운 시각적 경험을 제공하고 있습니다. 이 샌드박스는 사진, 동영상, 심지어 라이브 웹캠 피드에 유체(fluid), 연기(smoke), 다중 광원(multi-source light) 시뮬레이션을 실시간으로 적용할 수 있는 것이 특징입니다. 특히 콘라드 레츠코(Konrad Reczko)의 '깊이 인식 광원 주입(Depth-aware light injection)' 기술에서 영감을 받아 개발되었으며, 복잡한 물리 현상을 직관적으로 시각화합니다.
TypeGPU 샌드박스의 핵심 기술은 깊이 맵(depth map)에서 표면 법선(surface normals)을 통해 장면의 중력을 추론하는 능력입니다. 덕분에 기울어진 장면에서도 유체 움직임을 정확하게 시뮬레이션할 수 있습니다. 예를 들어, 컵을 기울이면 물이 흐르는 것처럼 보이는 식입니다. 또한, 손 추적(hand tracking) 기능과 개발 중인 컵 내부 감지(cup interior detection) 기능을 포함하여, 라이브 영상 속 컵이나 잔에 가상 액체를 채우는 등 재미있는 인터랙션을 가능하게 합니다. 사용자는 이미지를 드래그 앤 드롭하거나 웹캠을 연결하여 바로 시뮬레이션을 시작할 수 있으며, 스크롤을 통해 물줄기의 깊이를 조절하는 등 다양한 조작을 할 수 있습니다.
이러한 실시간 물리 시뮬레이션 기술은 엔터테인먼트 콘텐츠 제작, 교육용 시뮬레이션, 증강 현실(AR) 및 가상 현실(VR) 애플리케이션 등 다양한 분야에서 잠재력을 가집니다. 특히 복잡한 물리 엔진 지식 없이도 누구나 쉽게 인터랙티브한 콘텐츠를 만들 수 있게 함으로써, 크리에이터들에게 새로운 표현의 자유를 제공할 수 있습니다. 향후 이 기술이 더욱 발전한다면, 단순히 시각적 효과를 넘어 실제와 같은 상호작용이 필요한 산업 분야에서도 혁신적인 변화를 가져올 것으로 기대됩니다.