[Volinga] AI- Virtual Production/ NeRF를 활용한 3D Reconstruction

안녕하세요. 정글러입니다.

 

Volinga는 NeRF를 활용하여 다양한 산업에 적용하고 있는 해외 스타트업 기업 입니다.

https://volinga.ai/

Video Capture - Drag & Drop multiple videos - Edit & enhance with Volinga Editor - Ready for production

AI를 활용하여 VP에 사용할 때 이러한 프로세스로 진행이 됩니다.

 

Volinga는 언리얼엔진과 연결할 수 있는 플러그인을 제공하고 있습니다.

 

3DGS을 활용할 때 캡쳐를 잘하는 것이 중요합니다.

캡쳐를 제대로 하기 위해선

1. 1080p~4K 를 사용

2. 물체 중심에서 최소 80-100이미지를 사용

3. 블러를 피하기 위해 높은 셔터스피드와 넓은 depth-of-field를 사용

4. 부드러운 비디오 촬영을 위해 드론을 사용

5. 움직이는 물체 없이 고정된 샷, 고정된 요소와 빛 컨디션

6. 카메라 모션을 느리게, 패닝이 되지 않도록

7. Parallax 아카이브

 

카메라를 캡쳐할 때는 카메라를 고정하고 Pan이나 Tilt로 촬영하는 것은 좋지 않습니다. 물체를 중심으로 카메라 자체의 이동이 필요합니다.

 

Volinga 홈페이지에 업로드 된 영상을 확인해보았는데요, Luma랑 비슷했습니다.

Volinga는 제대로 추출되지 않은 부분은 자동으로 생성해서 복구해준다고 하는데,

이는 아직 시도해보지 못했습니다.

 

---

여러가지 기술을 살펴보고 공부해보고 느끼는 점은

아무리 기술이 발달하고, 더 나은 성능으로 발전시켜도

'소비자의 관점에서 가치를 창출할 수 있는지, 필요로 하는지'가 중요하다고 생각합니다.

 

아직 NeRF 기술이 실질적인 가치창출로 나아가기 위해서는 

소비자들이 가상융합 환경에 조금 더 적응하는 시간이 필요할 것 같습니다.

NAVER가 VR매물 탐색 서비스를 선보였는데

저도 한번 핸드폰으로 보니까 신기하긴 한데,

아직 대부분의 매물은 없고 한두개 정도만 되어 있어서

효용성이 있는지는 모르겠더라고요.

 

가상융합산업이 우리 실생활에 와닿는 수준까지 오려면 얼마나 기다려야할지 궁금해집니다.

저성장 시대인 지금, 새로운 활로가 될 수 있는

산업들이 발전했으면 좋겠습니다!!

 

감사합니다.