“인기 가수가 본인과 똑같은 아바타와 함께 무대에서 춤춘다” “게임 캐릭터를 내 책상 위에 소환해 재밌게 논다” “프로 골프선수의 스윙 자세를 360도로 돌려보며 분석한다”
혼합현실(Mixed Reality) 기술로 가상과 현실을 넘나드는 세상이 온다. 전세계 ICT기업들은 AR과 VR의 기술적 장점을 융합해 가상 이미지를 현실 공간 속에서 실감나게 구현하는 혼합현실 기술에 주목하고 있다.
이에 SK텔레콤은 혼합현실 제작소 ‘점프 스튜디오(www.jumpstudio.co.kr)’를 4월 29일부터 가동한다고 밝혔다.
‘점프 스튜디오‘의 혼합현실 콘텐츠는 SK텔레콤 및 마이크로소프트가 개발한 실감미디어 기술의 집약체다. 마이크로소프트의 볼류메트릭 비디오 캡처(Volumetric Video Capture) 기술로 인물의 역동적인 움직임을 홀로그램 비디오로 구현하고, SK텔레콤 ‘T 리얼 플랫폼’의 공간인식•렌더링 기술로 홀로그램과 현실 공간이 자연스럽게 어우러진 콘텐츠를 완성한다.
어떤 움직임도 홀로그램으로 생성
‘점프 스튜디오‘의 혼합현실 기술은 ICT 업계에서 단연 최고 수준으로 평가받고 있다. 스튜디오에 설치된 106대의 카메라를 통해 360도로 초당 최대 60프레임 촬영이 가능해, 실제처럼 자연스럽게 움직이는 고화질 3D 홀로그램을 생성할 수 있다.
‘점프 스튜디오’는 AI, 클라우드, 3D 프로세싱, 렌더링 기술로 기존 3D 모델링 작업의 수작업 공정을 상당 부분 자동화함으로써 콘텐츠 제작 비용과 기간을 획기적으로 줄일 수 있다.
예를 들어 3분 분량의 혼합현실 콘텐츠를 만든다고 가정하면, 기존 방식으로는 통상 3~4개월간 수 억원 대 이상의 비용을 들여 제작해야 했지만 점프 스튜디오에서는 1~2주 만에 절반도 안되는 비용으로 완성할 수 있다.
‘점프 스튜디오’는 스튜디오에서 1분간 촬영했을 때 600GB에 달하는 영상 데이터를 모바일 스트리밍이 가능한 300MB 수준으로 자동 압축해 제공하며, 기존 미디어 제작 시스템과 호환성이 높은 비디오 포맷(MPEG4)을 지원한다. 실감미디어 콘텐츠를 대폭 늘릴 수 있는 기반이 마련됐다고 볼 수 있는 부분이다.
기존 3D 모델링 콘텐츠 제작 방식은 [촬영 → 메쉬(Mesh)구성 → 텍스처(Texture) → 리깅(Rigging) → 모션생성 → 결과물]과 같은 복잡한 수작업 과정을 거쳤다. 하지만 점프 스튜디오는 메쉬 구성부터 모션생성까지의 절차를 모두 자동으로 처리함으로써 짧은 시간 안에 양질의 결과물을 제공한다.
엔터테인먼트·영화 분야서도 ‘혼합현실’이 뜬다
마이크로소프트는 이미 엔터테인먼트·영화·게임 등 다양한 분야에 혼합현실 콘텐츠를 접목해 전세계의 이목을 끌고 있다.
2018년에는 VR 영화 ‘어웨이크(AWAKE)‘ 제작에 참여해 등장인물들을 홀로그램으로 구현했으며, 수년전부터 미국 록밴드 스매싱 펌킨스의 보컬 빌리 코건(Billy Corgan) 등 여러 유명 가수들의 홀로그램 뮤직비디오와 공연을 선보이기도 했다.
이외에도 움직이는 3D 홀로그램을 활용할 수 있는 분야는 무궁무진하다. 의료진이 환자를 홀로그램으로 보며 치료 방법을 연구하거나, 살아있는 유명 인물을 홀로그램으로 만들어 박물관에 영구히 보존할 수도 있다.
