JUMP, 세계 최초의 극사실주의 윙슈트 시뮬레이터

세계 최초의 윙슈트 시뮬레이터

산을 따라 활강하는 윙슈트 비행자의 스릴 넘치는 GoPro 영상을 보셨나요? 세계 최초의 극사실적 윙슈트 시뮬레이터인 점프(JUMP)는 거기서 한 단계 더 발전된 경험을 제공합니다.

이 시뮬레이터는 실물 윙슈트와 커스텀 VR 헬멧을 사용하고, 서스펜션, 바람 이펙트, 극사실적 다감각 자극을 조합하여 직접 베이스 점프를 하지 않고도 물리적인 비행에 가장 가까운 경험을 하게 해 줍니다.

점프는 설립자이자 CEO인 제임스 젠센(James Jensen)의 발명품입니다. 젠센은 오랜 기간 근사한 위치 기반 엔터테인먼트 경험을 개발해 왔습니다.

초창기 걷기 가상현실 시뮬레이션 회사 중 하나인 더 보이드(The VOID)를 세운 팀의 일원이었기 때문입니다. 더 보이드는 가정용 구성을 압도하는 최고급 가상현실 및 그래픽 기술을 통해 남녀노소를 스타워즈(Star Wars)와 고스트버스터즈(Ghostbusters)의 세계로 안내했습니다.

점프에 대한 아이디어는 2016년에 어느 여행길의 모닥불가에서, 젠센이 전문 윙슈트 파일럿인 친구 마셜 밀러(Marshall Miller)와 대화하던 도중 탄생했습니다. 젠센이 걷기 가상현실 시뮬레이션에 대해 이야기하자, 밀러는 자신이 스웨덴에서 했던 윙슈트 베이스 점프의 영상을 보여주었습니다.

젠센은 말합니다. “따라 해 보고 싶다는 이야기가 저절로 나왔습니다. 그러자마자 옆에 있던 아내가 절대로 안 된다더군요. 그날 밤, 현실의 윙슈트 베이스 점프 경험, 낙하산, 착지를 모방하기 위한 시뮬레이터를 냅킨에 스케치했죠.”

젠센은 팀을 꾸리고 2019년에서 2021년까지 프로토타입 시뮬레이터를 만들었습니다. 그리고 유타주 블러프데일에서 본격적인 장치로 구현해 냈습니다. 체험장에는 지난 4개월 동안 5,000명이 넘는 사람이 방문했습니다. 젠센은 말합니다. “저는 스카이다이빙이나 베이스 점프를 해 본 적이 없습니다. 이 경험이 얼마나 진짜 같은지 파악하기 위해선 전문가들의 의견을 듣죠. 실제 느낌의 85% 정도는 된다고 합니다. 100%를 달성하는 것이 목표입니다.”

그리고 이러한 초고해상도 이미지를 리얼리티캡처 최신 버전으로 처리했습니다. 리얼리티캡처는 이미지 및 레이저 스캔 세트로부터 극사실적 3D 모델을 만들 수 있는 최신 사진측량 툴입니다.

팀은 UE5의 가상화된 마이크로폴리곤 지오메트리 시스템인 나나이트를 사용하여 폴리곤이 수백만 개인 메시의 임포트와 리플리케이션을 처리하면서도 눈에 띄는 충실도 손실은 전혀 없이 리얼타임 프레임 레이트를 유지했습니다.

극사실적인 라이팅과 섀도를 구현하는 데는 언리얼 엔진 5의 완전 다이내믹 글로벌 일루미네이션 시스템인 루멘을 사용했습니다. 루멘에서는 직접광이나 지오메트리가 변경되는 즉시 간접광이 조정됩니다.

젠센은 말합니다. “완전한 포토리얼리즘을 추구하기 때문에, 씬의 사실감을 높이기 위해 나나이트와 루멘을 아주 많이 활용했습니다. 저희 데이터세트는 80억 폴리곤으로, 현존하는 나나이트 데이터세트 중 가장 규모가 큽니다. 700개가 넘는 부분으로 나뉘고, 각 부분에 16,000개의 텍스처가 있습니다.”

젠센은 점프 경험을 제작하는 툴로 언리얼 엔진을 선택한 이유가 이런 기능 때문이라고 설명합니다. 젠센은 말합니다. “고해상도 리얼타임 시뮬레이션에서 언리얼 엔진은 비교가 안 되는 선두 주자입니다.”

햅틱 및 물리 이펙트

하지만 비주얼은 점프의 특별함 중 절반에 불과합니다. 실제로 날고 있는 것처럼 완전히 몰입되는 감각을 자아내도록, 점프에서는 가상현실 헤드셋에서 보이는 광경에 실제 윙슈트, 서스펜션 시스템, 바람 이펙트, 다감각 자극이 결합됩니다.

이런 최첨단 기술은 베이스 점프를 정확하게 시뮬레이션할 수단을 제공합니다. 그런데 베이스 점프를 직접 하지 않는 사람이 점프가 어떤 느낌이어야 하는지 어떻게 알 수 있을까요? 전문가의 경험을 빌리면 됩니다.

젠센은 점프의 개발에 관해 여러 전문가의 자문을 받았습니다. 그중 한 명이 앞서 등장한 마셜 밀러입니다. 그의 좋은 친구이자 전문 윙슈트 파일럿인 밀러는 1만 번이 넘는 점프를 경험한 베테랑입니다. 또 다른 전문 윙슈트 파일럿인 하르트만 리흐터(Hartman Richter)는 재능 있는 프로그래머이기도 해서, 실제 윙슈트의 다이내믹스를 모방하는 플라이트(FLIGHT) 서버 소프트웨어 피직스 엔진을 작성했습니다.

이들의 도움으로 팀은 진정한 현장감을 주는 디테일을 구현해낼 수 있었습니다. 예를 들어, 이 경험의 윙슈트에는 압축 공기가 충전되어 있습니다. 절벽을 박차고 뛰어내리면 몇 초 안에 윙슈트가 부풀어 오르고, 비행 속도가 빨라질수록 팬이 가속하며 바람이 더 빠르게 불어옵니다. 이 모든 요소가 경험에 사실감을 더해 줍니다.

메타버스로 날아오르다

점프를 개발하던 젠센은 비행자들의 반응을 지켜보면서도 놀라운 아이디어 한 가지를 떠올렸습니다. 젠센은 말합니다. “프로토타입을 시연할 때, 참여자들이 서로서로 구경하는 모습을 지켜봤습니다. 앞 사람처럼 하고 싶다며 경쟁하는 사람들이 나오기 시작했죠.”

젠센은 이 경험이 마치 친구들과 스노보드를 타며 누가 먼저 산에서 내려가나 겨루는 시합과도 비슷하다는 점을 깨달았습니다. 그래서 팀은 e-스포츠 식의 대회를 구상하게 되었습니다. 젠센은 말합니다. “아직은 라이브 방송을 하고 있지 않지만, 저희 모든 지점에서 윙슈트 레이싱을 펼치며 Twitch로 스트리밍할 계획이 있습니다.”

또한 팀은 여러 지점의 비행자가 가상 환경에서 만나 함께 점프하는 멀티플레이어 경험도 개발하고 있습니다. 페이셜 스캔 기술로 사실적인 사용자 아바타를 만들고, 이 아바타를 경험에 구현하여 개인화된 GoPro 스타일 비디오를 제공할 계획도 세우고 있습니다.

현재의 점프는 위치 기반 경험입니다. 젠센은 앞으로 여러 곳의 체험장을 열 계획이라고 합니다. 그러나 미래에는 전 세계의 침실과 거실에서도 작동하는 시스템 버전도 나올지 모른다니 기대할 만합니다.

젠센은 말합니다. “점프의 시뮬레이터와 기술을 메타버스에 도입하면 진정하고 완전한 모빌리티의 토대가 됩니다. 몇 년 동안 위치 기반 엔터테인먼트를 거치다 보면, 결국 완벽한 가정용 가상현실 모빌리티 제품을 만들게 되겠죠.”