혼합 현실이란?

혼합 현실(MR)은 가상 현실(VR)과 증강 현실(AR)이 혼합된 새로운 기술입니다. Microsoft HoloLens와 같은 헤드셋은 혼합 현실 게임 업계에 새로운 가능성을 열어주었습니다. 머리에 착용하는 헤드 마운트 디스플레이에는 사용자의 실제 환경을 지속적으로 매핑하는 카메라가 포함되어 있습니다. 이러한 디바이스용으로 제작된 게임 속 캐릭터는 사용자의 실제 환경에서 돌아다니거나 소파에 앉을 수도 있습니다.

MSHololens

혼합 현실은 게임 외에도 다양한 용도로 사용됩니다. 아티스트와 디자이너, 광고주는 수년에 걸쳐 3D를 사용하여 새로운 방식으로 스토리를 전달하고, 사람들의 참여를 유도하고 있습니다. 이제는 혼합 현실을 사용하여 3D 작품을 현실 세계의 실제 환경으로 가져올 수도 있습니다.

VR, AR, MR 명확히 구분하기

가상 현실(VR)

가상 현실은 컴퓨터에서 만든 시뮬레이션 환경에 사용자가 들어가는 것입니다. 이때 헤드셋과 같은 장비를 사용합니다. VR 헤드셋은 실제 환경의 시야를 완전히 차단하여 사용자가 가상 환경에 더욱 몰입하도록 도와줍니다. 다양한 센서와 기술로 사용자의 동작을 가상 환경으로 변환하며, 여기에서 생성된 정보는 해당 아바타로 동작을 구현하는 등 가상 환경에서의 움직임을 결정하는 데 사용됩니다.

증강 현실(AR)

증강 현실은 디지털 개체를 현실 세계의 실제 환경에서 구현한 것입니다. 특수 AR 안경, 휴대폰, 태블릿 등 여러 디바이스의 카메라를 통해 볼 수 있는 디지털 콘텐츠를 제공합니다.  

혼합 현실(MR)

혼합 현실은 VR과 AR이 혼합된 것입니다. 이 용어는 Paul Milgram과 Fumio Kishino가 1994년에 현실 세계의 실제 환경과 가상 환경 간의 연속성을 설명하기 위해 만들어졌습니다. 혼합 현실에서는 실제 개체와 가상 개체가 실시간으로 상호 작용하여 가상과 현실을 넘나드는 경험을 제공합니다. 혼합 현실에서는 실제 환경을 계속 볼 수 있도록 투명한 렌즈나 카메라가 있는 헤드셋이 필요합니다. Windows Mixed Reality 헤드셋은 카메라가 있는 VR 헤드셋입니다.

구현 환경과 하드웨어의 차이점

  • 구현 환경: VR은 실제 환경을 완전히 차단합니다. 반면, AR과 MR은 실제 환경이 경험에 포함될 수 있으며, 이 경우 실제 환경은 디지털 요소와 함께 증강되거나 혼합됩니다.
  • 하드웨어: VR, AR, MR을 경험하기 위해서는 모두 디바이스가 필요합니다. VR의 경우 실제 환경을 완전히 차단하는 헤드셋을 착용해야 하고, AR은 스마트폰과 같은 디바이스가 필요합니다. MR의 경우 Microsoft HoloLens, HTC Vive, Magic Leap과 같은 안경 또는 헤드셋을 사용하여 현실 세계의 환경을 볼 수 있습니다.

VR, AR, MR 애플리케이션 활용 사례

앵그리 버드

엔터테인먼트

Oculus와 같은 VR 헤드셋이 대중의 관심을 끌면서 다양한 VR 게임과 영화 애플리케이션이 등장하고 있습니다. VR 게임은 블록버스터 영화, 다양한 역사적 배경(예: 중세 유럽, 금주법 시대의 시카고), 아케이드 게임 등에서 영감을 받아 여러 영역에서 활용되고 있습니다.  코로나19 팬데믹으로 인해 전 세계적으로 극장 영화 상영이 어려워진 상황에서 VR은 많은 영화 감독에게 새로운 가능성을 열어주었습니다. 드라마틱한 작품 제작은 물론, 관객이 영화 속 캐릭터가 되거나 엔딩을 직접 선택하게 할 수 있습니다.

AR은 영화, 게임을 비롯한 엔터테인먼트 업계에서 다양한 애플리케이션에 사용됩니다. 그 대표적인 앱이 2016년에 출시된 ‘포켓몬 GO’입니다. 전 세계 수백만 명의 사람들이 현실 세계에 캐릭터가 덧씌워진 새로운 세상에 열광하며 선풍적인 인기를 모았습니다.

가장 최신 기술에 속하는 MR은 아직 초기 단계이지만, 앞으로 큰 발전을 이룰 것으로 기대됩니다. Magic Leap 헤드셋을 사용하는 앵그리 버드 FPS는 실제 공간에 돼지를 겹쳐 놓는 공간 게임입니다.

의료, 건축, 교육

VR과 AR은 의료, 건축, 교육 등 다양한 업계에서 널리 사용되고 있으며, MR 기술은 유용한 애플리케이션 제작에 사용되고 있습니다.

VR 경험은 건축물을 쉽게 이해할 수 있도록 돕는 방식으로 건축 업계를 혁신하고 있습니다. 이전에는 클라이언트가 3D 모델을 보기 위해 직접 방문해야 했다면, 지금은 해당 VR에 대한 액세스 권한과 헤드셋만 있다면 어디서든 가상 환경을 경험할 수 있습니다.  AR을 통해 실제 생활 공간을 가상으로 바꿀 수도 있습니다. 새로 구매할 가구가 거실에서 어떻게 보일지, 어떤 페인트 색상이 공간에 어울릴지를 미리 볼 수 있습니다.

의료 업계에서는 외과의사 수련생이 가상 현실에서 숙련된 의사의 눈을 통해 수술 과정을 볼 수 있으며, 스크립트 시나리오로 예상치 못한 상황에 대비하고 대응 방식을 연습할 수 있습니다.  또한 MR은 MR 기반의 X-ray 시야로 의사가 수술 중 환자의 피부 아래 혈관과 뼈를 볼 수 있게 하는 등 유용한 의료 경험을 제공합니다.

VR, AR, MR 기술 모두 몰입형 교육 경험이 가능합니다. 따라서 더욱 매력적이고 창의적인 방식으로 다양한 교육 경험을 제공할 수 있습니다.