AR [증강 현실] 공간에 어떤 객체 (예를 들어 피카츄)을 묘사하는 것을 생각해 보자. 이 때 현실의 공간에서 인간과 자동차가 앞을 통과했다고한다. 그러자 AR 공간의 객체는 실제 객체의 뒤쪽된다. 여기에서 매우 성가신 문제가 생긴다.
가상 객체를 현실의 객체에 의해 "숨기기"작업은 매우 복잡하다. 시스템은 묘사되는 픽셀이 다른 픽셀 "앞"에 있는지, '건너편'에 있는지, 중간에 있는지를 판단 할 수 있어야한다. 자동 운전 자동차와 같이 복수의 카메라와 레이저 레인지 파인더를 사용하는 것은 매우 도움이 스마트 폰이 일반 대비 같은 RGB 감광 소자의 단일 카메라로, 게다가 실시간으로 이러한 식별하는 것은 매우 어려운 기술이다. 대부분의 AR 응용 프로그램에서 객체가 극히 가까운 공중에 떠있는 것처럼 묘사되는 것은 이런 이유 에서다.
피카츄가 활약하는 포켓몬 GO 기술을 지원 Niantic 은 바로이 문제에 임해 온 시작, Matrix Mill을 인수했다.
2017 년에 런던의 유니버시티 칼리지의 프로젝트에서 스핀 아웃 기업이 된 Matrix Mill은 Monodepth라는 기술을 제공한다. 이 도구는 단일 RGB 카메라에서 얻은 데이터를 신경망에서 처리하고 실시간 게임에 사용할 수있는 속도로 거리 정보를 출력한다.
회사는 어제 (미국 시간 6/27) 소수의 기자를 초청하여 Monodepth의 시위를 벌였다. 아래에 임베디드 된 샘플은 Niantic의 현재 AR 엔진으로 묘사 한 피카츄와 Matrix Mill의 Monodepth 기술로 처리 한 피카츄를 비교하고있다.
두 번째 버전 (0:33부터 시작)는 통행인이 피카츄를 숨기고있다. 또한 피카츄는 화분을 지나갈 것이 아니라, 제대로 뒤로 도는. 렌더링은 아직 완전하지 않고, 때때로 일관성과 소음이 나오고있다. 그러나 개발 단계의 데모에서도 리얼 함이 크게 향상되고있는 것이 간파. 불행히도, 포켓몬 GO이 기술이 도입되는시기에 대해서는 아직 정보가 없습니다. 인수 금액 등 자세한 내용도 불분명하다.
Niantic은 이외에도 매우 짧은 레이턴시 AR 경험을 공유 할 수있는 기술을 이용한 게임 데모를 좀했다. 모두 아직 실제 게임에는 도입되어 있지 않다.
예를 들어 Neon라는 코드 네임으로 불리는 실험적인 게임에서 플레이어는 넓은 장소를 돌아 다니고 "탄약"을 포착하고 다른 플레이어를 향해 쏘다 (아래 동영상). :
이 게임에서는 시스템이 다른 플레이어를 인식하여 각 마커를 부여하고 추적하고있는 것이 주목된다. 게임을 떠도는 AR의 '로켓'은 플레이어뿐만 아니라 응용 프로그램을 통과 한 실내 관전자도 실시간으로 볼 수있다. 플레이어가 가진 여러 장치에서 정보를 공유함으로써 시스템은 실시간으로 게임 맵을 업데이트하고 각 플레이어의 상호 위치 관계를 파악한다. Niantic / Portkey이 준비중인 해리포터 게임 에서 마법사의 전투에이 기술이 적용되는 것은 충분히 예상 할 수있다.
공유 AR 개념은 실험적인 3 차원 AR 퍼즐 게임 Tonehenge에도 사용되고있다. Niantic은이 게임을 며칠 개발했다고한다.
이것도 해리포터에 나오는 '마법의 체스'를 연상시키는 분위기가 있었다.
마지막으로 Niantic은 Real World Platform을 소개했다. 이것은 iOS 및 Android에 걸쳐 크로스 플랫폼 도구 및 API 세트 써드 파티 개발자들이 AR 게임을 개발하기위한 기반이된다. 포켓몬 GO와 비슷한 메커니즘을 갖춘 자체 게임 개발있다. 독특한 컨셉을 준비하면,지도, 스푸핑 도구 세계 게임 가능 지점의 거대한 데이터베이스 등을 Niantic 제공한다.