Apple Vision Pro 내부의 모든 단일 센서와 개별적으로 설계된 기능

휴대폰, 노트북, 시계, 태블릿, 텔레비전, 심지어 마우스까지 대체하도록 설계된 3,499달러 상당의 장치에 대해 Apple의 Vision Pro에는 사용자의 움직임, 시력, 몸짓, 음성 명령, 그리고 우주에서의 당신의 위치. Apple의 자체 발표에 따르면 Vision Pro에는 내부 및 외부에 최대 14개의 카메라, 1개의 LiDAR 스캐너, 여러 개의 IR 및 보이지 않는 LED 조명 장치가 있어 사용자가 현재 어디에 있는지, 무엇을 하고 있는지 파악하는 데 도움이 됩니다. 이 외에도 헤드셋에는 이러한 모든 센서(및 기타 몇 가지 센서)의 데이터를 처리하는 전용 R1 Apple Silicon 칩이 있어 "공간 컴퓨팅"을 향한 Apple의 점진적인 전환을 가장 잘 표현하는 데 도움이 됩니다.

Tim Cook은 처음으로 혼합 현실 헤드셋을 공개하면서 "Vision Pro는 새로운 종류의 컴퓨터입니다."라고 말합니다. "그것은 당신이 살펴보는 첫 번째 Apple 제품이지, 보지 않고 살펴보는 것입니다."라고 그는 덧붙이며 Apple이 공간 컴퓨팅으로 전환했음을 나타냅니다. 공간 컴퓨팅이란 무엇입니까? 글쎄요, 데스크탑은 세계 최초의 개인용 컴퓨터, 즉 오늘날 우리가 널리 부르는 PC로 선전되었습니다. 노트북은 데스크탑을 휴대용 형식으로 축소했고, 휴대폰은 더 축소했습니다. 시계에 이르기까지 개인용 컴퓨터를 손목에 올려 놓았습니다. 공간 컴퓨팅은 이제 더 이상 크든 작든 디스플레이에 의해 제한되지 않는다는 점에서 Apple이 개인 컴퓨팅에서 벗어난 첫 번째 변화입니다. Tim은 Alan Dye 디자인 부사장에게 무대를 넘기며 "대신 주변이 캔버스가 됩니다"라고 요약합니다.

공간 컴퓨팅은 기존 디스플레이의 네 모서리가 작업 환경에 어떤 제약도 가하지 않는 컴퓨팅의 새로운 시대를 의미합니다. 대신 실제 환경이 작업 환경이 되며, 화면에 폴더, 창, 위젯이 있는 것처럼 Vision Pro를 사용하면 3D 공간에 폴더, 창, 위젯을 만들 수 있습니다. Dye는 공간 컴퓨팅에서는 새 창을 열기 위해 창을 최소화할 필요가 없다고 설명합니다. 창 하나를 옆으로 끌고 다른 창을 열면 됩니다. Apple의 VisionOS는 방과 시각적 주변을 OS로 바꿔 원하는 곳에 여러 개의 화면/창을 만들고, 이동하고, 크기를 조정할 수 있도록 해줍니다. 마이너리티 리포트(Minority Report)나 토니 스타크(Tony Stark)의 홀로그램 컴퓨터를 생각해보세요… 하지만 더 좋고 고급스러운 인터페이스를 갖추고 있습니다.

Vision Pro 헤드셋의 중심에는 가상과 현실이 원활하게 결합되도록 함께 작동하는 두 개의 칩이 있습니다. Vision Pro에는 컴퓨팅 및 멀티태스킹 처리에 도움이 되는 Apple의 M2 실리콘 칩과 헤드셋 전용의 새로운 R1 실리콘 칩이 장착되어 있습니다. 이 칩은 헤드셋 내부 및 외부의 모든 센서와 함께 작동하여 시력을 추적하고 입력을 제어하며 또한 가상 요소가 현실 세계에 원활하게 존재하도록 도와 주변 세계에 그림자를 드리우거나, 이동할 때 각도를 변경하거나, 누군가가 프레임에 들어올 때 사라지거나 사라지는 등 인상적인 작업을 수행합니다.

R1 칩은 Vision Pro에 포함된 Apple의 비밀 소스와 같습니다. 장치에 있는 모든 단일 센서의 데이터를 처리하여 환경, 위치, 손, 눈의 움직임까지 동시에 놀랍도록 정확하게 추적합니다. 눈의 움직임은 Vision Pro가 사용자가 상호 작용하려고 생각하는 요소가 무엇인지 파악하고 실제로 해당 요소를 진정한 커서로 바꾸는 방법의 기초를 형성합니다. 그 만큼 인상적인 점은 R1이 사용자의 눈 데이터를 사용하여 화면의 어떤 요소를 렌더링할지, 렌더링하지 않을지 파악한다는 것입니다. 주어진 시간에 제한된 영역에만 집중할 수 있다는 점을 감안할 때 R1 칩은 전체 장면을 렌더링하는 데 리소스를 소비하는 대신 시각적 주변의 해당 부분만 선명한 선명도로 렌더링하는 것을 알고 있습니다. 놀랍도록 몰입감 넘치는 경험을 제공하면서 배터리 사용을 최적화하는 놀랍도록 영리한 방법입니다. 그러나 그것이 전부는 아닙니다…

Apple의 신경기술 엔지니어는 Vision Pro의 내부 기술이 얼마나 복잡하고 다소 무서운지 정확하게 베일을 벗었습니다. NDA에 묶여 있는 동안 Sterling Crispin은 트윗을 통해 Vision Pro가 어떻게 시력을 추적하고 인터페이스를 완벽하게 탐색하는지 알고 있는지 공유했습니다. 기본적으로 R1 칩은 사용자의 시선 여정과 의도를 예측하는 데 있어 경계선이 마술처럼 설계되었습니다. "사용자가 실제로 무언가를 클릭하기 전에 클릭할 것이라고 예측하는 것과 관련된 가장 멋진 결과 중 하나는 [...]