[XR 연대기] 인간의 지각을 분석하여 가상 현실의 미래를 그린 뇌과학적 프로그래머, 마이클 아브라시(Michael Abrash)

가상 현실(VR)을 구현하기 위해서는 컴퓨터의 성능을 극한으로 끌어올리는 하드웨어 기술도 필요하지만, 무엇보다 ‘인간의 뇌와 감각이 어떻게 작동하는가’를 완벽하게 이해해야 합니다. 기계가 만들어낸 가짜 신호를 인간의 뇌가 진짜 현실로 믿게 만들어야 하기 때문입니다.

이 분야에서 세계 최고의 권위자이자, 현대 VR의 기술적 마일스톤을 제시한 인물이 있습니다. 바로 전 이드 소프트웨어 핵심 개발자이자, 전 메타 리얼리티 랩스(Meta Reality Labs)의 수석 과학자 마이클 아브라시(Michael Abrash, 1957~현재)입니다. 천재 개발자 존 카맥과 함께 3D 그래픽의 신화를 쓰고, 메타(Meta)의 글로벌 VR 연구를 총괄하며 가상 세계의 청사진을 제시한 그의 여정을 정리해 드립니다.

1. 밸브(Valve)에서 시작된 VR의 기초 연구

마이클 아브라시는 1990년대 존 카맥과 함께 《퀘이크(Quake)》 엔진을 개발하며 전 세계 프로그래머들에게 프로그래밍의 바이블로 통하는 저서들을 남긴 전설적인 최적화 전문가였습니다. 그런 그가 가상 현실에 본격적으로 매료된 것은 글로벌 게임 기업 밸브(Valve)에 합류하면서부터였습니다.

• 인간의 지각 연구: 2011년 밸브에 입사한 아브라시는 하드웨어 개발에 앞서 ‘인간의 뇌가 가상을 실재로 인식하는 조건’을 정밀하게 연구하기 시작했습니다.
• 존재감(Presence)의 공식화: 그는 단순히 화질이 좋은 것을 넘어, 화면이 움직일 때 잔상이 남지 않는 기술(Low Persistence)과 초당 프레임 수, 시야각의 관계를 수학적으로 정립했습니다. 그가 밸브에서 정립한 이 연구 데이터는 훗날 밸브 인덱스(Valve Index) 헤드셋과 오큘러스 리프트 개발의 결정적인 파운데이션이 되었습니다.

2. 메타 수석 과학자로서 가상 현실의 10년 뒤를 예견하다

2014년 페이스북(현 메타)이 오큘러스를 인수한 직후, 존 카맥의 강력한 설득으로 마이클 아브라시는 메타의 VR 연구소인 ‘메타 리얼리티 랩스(Meta Reality Labs)’의 수석 과학자로 합류합니다. 이후 그는 매년 메타의 공식 개발자 컨퍼런스 무대에 올라 향후 5년, 10년 뒤 다가올 VR/AR 기술의 타임라인을 정확히 예측하는 ‘XR 업계의 예언자’로 활약했습니다.

• 지각적 컴퓨팅(Perceptual Computing): 아브라시는 "VR은 컴퓨터 과학이 아니라, 인간의 지각 시스템을 해킹하는 학문"이라고 정의했습니다.
• 가상 클론과 코덱 아바타(Codec Avatar): 그가 이끈 리얼리티 랩스는 거대한 카메라 릭 안에서 인간의 미세한 표정과 피부 질감, 눈동자의 움직임을 실시간으로 복제하여 가상 공간에 완벽한 '디지털 분신'을 만들어내는 코덱 아바타 기술을 선보였습니다. 이는 멀리 떨어진 사람들이 메타버스 공간에서 만났을 때 실제 앞에 있는 것과 같은 소름 돋는 몰입감을 선사했습니다.

3. 지독한 고집으로 풀어낸 하드웨어 난제들

마이클 아브라시는 완벽한 가상 현실을 만들기 위해 디스플레이와 광학 기술의 한계를 끊임없이 밀어붙였습니다.

• 가변 초점(Varifocal) 렌즈: 기존 VR 헤드셋은 렌즈의 초점이 고정되어 있어 오랫동안 화면을 보면 눈의 피로와 어지러움(VAC 현상)을 유발했습니다. 아브라시는 사용자의 시선이 머무는 곳에 따라 렌즈가 물리적으로 움직이거나 디스플레이를 변형하여 실제 인간의 눈처럼 초점을 맞추는 '하프 돔(Half Dome)' 프로토타입 연구를 주도했습니다.
• 망막 해상도(Retinal Resolution): 그는 인간의 눈이 화소(Pixel)를 구분하지 못하는 한계점인 '도당 60픽셀(60 PPD)'을 달성하기 위한 디스플레이 최적화 기술을 끊임없이 연구하며, 메타 퀘스트 시리즈의 화질을 세대마다 혁신적으로 끌어올렸습니다.

4. "우리가 보는 현실은 뇌가 만든 환상이다"

마이클 아브라시가 대중들에게 가장 강렬한 인상을 남긴 것은 2015년 F8 컨퍼런스 기노트였습니다. 그는 무대 화면에 유명한 착시 그림들을 띄우며 관객들의 뇌를 완전히 속여 보였습니다.

그는 "인간의 눈은 불완전하며, 우리가 '현실'이라고 믿는 것은 사실 뇌가 주변 신호들을 조합해 만들어낸 해석(환상)에 불과하다"고 말했습니다. 따라서 기계가 인간의 뇌에 완벽하게 정렬된 시각, 청각, 촉각 신호만 줄 수 있다면 가상 세계는 현실과 100% 동일한 가치를 지니게 될 것이라는 게 그의 핵심 철학이었습니다. 그의 이러한 철학적 접근은 XR 기기를 만드는 수많은 엔지니어들에게 기술적 영감을 주었습니다.

5. 결론: 인간을 이해하려 했던 위대한 과학자

마이클 아브라시는 기술을 단순히 숫자로 보지 않고, 인간의 신체와 인지 구조에 완벽하게 결합해야 하는 유기체로 보았습니다. 그의 집요한 지각 연구와 광학 혁신 덕분에 VR 기술은 조잡한 입체 모니터 수준을 벗어나 인간의 오감을 확장하는 진정한 공간 컴퓨팅의 영역으로 진화할 수 있었습니다.

메타의 XR 연구 사령탑으로서 그가 남긴 수많은 연구 논문과 기술적 로드맵은 메타 퀘스트 3나 애플 비전 프로 같은 현세대 기기들의 든든한 자양분이 되었습니다. 코드로 인간의 감각을 이해하고 확장하려 했던 거장, 마이클 아브라시의 연대기는 가상 세계의 진정한 깊이가 어디서 오는지 증명해 줍니다.