편집자 주 — 이 글은 2024년 3월 14일 중앙일보 「이수화의 마켓 나우」에 처음 게재됐고, 2024년 한림대학교 도헌학술상 칼럼상에 선정됐다. 핵심 명제는 혼합현실의 성패가 화면 해상도만이 아니라 인간이 감각·언어·기억으로 현실을 구성하는 방식과 얼마나 잘 맞물리는가에 달렸다는 것이다. 2026년의 생성형 AI와 공간 컴퓨팅 관점에서 보면 MR은 현실 복제가 아니라 개인의 기억과 해석을 타인과 공유하는 인터페이스로 읽을 수 있다.
이 글은 2024.03.14 중앙일보에 처음 게재되었습니다. 개인 저술 아카이브 보존을 위해 재수록합니다. 원문 보기
2024년 도헌학술상 칼럼상 수상작
이 칼럼은 당시 한림대학교 AI융합연구원 교수로 재직 중이던 이수화의 글로, 2024년 한림대학교 도헌학술상 칼럼상에 선정되었습니다. 도헌학술원 선정 안내 · 전자신문 보도
애플이 비전 프로를 1월 19일 출시했다. 헤드셋으로 시선추적 기능과 몰입감을 제공하여 혼합현실(MR) 시장에서 새 기준을 제시하려는 승부수다. 시장 평가는 복합적이다. 헤드셋의 무게감, 어지러움, 메스꺼움에 대해서는 반응이 부정적이다.
MR은 실제 세계와 가상 세계를 결합해 새로운 환경과 시각적 표현을 생성하는 기술이다. 사용자는 두 세계에서 가상 객체를 혼합해 보거나, 두 세계 환경이 결합한 공간에서 상호작용할 수 있다.
메타 CEO 저커버그는 지난 2월 말 방한해 LG와 확장현실(XR) 기기 공동개발을 논의했다. XR은 MR·가상현실(VR)·증강현실(AR)을 모두 아우르는 용어다. 사실 메타의 VR 사업부문인 리얼리티 랩스는 2021년 102억 달러(약 13조3800억원), 2022년 137억 달러(약 18조원)의 손실을 기록했다. 메타는 돌파구가 필요했다.
MR이나 XR이 참조할만한 선례가 15년 전 있었다. 글로벌 TV 시장의 양대 축인 삼성전자와 LG전자가 안경을 쓰고 보는 깊이 지각 3D TV를 각각의 정교한 방식으로 상용화했다. 시장 반응은 의외로 냉담했다. 사람들은 놀라운 몰입감보다 안경 착용의 불편함에 더 민감했다.
어제의 실패와 오늘의 도전 사이에 중대 기술이 등장했다. 바로 생성형 인공지능(GAI) 혹은 자연언어이해기술이다. GAI를 말할 때 대부분 매체와 애널리스트들이 놓치는 핵심이 있다. 인간의 세상 인식은 물리적 세계를 사진 찍어 머릿속에 저장하는 과정이 아니다. 인간은 감각적으로 필터링된 정보를 주관적으로 해석하여, 각종 착시와 착각이라는 오류와 더불어 물리 세계에 없는 상징인 언어·문자·기호를 그 정보에 덧붙인다. 마지막으로 사회적인 상호작용과 문화적 맥락을 얹어 머릿속에 저장한다. 같은 세상을 사람마다 전혀 다르게 지각하여 기억한다.
철학자 후설(1859~1938)의 현상학, 하이데거(1889~1976)의 존재론은 MR과 흡사한 점이 있다. 그들은 인간이 세상을 어떻게 경험하고 이해하는 지에 대해 깊은 질문을 던진다. 둘의 성찰은 MR과 밀접하다. 우리가 경험하는 세계는 순수하게 주관적이며, 우리의 인식과 해석을 통해 형성되는 왜곡이다. MR은 현실을 기억과 혼합하는 왜곡이다.
인간의 왜곡된 세상 인식과 MR 사이의 유사성을 인지하는 것은, 인간에게 보다 넓은 세상 인식의 가능성을 선물하는 데 중요한 출발점이다. 왜곡된 각자의 기억을 다시금 꺼내서 타인의 헤드셋에 보여줄 때, 기억의 주체인 나조차도 말로 설명할 수 없는 내 세계를 타인과 공유할 수 있게 된다. 그 공유를 위한 대장정에서 우리 기업들과 애플·메타가 어떤 기여를 할지 주목된다.
핵심 Q&A
3D TV의 실패가 혼합현실에 주는 교훈은 무엇인가?
기술적 몰입감이 높아도 무게·어지러움·착용 불편 같은 신체 경험을 무시하면 채택되지 않는다는 점이다. MR은 디스플레이 성능뿐 아니라 몸과 환경의 상호작용을 함께 설계해야 한다.
생성형 AI는 MR의 가능성을 어떻게 넓히는가?
사용자의 언어·기억·상황을 해석해 같은 물리 공간에 개인화된 의미 층을 만들 수 있다. 그 결과 MR은 정해진 가상 객체를 보여주는 장치를 넘어 서로 다른 주관적 세계를 번역하고 공유하는 매체가 된다.