현실과 가상의 경계를 허물 XR 기술의 등장 콘텐츠융합연구실 정성욱 책임연구원
XR 환경에서 핵심은 사용자와 가상 공간의 완벽한 상호작용입니다. 이를 위해 가장 먼저 선행되어야 할 과정은 기기를 통해 위치를 정밀하게 추정하는 것입니다. 기기의 위치를 정확히 파악하면 가상 객체와 사용자 사이의 상대적 거리를 계산할 수 있어, 사용자가 움직이더라도 가상 객체는 실제 그 자리에 고정된 것처럼 느껴집니다. 이러한 '복합 공간 사용자 위치 추정 기술'은 가상 세계의 현실감을 결정짓는 중요한 토대가 됩니다. 단순히 보는 것을 넘어 가상 객체와 상호작용하기 위해서는 사용자의 행동을 인식하는 기술이 필요합니다. 예를 들어 가상의 여우를 쓰다듬는 동작을 구현하려면 사용자의 관절 정보를 추출하는 '다인칭 사용자 3차원 정밀 동작 분석 기술'이 활용됩니다. 여기에 여러 사람이 동시에 같은 가상 객체를 관찰하고 경험할 수 있도록 돕는 플랫폼 기술이 결합되어야 합니다. 이러한 복합적인 기술들은 사용자가 가상 세계에 몰입할 수 있도록 돕는 핵심적인 요소입니다. 고성능 PC가 아닌 모바일 기기에서 XR 콘텐츠를 구동하기 위해서는 최적화 과정이 필수적입니다. 연구진은 안드로이드나 iOS 등 다양한 운영 체제에 적용할 수 있도록 딥러닝 추론 네트워크를 경량화하고 알고리즘을 최적화했습니다. 리소스가 한정된 스마트폰이나 HMD에서도 끊김 없이 몰입형 XR 시스템이 작동하게 만든 것입니다. 이를 통해 사용자들은 장소의 제약 없이 자신의 모바일 기기만으로도 수준 높은 증강 현실 콘텐츠를 원활하게 체험할 수 있게 되었습니다. 이미 XR 기술은 우리 생활 곳곳에 깊숙이 자리 잡고 있습니다. 고등학생들은 스마트 패드를 활용한 디지털 교육을 받고 있으며, 국방 분야에서는 HMD를 착용하고 실전과 같은 훈련을 진행합니다. 실질적인 사업화 성과도 뚜렷합니다. 서울 노원 기차마을의 스키장 디오라마 증강현실이나 국립중앙도서관 실감 서재의 '자산어보' 콘텐츠가 대표적인 사례입니다. 이처럼 XR은 먼 미래의 이야기가 아니라, 교육, 의료, 문화를 아우르며 현재 우리 곁에서 실시간으로 서비스되고 있습니다. 기술 개발의 여정은 세계 최고라는 목표를 향한 끊임없는 도전이었습니다. 초기 PC 환경에서 돌아가던 알고리즘을 스마트폰이라는 한정된 자원 안으로 성공적으로 옮겨냈을 때의 감동은 연구진에게 큰 자부심을 안겨주었습니다. 이제 XR 기술은 응용 단계를 넘어 더 높은 차원의 연결을 꿈꾸고 있습니다. 향후에는 원격지에 있는 사용자가 로컬 공간에 참여하여 실제로 보고 만지며 협업할 수 있는 기술을 개발하여, 시공간의 제약을 완전히 허무는 실감형 소통을 실현할 계획입니다.
