“표정·시선·악수까지 재현”…ETRI, 실감형 원격협업 기술 공개

ETRI 연구진이 가상 악수 데모 콘텐츠를 시연하고 있다.[ETRI 제공]

[헤럴드경제=구본혁 기자] 국내 연구진이 마치 같은 공간에 있는 것처럼 상대방과 실시간으로 얼굴을 마주하고 악수까지 나눌 수 있는 차세대 원격 협업 기술을 공개했다.

한국전자통신연구원(ETRI)은 표정이나 시선, 악수까지 정밀하게 재현할 수 있는 ‘확장현실(XR) 환경 원격 실재감(Telepresence) 증강 기술’을 선보인다고 22일 밝혔다.

이번에 공개된 기술은 서로 다른 물리적 공간에 있는 두 사용자가 가상현실(VR)과 증강현실(AR) 환경 속에서 동시에 회의에 참여함으로써, 실제 회의실에서 마주 앉아 대화하는 것처럼 몰입감 있게 상호작용할 수 있도록 구현됐다.

ETRI가 개발한 이번 원격 실재감 증강 기술은 ▷엑소스켈레톤 기반 능동형 가상 악수 기술 ▷실시간 입체 실감화 기술 등 두 가지 핵심 요소로 구성된다.

먼저 엑소스켈레톤 기반 능동형 가상 악수 기술은 단순한 손의 움직임뿐만 아니라 악수할 때 상대방이 손을 쥐는 힘의 강도와 방향까지 실시간으로 느낄 수 있도록 설계된 첨단 촉각 피드백 기술이다.

이를 위해 연구진은 외골격형 액티브 타입 XR 햅틱 글러브를 독자적으로 설계하고 개발했다.

이 햅틱 장갑은 기존의 단순 진동 수준을 넘어 실제 악수에 가까운 정밀한 촉각 경험을 제공한다.

실시간 입체 실감화 기술은 양안 영상 기반의 헤드마운티드 디스플레이(HMD) 환경에서 생성형 인공지능(AI)을 활용해 디지털 휴먼의 입체감과 자연스러운 표정 표현을 실시간으로 향상시키는 기술이다.

이를 통해 원격 회의 환경에서도 실제 인물에 가까운 자연스러운 얼굴 표현이 가능해졌다.

ETRI 연구진이 확장현실 환경 원격 실재감 증강 기술을 일반에 선보이고 있다.[ETRI 제공]

특히 AI 기반의 3D 배경 생성 기술인 ‘3DGS(3D Gaussian Splatting)’도 함께 적용되어 보다 사실적인 공간감과 몰입감을 구현해냈다.

관람객들은 이러한 시스템을 통해 실제 회의실에 있는 것처럼 원격 참가자와 아바타를 통해 눈을 마주치고 손을 맞잡는 체험을 하며, 기존 화상회의를 넘어서는 새로운 차원의 몰입형 협업 환경을 생생하게 경험했다.

정성욱 ETRI 콘텐츠융합연구실 책임연구원은 “이번 기술은 원격 협업의 개념을 단순한 영상통화를 넘어 ‘실감형 상호작용’의 시대로 전환하는 중요한 계기가 될 것”이라며 “향후 교육, 산업, 의료 등 다양한 분야에서 국민이 직접 체감할 수 있는 미래 협업 솔루션으로 발전시켜 나가겠다”고 밝혔다.