[뉴스스페이스=김정영 기자] 메타가 웨어러블 기기에서 실사형 디지털 분신을 띄우는 홀로그램 아바타 기능을 공개했다. 안경을 쓴 사용자가 스마트폰을 들지 않아도 영상통화 상대에게 자신의 얼굴과 표정을 보여줄 수 있도록 하는 기술이다. 메타는 23일(현지시간) 연례 개발자 행사 ‘메타 커넥트 2026’에서 새 ‘메타 VR 글래스’와 ‘메타 레이밴 디스플레이’에 홀로그램 기능을 적용한다고 밝혔다.

engadget, meta, aol, medianama, newsbytesapp, innovation-village, theverge에 따르면, 이번 기능의 핵심은 메타 슈퍼인텔리전스 랩스가 공개한 ‘뮤즈 리얼타임 아바타(Muse Realtime Avatar)’다. 메타는 이를 실시간 음성 상호작용을 표정과 움직임을 갖춘 인터랙티브 아바타로 구현하는 ‘임바디먼트(embodiment) 기술’로 설명했다. 다만 실제 사용자용 홀로그램 기능이 이 모델을 어느 수준까지 직접 활용하는지에 대해서는 공식 발표와 체험기에서 설명의 결이 다소 다르다.

메타의 공식 제품 설명은 레이밴 디스플레이판 홀로그램이 사용자의 음성과 발화 방식으로 표정을 추론한다고 밝히고 있으며, Engadget은 해당 아바타가 뮤즈 리얼타임 아바타 모델을 기반으로 초기 캡처 데이터를 활용했다고 보도했다.

메타의 전략은 기기별로 뚜렷하게 갈린다. 레이밴 디스플레이는 ‘스마트폰 스캔+음성 추론’ 방식이고, VR 글래스는 ‘센서 기반 실시간 전신 표현’ 방식이다. 같은 홀로그램이라는 이름을 쓰지만, 하드웨어 성능과 사용 시나리오에 맞춰 서로 다른 기술 경로를 택한 셈이다.

레이밴은 ‘음성으로 표정 추론’

레이밴 디스플레이 사용자는 Meta AI 앱에서 스마트폰 카메라로 자신의 얼굴을 촬영한 뒤 홀로그램을 만들 수 있다. 메타는 이를 “짧은 셀프 캡처”라고 설명했다. Engadget의 카리사 벨 기자 체험기에 따르면 사용자는 카메라 앞에서 고개를 여러 방향으로 돌리고, 특정 질문에 답해 음성 특성을 입력하며, 웃거나 놀란 표정을 짓는 절차를 거친다. 전체 등록에는 약 5분이 걸린다.

중요한 차이는 레이밴 디스플레이에 사용자의 얼굴을 지속적으로 찍는 내부 카메라가 없다는 점이다. 메타는 “홀로그램은 전적으로 사용자의 음성으로 구동되며, 무엇을 어떻게 말하는지를 바탕으로 표현을 추론한다”고 밝혔다. 즉 상대방이 보는 표정은 착용자의 실제 얼굴 근육 움직임을 그대로 추적한 결과라기보다, 사전 캡처한 외형 데이터와 음성 신호를 결합해 생성한 결과물이다.

이는 프라이버시와 기기 경량화 측면에서는 현실적인 선택이지만, 미세한 표정·시선·입 모양까지 실제 상황과 일치시키는 데에는 한계가 있을 수 있음을 뜻한다. 메타가 홀로그램을 ‘실시간 디지털 표현’으로 내세우면서도, 레이밴 디스플레이판의 작동 원리를 구체적으로 ‘음성 기반 추론’이라고 밝힌 이유다. 향후 서비스 확산 과정에서는 음성과 표정의 불일치, 감정 표현의 오인식, 이용자가 의도하지 않은 인상 전달 여부 등이 품질 평가의 핵심 변수가 될 전망이다.

초기 서비스 범위도 제한적이다. 메타는 레이밴 디스플레이 홀로그램을 올가을 후반부터 미국 이용자를 대상으로 왓츠앱에서 얼리 액세스 방식으로 배포한다고 밝혔다. 공식 발표 기준으로는 Zoom 지원이 확정적으로 명시되지 않았다. Engadget 체험기에서는 WhatsApp과 Zoom 기반 사용 가능성이 언급됐지만, 실제 상용 기능 범위와 국가별 출시 일정은 향후 메타의 별도 공지를 확인할 필요가 있다.

VR 글래스는 ‘전신’으로 간다

메타가 2027년 봄 출시할 메타 VR 글래스는 한 단계 더 공격적인 접근법을 취한다. 메타에 따르면 이 제품은 약 100g으로, 메타 퀘스트 3보다 약 5배 가볍다. 5K ‘인피니트 디스플레이’와 마이크로 OLED 패널을 채택했으며, 배터리와 프로세서를 허리·주머니·가방에 부착할 수 있는 별도 ‘퍽(puck)’ 형태로 분리했다. 미국 판매 가격은 1299.99달러다.

VR 글래스의 홀로그램은 레이밴 디스플레이와 달리 전신 표현을 목표로 한다. Engadget에 따르면 이 기기는 안쪽을 향한 카메라와 센서를 활용해 사용자의 표정을 파악하기 때문에, 레이밴 디스플레이처럼 사전에 표정을 학습시키는 과정이 필요하지 않다. 통화 상대의 실물 크기 홀로그램을 가상 공간에 배치하고, 공간 음향을 통해 목소리가 아바타가 있는 위치에서 들리는 듯한 경험도 제공한다.

메타는 VR 글래스용 홀로그램을 2027년 봄 기기 출시에 맞춰 제공할 계획이다. 이는 ‘얼굴만 보이는 통화’를 넘어 원격 협업과 가족·지인 간 소통에서 상대방의 자세와 몸짓까지 전달하려는 시도다. 특히 가상 업무공간, 원격 회의, 교육·상담, 피트니스 코칭 등에서는 화면 속 작은 얼굴보다 훨씬 높은 현장감을 만들 수 있다.

다만 ‘홀로그램’이라는 표현이 완전한 입체 투사를 의미하는 것은 아니다. Engadget의 사전 체험에 따르면 아바타는 완전한 3D 모델이 아니라 정면 위주로 구현되며, 사용자가 공간 안에서 이동할 때 머리 가장자리와 발 부근에 흐려짐 또는 왜곡이 나타났다. 메타가 보여준 기술은 실사형 텔레프레즌스에 가까워졌지만, 어떤 각도에서도 자연스럽게 보이는 완전한 3차원 디지털 휴먼 단계까지 도달했다고 보기는 어렵다.

“실제 영상인 줄 알았다”는 체험, 그러나 한계도

기술의 설득력은 첫인상에서 드러났다. Engadget의 벨 기자는 WhatsApp 통화에서 메타 관계자의 홀로그램을 처음 봤을 때 아바타라는 사실을 곧바로 알아차리지 못했다고 전했다. 그는 상대방을 막 만난 직후라 특유의 표정과 몸짓을 잘 몰랐다는 조건을 덧붙였지만, 전통적인 VR 아바타보다 훨씬 실감 났다는 평가를 내렸다.

벨 기자는 VR 글래스 기반 홀로그램이 애플 비전 프로의 ‘페르소나(Persona)’보다 자연스럽게 보였다고 평가했다. 애플 페르소나는 초기 버전에서 지나치게 매끄럽고 비현실적인 인상, 하반신과 팔의 표현 부족 등이 지적됐는데, 메타는 전신 표현을 전면에 내세우며 차별화를 시도한 것으로 해석된다. 

메타는 모든 아바타 영상통화에 반투명 워터마크를 넣기로 했다. 딥페이크와 합성 콘텐츠에 대한 사회적 경계가 커지는 상황에서, 통화 상대가 실제 카메라 영상이 아니라 AI 기반 디지털 아바타를 보고 있다는 사실을 알리기 위한 최소한의 식별 장치다. 그러나 체험기에서는 워터마크가 처음에는 셔츠 로고처럼 보였다는 설명도 나왔다. 워터마크의 가시성·표준화·캡처 화면 재유통 때의 유지 여부 등은 향후 신뢰성 논쟁의 대상이 될 가능성이 있다.

플랫폼 전략의 본질은 ‘스마트폰 이후 통화’

이번 발표는 아바타 기능 자체보다 메타의 하드웨어 전략에서 더 큰 의미를 가진다. 메타는 커넥트 2026에서 개인 AI 에이전트 ‘뮤즈’를 AI 글래스에 통합하고, 연말까지 100개 이상의 AI 글래스 스타일을 선보이겠다는 계획도 발표했다. 회사가 그리고 있는 그림은 스마트폰 화면을 보는 시간을 줄이고, 음성·시선·손동작·공간 디스플레이를 통해 AI와 소통하는 개인용 컴퓨팅 환경이다.

홀로그램 통화는 이 전략에서 ‘착용자가 사라지는 문제’를 해결하는 장치다. 스마트 글래스를 쓰고 통화하면 사용자는 상대방을 볼 수 있지만, 상대방은 착용자의 얼굴을 보기 어렵다. 메타는 이 비대칭을 실사형 아바타로 메우려 한다. 단순히 영상통화의 화질을 개선하는 것이 아니라, 카메라 없는 웨어러블을 스마트폰의 통화·소통 도구로 대체하기 위한 인터페이스 실험인 셈이다.

그러나 상용화 초기의 시장성은 아직 검증되지 않았다. 레이밴 디스플레이판은 미국 내 왓츠앱 얼리 액세스로 출발하고, VR 글래스판은 2027년 봄 제품 출시를 기다려야 한다. Engadget에 따르면 두 기기 간 홀로그램 통화도 아직 지원되지 않으며, VR 글래스 아바타 통화는 당분간 VR 글래스 착용자끼리로 제한된다. 기기·국가·앱이 분절된 상태에서는 네트워크 효과를 빠르게 만들기 어렵다.

결국 메타 홀로그램의 성패는 세 가지에 달렸다. 첫째, 음성으로 생성한 표정이 실제 사람의 감정과 충분히 자연스럽게 맞아떨어지는지다. 둘째, 워터마크와 동의 절차가 아바타 사칭·딥페이크 우려를 얼마나 효과적으로 줄이는지다. 셋째, 제한된 왓츠앱·미국 시장을 넘어 업무용 화상회의와 일상 커뮤니케이션으로 연결할 수 있는지다. 메타는 ‘스마트폰을 꺼내지 않는 영상통화’를 제시했지만, 이용자들이 디지털 분신을 실제 얼굴만큼 자연스럽고 신뢰할 수 있는 소통 수단으로 받아들일지는 이제부터의 과제다.