사람과 로봇의 대화에서 어색함은 답변 내용보다 말을 주고받는 사이의 공백에서 발생하기도 한다. 질문을 들은 로봇이 답변을 생성하는 동안 완전히 멈추면 사용자는 로봇이 자신의 말을 인식했는지 판단하기 어렵다. 시선과 표정, 호흡처럼 대화 전후에 이어지는 비언어적 반응은 상호작용의 자연스러움을 결정하는 요소로 꼽힌다. AI 로보틱스 기업 엑스와이지가 양팔 세미 휴머노이드 ‘듀스(DEUX)’에 대화 맥락에 맞춰 행동을 생성하는 기술을 적용했다.
엑스와이지는 듀스에 ‘맥락 인식 행동 생성(Context-aware Behavior Generation)’ 기술을 적용해 음성과 표정, 시선, 몸짓을 하나의 반응으로 연결했다. 듀스는 사람이 “안녕”이라고 인사하면 손을 흔들고 표정을 바꾸며 응답한다. 박수와 엄지 들기, 하트 등 여러 제스처 가운데 대화 내용에 적합한 행동을 선택해 음성 답변과 함께 표현한다.
엑스와이지의 양팔 세미 휴머노이드 듀스는 대화 맥락에 따라 음성과 시선, 표정, 몸짓을 연결해 표현한다. (사진 제공: 엑스와이지)
말하지 않는 순간에도 움직인다…시선·호흡·제스처 연결
이번 기술에서 엑스와이지가 집중한 부분은 질문을 듣고 답변을 준비하는 동안의 행동이다. 듀스는 답변을 생성하는 순간에도 양팔을 미세하게 움직이는 호흡 동작과 눈 깜빡임, 자세 변화를 이어간다.
사용자는 로봇의 작은 움직임을 통해 대화가 계속되고 있음을 인식할 수 있다. 특정 제스처를 실행할 때만 움직이는 방식에서 벗어나 사람과 마주하는 전체 과정에 비언어적 반응을 배치했다.
듀스는 음성과 시각 정보를 함께 활용해 대화 상대의 위치를 파악한다. 사람이 있는 방향으로 몸 전체를 돌려 바라보고, 손을 흔들거나 박수를 치는 동안에도 호흡과 눈 깜빡임 같은 기본 동작을 유지한다.
행동의 방향과 시선도 함께 움직인다. 몸을 숙여 인사할 때는 두 손을 모으고 시선을 아래로 향하게 하며, 특정 방향을 가리킬 때는 손과 시선이 같은 지점을 향하도록 설계했다. 로봇의 음성과 몸짓이 서로 다른 의미를 전달하지 않도록 하나의 의도로 묶는 방식이다.
엑스와이지는 사람의 위치를 찾아 바라보는 현재 기술에 상대방의 반응을 인식하는 기능을 추가할 계획이다. 대화 도중 상황이 달라지면 시선을 이동하거나 사람이 답변을 끊고 새로운 질문을 던질 때 행동을 전환하는 기술을 개발하고 있다. 관련 기술의 세부 내용은 엑스와이지 공식 미디엄 기술 블로그에서 확인할 수 있다.
고미종 엑스와이지 로봇지능화팀 파트장은 “사람이 로봇과 마주할 때 느끼는 자연스러움은 대화 내용뿐 아니라 시선과 표정, 몸짓처럼 대화 전후에 이어지는 반응이 함께 만든다”며 “듀스가 상대와 주변 상황을 이해하고 그에 맞는 행동을 자연스럽게 표현하도록 상호작용 기술을 계속 고도화하겠다”고 말했다.
The post 대답 전에도 멈춰 서지 않는 로봇…듀스, 맥락 따라 표정·몸짓 만든다 appeared first on 벤처스퀘어.