[서울=뉴시스]이주영 기자 = 사람이 하는 말을 듣고 이해한 뒤, 즉시 행동으로 옮기는 '통합 로봇 인공지능(AI)'이 나온다. 크래프톤이 대화를 담당하는 AI와 로봇의 움직임을 제어하는 AI를 하나로 합친 차세대 로봇 AI 모델을 개발해 내년 초 공개한다.

이강욱 크래프톤 최고AI책임자(CAIO)는 13일 서울 코엑스에서 열린 '피지컬 AI 테크위크' 특별강연에서 로봇 AI 개발 계획을 이같이 밝혔다.

이 CAIO는 "내년 초쯤 통합 모델을 세상에 공개할 수 있을 것"이라며 "여러 AI 모델을 억지로 연결하던 기존 방식보다 훨씬 더 자연스럽고 똑똑하게 움직이는 로봇이 탄생할 것"이라고 자신했다.

현재 로봇 AI 분야에서는 카메라로 주변 환경을 인식하고 사람의 지시를 받아 물건을 집거나 이동하는 기술이 발전하고 있다. 그러나 로봇이 작업 도중 사람과 자연스럽게 대화하거나 바뀐 지시를 즉시 반영하는 데는 한계가 있다는 것이 이 CAIO의 설명이다.

이 CAIO는 로봇의 능력을 '신체 지능'과 '사회적 지능'이라는 두 축으로 나누어 설명했다. 신체 지능이 걷거나 물건을 집는 능력이라면, 사회적 지능은 사람이 무엇을 원하는지 이해하고 지시가 모호할 때 다시 질문하거나 상황 변화에 맞춰 행동을 조정하는 능력이다.

이 CAIO는 "현재 피지컬 AI에서는 모두가 신체 지능만 바라보고 있는 반면 사회적 지능을 바라보는 회사나 연구소는 많이 부족하다"고 지적했다. 로봇의 신체 능력이 아무리 발전하더라도 사람과 소통하는 능력이 뒷받침되지 않으면 실제 생활에 도입하는 데 어려움이 따른다는 설명이다.

크래프톤은 로봇의 사회적 지능을 높이기 위해 두 종류의 AI 모델을 결합했다. 하나는 사람과 대화하는 거대언어모델(LLM), 다른 하나는 주변 환경을 인식하고 로봇의 움직임을 생성하는 시각·언어·행동(VLA) 모델이다. 두 모델을 연결하고 작동을 조율하는 데는 '하네스' 기술을 활용했다.

이날 강연에서는 지난 8월 공개한 로봇 AI 시스템의 시연 영상도 소개했다.

로봇이 음료수를 집어 들자 사람이 "그거 말고 다른 거"라고 지시를 바꿨고, 로봇은 하던 동작을 멈춘 뒤 다른 음료수를 집었다. 이 CAIO는 해당 시연이 사전에 대본을 정하지 않은 상태에서 이뤄졌다고 강조했다.

이 방식으로 로봇이 사람과 대화하면서 지시에 따라 행동을 바꾸는 데 성공했지만 기술적 한계도 남아 있다. 대화와 동작을 서로 다른 AI 모델이 처리하다 보니 두 모델 사이에서 상황과 작업의 맥락을 정확하게 공유하기 어렵다는 것이다.

이에 크래프톤은 대화와 동작을 하나의 AI 모델에서 처리하는 기술을 개발하고 있다. 로봇이 주변 환경을 보고 사람의 말을 들은 뒤 상황에 맞춰 대답하고 움직일 수 있도록 하는 것이 목표다. 장기적으로는 촉각 정보까지 함께 처리하는 모델로 발전시킬 계획이다.

크래프톤은 게임 AI 연구를 통해 확보한 기술과 인력을 로봇 분야로 확대하고 있다. 이 CAIO에 따르면 크래프톤에서는 현재 120명이 넘는 연구인력이 AI를 연구하고 있다. 게임과 시뮬레이션 환경에서 확보할 수 있는 데이터를 실제 로봇의 학습에 활용하는 연구도 진행 중이다.


◎공감언론 뉴시스 zoo@newsis.com