크래프톤, 게임 AI 기술 로봇으로 확장…사회적 지능 강화한 ‘루디 0.2’ 공개

인공지능(AI) 기술이 디지털 환경을 넘어 현실 세계에서 직접 움직이고 사람과 상호작용하는 피지컬 AI(Physical AI) 영역으로 확장되고 있다. 로봇이 정해진 명령을 수행하는 수준을 넘어 사람의 의도를 이해하고 상황 변화에 맞춰 행동하려면 언어 이해와 추론, 환경 인식, 물리적 제어 기술이 함께 작동해야 한다. 특히 가정이나 직장처럼 사람과 공간을 공유하는 환경에서는 명령의 맥락을 파악하고 비언어적 신호에도 반응하는 사회적 지능이 중요한 기술 과제로 떠오르고 있다. 게임 속 가상 세계에서 AI 기술을 축적해 온 크래프톤도 이러한 로봇 지능 연구에 나서며 기술 적용 범위를 현실 공간으로 넓히고 있다.

크래프톤(대표 김창한)의 로보틱스 연구법인 루도 로보틱스(Ludo Robotics)는 사람과 소통하고 협력하는 로봇용 AI 시스템 ‘루디 0.2(Ludi 0.2)’를 공개했다.

루도 로보틱스는 지난 10월 30일(현지시간) 미국 UC 버클리에서 열린 ‘2026 베이지역 로보틱스 심포지엄(Bay Area Robotics Symposium, BARS)’에서 루디 0.2를 발표했다. 이날 발표는 이강욱 크래프톤 최고AI책임자(CAIO) 겸 루도 로보틱스 최고기술책임자(CTO)가 맡았다.

루디 0.2는 지난 8월 공개한 루디 0.1의 후속 버전이다. 기존 시스템의 언어 이해와 물체 조작 기능을 바탕으로 사람의 의도를 파악하고, 변화하는 상황에 대응하며, 제스처와 피드백을 반영하는 능력을 강화했다.

루도 로보틱스가 연구하는 핵심 개념은 ‘사회적 지능(Social Intelligence)’이다. 로봇이 사람의 지시를 단순히 실행하는 데 그치지 않고 대화의 맥락과 주변 상황을 이해하며, 사람과 협력하는 과정에서 자신의 행동을 조정할 수 있도록 하는 기술이다.

기존 루디 0.1은 시각 정보와 언어를 함께 처리하는 비전언어모델(Vision-Language Model, VLM)에 로봇의 이동과 물체 조작 기능을 결합한 시스템이다. 음성 지시를 이해하고 대화 맥락을 유지하며, 명령이 불분명할 때는 추가 질문을 통해 사용자의 의도를 확인하도록 설계됐다.

예를 들어 로봇이 음료를 가져다 달라는 요청을 받아 이동하는 도중 사용자가 다른 음료로 바꿔 달라고 말하면, 기존 작업을 중단하고 새로운 지시에 따라 다른 음료를 집어 전달하는 방식이다. 사전에 정해진 동작을 반복하는 대신 작업 도중 발생하는 지시 변경에도 대응할 수 있도록 했다.

루디 0.2는 이러한 상호작용 능력을 확장한 버전이다. 사람의 의도와 피드백, 사회적 신호에 반응하는 기능을 비롯해 변화하는 작업 환경에서도 맥락을 유지하는 기억 및 추론 능력을 고도화했다. 이동과 물체 조작, 사람과의 상호작용을 연결하고 제스처를 인식해 반응하는 기능도 강화했다.

제스처 이해·기억·추론 통합…’루디 1.0’으로 로봇 지능 고도화

루디 0.2의 주요 기술 개선은 로봇이 사람과 함께 작업하는 과정에서 발생하는 다양한 상황을 처리하는 데 초점을 맞췄다.

먼저 사회적 지능은 사용자의 말뿐 아니라 의도와 피드백, 주변의 사회적 신호를 반영해 행동을 조정하는 기능이다. 기억 및 추론 기능은 작업이 변경되거나 새로운 지시가 주어져도 이전 대화와 작업의 맥락을 유지하고 다음 행동을 판단하도록 지원한다.

이동과 물체 조작, 상호작용 기능을 유기적으로 연결하는 기술도 개선했다. 로봇이 특정 물체를 인식하고 접근한 뒤 집어 전달하는 과정에서 여러 기능이 하나의 작업 흐름으로 작동하도록 하는 것이다.

사람의 제스처를 이해하는 기능과 정해진 환경에서 부드럽고 유연하게 움직이는 물리적 제어 능력 역시 이번 버전의 주요 개선 사항이다. 이는 사람과 로봇이 동일한 공간에서 상호작용할 때 필요한 기술 요소로, 언어 이외의 신호까지 로봇의 행동 판단에 활용하는 데 목적이 있다.