"원숭이는 말 없이 바나나 깐다"…로봇 시대 열 핵심은 '행동하는 AI'

(서울=뉴스1) 정희진 기자 = 삼성전자는 30일 삼성 AI 포럼 2026을 개최해 AI를 현실 세계로 확장하기 위한 기술 과제를 논의했습니다.

패널 토론에서는 에이전틱 AI와 피지컬 AI의 융합을 주제로 깊이 있게 논의했는데요. 전문가들은 디지털 에이전트와 피지컬 AI의 차이에 주목했습니다.

란제이 크리슈나 미 워싱턴대 교수는 물리적 세계와 디지털 환경의 가장 큰 차이, 현실에서는 사람과 물체가 계속 움직인다는 점이라고 지적했는데요. 거대언어모델(LLM)이 보여준 언어·추론 지능만으로는 실제 물리 세계를 작동하는데 명확한 한계가 있다고 진단했습니다.

김윤형 삼성리서치 상무 역시 현재의 거대언어모델은 기본적으로 언어공간에서 작동한다며 "이런 능력이 시각이나 로봇 제어에 쉽게 이전될 것이라고 생각하지 않는다"고 했습니다.

크리슈나 교수는 언어가 설명하는 능력은 뛰어나지만, 공간과 물체의 움직임 이해에는 한계가 있다고 설명했는데요. 그는 "원숭이는 언어 없이 바나나 껍질을 벗기고 까마귀는 도구를 만들어 음식을 얻는다"며 "물리 세계의 수많은 일은 언어라는 병목을 가진 이산적 표현에 의존할 필요가 없다"고 했습니다.

크리슈나 교수는 언어만으로 추론하는 대신 '스케치'를 활용하자고 제안합니다. 이는 모델의 추론을 텍스트가 아닌 실제 이미지의 픽셀에 연결하는 방식입니다.

또한 그는 하나의 거대한 모델에 피지컬 AI의 모든 판단을 맡기는 것이 아닌 역할에 따른 계층적 구조를 제안했습니다. 상위 언어모델 기반 정책이 계획을 세우고 과제를 분해하며 기억을 관리하는 한편, 하위에서는 빠르고 작은 모델이 실제 변화에 대응하는 방식입니다.

김 상무는 피지컬 AI에서 지속 학습을 지원하는 구조가 더욱 중요해질 것으로 전망했습니다. 그러면서 ”디지털 세계에서 성공한 기법을 물리 세계로 확장하려면 훨씬 더 효율적인 새로운 알고리즘이 필요할 가능성이 있다“고 덧붙였습니다.

#피지컬AI #챗GPT #제미나이 #삼성 #삼성전자 #LLM