구글 딥마인드가 집중하는 핵심 연구의 한 축에는 인간처럼 환경을 인식하고 자율적으로 행동하는 범용 AI 에이전트 ‘SIMA’가 있다. SIMA는 '알파고'나 '알파스타'처럼 특정 게임에서만 초인적인 성능을 발휘하는 단일 목적형 AI가 아니라, 다양한 환경에 적응하는 ‘범용성’을 위해 개발 중인 범용 AI다. 그렇기에 SIMA는 게임 코드나 텍스트를 인식하지 않고, 실제 인간처럼 화면에 존재하는 시각 정보인 '픽셀'을 보고 키보드와 마우스로 조작하는 방식으로 학습한다.

함께 인간의 ‘자연어 명령어’를 이해하는 능력을 갖춰 "우주선에 타서 날아가라"고 명령하면, 처음 보는 3D 그래픽 환경에서도 스스로 상황을 인지하고 명령을 수행한다. 이를 테스트하는 환경을 확장하기 위해 유명 MMORPG ‘이브 온라인’의 개발사와 파트너십을 맺고, 경제 시스템과 장기적 계획이 필요한 지속형 세계에서 인지·메모리·다중 플레이어 상호작용을 테스트하며 인지 및 반응에 대한 발전을 이뤄나가고 있다.

또다른 축인 ‘Genie’는 환경 역학 시뮬레이션을 제공하는 ‘월드 모델’이다. 2024년 2월 첫 공개된 Genie는 당시 버전 1을 시작으로 약 18개월 만에 Genie 3이라는 타이틀을 붙인 차기 버전이 나올 정도로 빠르게 발전하고 있다. 무파렉 디렉터가 언급한 Genie 3의 핵심은 단 한 줄의 텍스트나 이미지 프롬프트만으로 실시간 상호작용이 가능한 판타지 및 실사형 3D 환경을 초당 24프레임으로 생성해 낼 수 있다는 것이다. 특히 빛의 반사, 중력, 물과 바람의 흐름 등 복잡한 물리법칙도 스스로 시뮬레이션하고, 화면에서 잠시 사라진 사물이나 사용자의 행동을 기억하는 장기 기억 능력을 보여주며 독보적인 성능을 증명한다.

구글 딥마인드가 그리는 미래 비전의 핵심은 바로 이 두 개의 축이 맞물리며 시작된다, 에이전트와 월드 모델이 서로간에 액션을 수행해 상호 학습을 해내는 ‘AGI 연구 플라이휠(선순환 구조)’을 만드는 것이다. 이는 Genie가 실시간으로 만들어내는 매우 낯선 환경을 범용 AI 에이전트 SIMA가 자율적인 행동으로 탐사하며 학습하는 메커니즘으로 수행한다. 이 과정에서 SIMA가 겪는 시행착오 등의 수많은 데이터는 Genie를 훈련하고 개선하는 일에 쓰인다. 이 피드백 루프는 현실에서 발생할 수 있는 위험 요소를 완전히 배제한 채, 통제된 가상 환경 안에서 AI의 학습 속도를 가속화한다.

무파렉 디렉터는 게임용 AI 연구의 미래에 대해 "반복하는 AI 기능의 일부 또는 전부가 반드시 재미있는 경험으로 이어질 것이라고 가정하지 않는다. 하지만 그것을 질문, 가설, 아이디어로 취급하여 테스트하고 재미를 찾을 때까지 반복해야 한다"고 짚었다. 이어 "커뮤니티를 발전시키고 연구나 새로운 게임 플레이 경험을 제공하기 위해서는 말만 하는 것에 그치지 말고 실행해야 한다"며, 게임 업계 전체가 새로운 경험을 탐구하고 전 세계와 공유하도록 영감을 주는 인간의 역할이 가장 중요함을 강조했다.