엔비디아와 칭화대학교, 다중 에이전트 시뮬레이션의 한계를 뛰어넘는 ‘감마-월드(Gamma-World)’ 공개
비디오 월드 모델은 단일 에이전트 관점에서 다중 에이전트 협업 방향으로 전환되고 있습니다. 기존 모델은 일반적으로 단일 에이전트를 가정하기 때문에, 동일한 가상 세계 내에서 여러 플레이어가 상호 작용하고 서로를 관찰하는 복잡한 시나리오를 처리하는 데 한계가 있습니다. 이러한 아키텍처상의 병목 현상을 극복하기 위해 NVIDIA는 칭화대학교, 토론토 대학교, 벡터 연구소(Vector Institute)와 협력하여 새로운 다중 에이전트 월드 모델 솔루션인 ‘감마-월드(γ-World)’를 선보였습니다.
다중 에이전트 월드 모델링의 주요 과제는 시간적, 관점 간, 상호작용적 일관성이라는 세 가지 유형의 일관성을 유지하는 것입니다. Solaris와 같은 초기 연구는 두 에이전트 간의 협력을 발전시켰지만, 순열 대칭성을 깨는 정체성 인코딩과 에이전트 수에 따라 계산량이 2제곱으로 증가하는 완전 연결형 어텐션 메커니즘이라는 두 가지 중대한 결함을 드러냈으며, 이로 인해 더 많은 참여자로의 효과적인 확장이 불가능했습니다.

Gamma-World는 완전한 재설계를 통해 이러한 구조적 문제들을 해결했습니다. 연구팀은 모든 플레이어를 기하학적 심플렉스의 꼭짓점에 배치하여 그들 간의 자연스러운 등거리와 동등한 지위를 보장하는 ‘심플렉스 회전 에이전트 인코딩(Simplex Rotary Agent Encoding)’을 도입했습니다. 이 설계는 학습 가능한 매개변수가 없으며 무작위 좌표 할당을 사용하므로, 모델이 두 에이전트 데이터로 훈련한 후 아키텍처 변경 없이도 네 에이전트 시나리오를 직접 실행할 수 있어 일반화 능력에서 상당한 도약을 이뤘습니다.
계산 처리량 병목 현상을 해결하기 위해 Gamma-World는 ‘Sparse Hub Attention Mechanism’을 채택했습니다. 이 접근 방식은 기존의 쌍별 직접 통신을, 공유된 세계 상태를 압축된 중계기로 전달하는 일련의 학습 가능한 허브 토큰으로 대체하여 계산 비용을 선형 복잡도로 줄입니다. 독립적인 캐싱과 결합되어, 이 시스템은 초당 24프레임(24 FPS)의 실시간 행동 시뮬레이션을 달성합니다.
훈련을 위해 연구팀은 3단계 교사-학생 증류(teacher-student distillation) 접근법을 사용했는데, 여기서 양방향 교사 모델이 인과적 학생 모델을 안내하여 다단계 샘플링을 단 4단계로 압축합니다. 이를 통해 행동 제어 가능성을 유지하면서 자기회귀 추론 중 오류 누적을 크게 줄일 수 있습니다.
실험 결과에 따르면, 메모리 및 건설을 포함한 멀티플레이어 마인크래프트 가상 환경의 5가지 핵심 시나리오 전반에 걸쳐 Gamma-World는 기존의 최첨단 모델보다 우수한 성능을 보였으며, 영상 품질을 나타내는 FVD 지표에서 평균 40% 이상의 감소를 달성했습니다. 또한 이 프레임워크는 실제 양팔 로봇 협업 작업에도 성공적으로 적용되어, 다양한 시나리오에 걸친 적용 가능성을 입증했습니다. 이러한 발전은 다중 에이전트 시뮬레이션을 개선할 뿐만 아니라, 다중 팔 의료 협업, 공장 내 다중 로봇 스케줄링, 자율 주행과 같은 물리적 AI 영역을 위한 대규모 시뮬레이션 생성 인프라로 활용될 잠재력을 가지고 있습니다.
관련 기사
미국의 주식 시장이 AI와 항공우주 거대 기업들의 1조 달러 데뷔를 앞두고 역사적 이정표에 도달
엘론 머스크, 샘 알트만, 그리고 다리오 아모데이라는 기술 산업의 거인 세 명이 각자의 기업에 대해 공개 시장 상장(IPO)을 앞두고 있다. 스페이스X, 오픈AI, 앤트로픽이라는 세 산업의 거대 기업이 1조 달러 이상의 기업 가치를 달성하며 상장을 준비함에 따라, 2026년은 미국 역사상 신주 발행 측면에서 가장 중요한 해가 될 것으로 전망된다.이러한 역사적인 자본 증가는 전 세계 금융계의 주목을 받고 있으며, 공공 시장이 이러한 규모의 자금
스웨덴의 AI 스타트업 로버블 아이즈, 주요 자금 조달 라운드 이후 132억 달러의 기업 가치 달성
AI 기반 코딩 도구가 인기를 얻으면서 스웨덴 스타트업 로버블(Lovable)이 주요 자금 조달 라운드를 성사시켰다. 이 회사는 30억 달러를 조달하여 지난 12월 기록된 66억 달러의 두 배인 132억 달러의 기업 가치를 달성할 수 있을 것으로 기대된다. 멘로 벤처스(Menlo Ventures)가 이 투자 라운드를 주도할 것으로 예상된다.로버블의 매력은 복잡한 코딩 기술이 필요하지 않은 소프트웨어 제작을 단순화하는 핵심 '바이브 코딩(vib
구글, 사용자 제어 강화에 맞춰 제미니용 레미 AI 에이전트 테스트
비즈니스 인사이더에 따르면, 구글은 제미나이를 위한 새로운 AI 개인 에이전트인 레미를 테스트하고 있습니다. 이 도구는 사용자를 대신하여 작업을 실행하여 전문적인 워크플로우와 일상적인 루틴을 모두 간소화하는 것을 목표로 합니다.현재 레미는 제미나이 애플리케이션의 내부 직원 전용 버전에서 테스트 중입니다. 이 보고서는 내부 문서와 프로젝트에 정통한 두 명의 인물과의 인터뷰를 인용합니다. 내부 자료는 레미를 “24/7 개인 에이전트”로 묘사하며,
관련 특별 주제 추천
의견 (0)
0/500
비디오 월드 모델은 단일 에이전트 관점에서 다중 에이전트 협업 방향으로 전환되고 있습니다. 기존 모델은 일반적으로 단일 에이전트를 가정하기 때문에, 동일한 가상 세계 내에서 여러 플레이어가 상호 작용하고 서로를 관찰하는 복잡한 시나리오를 처리하는 데 한계가 있습니다. 이러한 아키텍처상의 병목 현상을 극복하기 위해 NVIDIA는 칭화대학교, 토론토 대학교, 벡터 연구소(Vector Institute)와 협력하여 새로운 다중 에이전트 월드 모델 솔루션인 ‘감마-월드(γ-World)’를 선보였습니다.
다중 에이전트 월드 모델링의 주요 과제는 시간적, 관점 간, 상호작용적 일관성이라는 세 가지 유형의 일관성을 유지하는 것입니다. Solaris와 같은 초기 연구는 두 에이전트 간의 협력을 발전시켰지만, 순열 대칭성을 깨는 정체성 인코딩과 에이전트 수에 따라 계산량이 2제곱으로 증가하는 완전 연결형 어텐션 메커니즘이라는 두 가지 중대한 결함을 드러냈으며, 이로 인해 더 많은 참여자로의 효과적인 확장이 불가능했습니다.

Gamma-World는 완전한 재설계를 통해 이러한 구조적 문제들을 해결했습니다. 연구팀은 모든 플레이어를 기하학적 심플렉스의 꼭짓점에 배치하여 그들 간의 자연스러운 등거리와 동등한 지위를 보장하는 ‘심플렉스 회전 에이전트 인코딩(Simplex Rotary Agent Encoding)’을 도입했습니다. 이 설계는 학습 가능한 매개변수가 없으며 무작위 좌표 할당을 사용하므로, 모델이 두 에이전트 데이터로 훈련한 후 아키텍처 변경 없이도 네 에이전트 시나리오를 직접 실행할 수 있어 일반화 능력에서 상당한 도약을 이뤘습니다.
계산 처리량 병목 현상을 해결하기 위해 Gamma-World는 ‘Sparse Hub Attention Mechanism’을 채택했습니다. 이 접근 방식은 기존의 쌍별 직접 통신을, 공유된 세계 상태를 압축된 중계기로 전달하는 일련의 학습 가능한 허브 토큰으로 대체하여 계산 비용을 선형 복잡도로 줄입니다. 독립적인 캐싱과 결합되어, 이 시스템은 초당 24프레임(24 FPS)의 실시간 행동 시뮬레이션을 달성합니다.
훈련을 위해 연구팀은 3단계 교사-학생 증류(teacher-student distillation) 접근법을 사용했는데, 여기서 양방향 교사 모델이 인과적 학생 모델을 안내하여 다단계 샘플링을 단 4단계로 압축합니다. 이를 통해 행동 제어 가능성을 유지하면서 자기회귀 추론 중 오류 누적을 크게 줄일 수 있습니다.
실험 결과에 따르면, 메모리 및 건설을 포함한 멀티플레이어 마인크래프트 가상 환경의 5가지 핵심 시나리오 전반에 걸쳐 Gamma-World는 기존의 최첨단 모델보다 우수한 성능을 보였으며, 영상 품질을 나타내는 FVD 지표에서 평균 40% 이상의 감소를 달성했습니다. 또한 이 프레임워크는 실제 양팔 로봇 협업 작업에도 성공적으로 적용되어, 다양한 시나리오에 걸친 적용 가능성을 입증했습니다. 이러한 발전은 다중 에이전트 시뮬레이션을 개선할 뿐만 아니라, 다중 팔 의료 협업, 공장 내 다중 로봇 스케줄링, 자율 주행과 같은 물리적 AI 영역을 위한 대규모 시뮬레이션 생성 인프라로 활용될 잠재력을 가지고 있습니다.
미국의 주식 시장이 AI와 항공우주 거대 기업들의 1조 달러 데뷔를 앞두고 역사적 이정표에 도달
엘론 머스크, 샘 알트만, 그리고 다리오 아모데이라는 기술 산업의 거인 세 명이 각자의 기업에 대해 공개 시장 상장(IPO)을 앞두고 있다. 스페이스X, 오픈AI, 앤트로픽이라는 세 산업의 거대 기업이 1조 달러 이상의 기업 가치를 달성하며 상장을 준비함에 따라, 2026년은 미국 역사상 신주 발행 측면에서 가장 중요한 해가 될 것으로 전망된다.이러한 역사적인 자본 증가는 전 세계 금융계의 주목을 받고 있으며, 공공 시장이 이러한 규모의 자금
스웨덴의 AI 스타트업 로버블 아이즈, 주요 자금 조달 라운드 이후 132억 달러의 기업 가치 달성
AI 기반 코딩 도구가 인기를 얻으면서 스웨덴 스타트업 로버블(Lovable)이 주요 자금 조달 라운드를 성사시켰다. 이 회사는 30억 달러를 조달하여 지난 12월 기록된 66억 달러의 두 배인 132억 달러의 기업 가치를 달성할 수 있을 것으로 기대된다. 멘로 벤처스(Menlo Ventures)가 이 투자 라운드를 주도할 것으로 예상된다.로버블의 매력은 복잡한 코딩 기술이 필요하지 않은 소프트웨어 제작을 단순화하는 핵심 '바이브 코딩(vib





집






