CaP-X 오픈소스 공개: 대규모 언어 모델 에이전트, 물리 세계로 진입
원제목:The power of the Claw, in the palm of a robot hand. Agentic robotics is here! Today, we open-source ...
AI 요약
CaP-X는 대규모 언어 모델 에이전트가 로봇 팔과 휴머노이드 로봇을 통해 물리 세계로 진입하게 하는 오픈소스 구현형 지능 시스템이다. SAM3, Molmo 등 인식 API와 IK 솔버, 그리핑 계획 등 제어 인터페이스를 통합해 스킬 라이브러리를 자동 합성한다. 연구팀은 CaP-Gym 벤치마크(187개 조작 작업)와 CaP-Bench(12개 프런티어 모델 평가)를 공개하고, 제로샷 프레임워크 CaP-Agent0와 강화학습 방식 CaP-RL을 제안했다. CaP-RL은 단 50회 반복으로 7B 모델의 성공률을 20%에서 72%로 끌어올렸다. 이 기술은 Minecraft 에이전트 Voyager를 개발한 팀이 내놓은 것이다.
핵심 정보
- CaP-X는 대규모 언어 모델 에이전트가 로봇 팔과 휴머노이드 로봇을 통해 물리 세계로 진입하게 하는 오픈소스 구현형 지능 시스템이다.
- SAM3,Molmo 등 인식 API와 IK 솔버,그리핑 계획 등 제어 인터페이스를 통합해 스킬 라이브러리를 자동 합성한다.
- 연구팀은 CaP-Gym 벤치마크(187개 조작 작업)와 CaP-Bench(12개 프런티어 모델 평가)를 공개하고,제로샷 프레임워크 CaP-Agent0와 강화학습 방식…
- CaP-RL은 단 50회 반복으로 7B 모델의 성공률을 20%에서 72%로 끌어올렸다.
- 이 기술은 Minecraft 에이전트 Voyager를 개발한 팀이 내놓은 것이다.
한눈에 보기
- 게시
- 업데이트
- 카테고리
- 기타
NVIDIA Jim Fan 开源 CaP-X,让 Vibe Agent 真正进入物理世界操作机器人
출처 및 저작권
이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.
인용 방법
본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.
Orange News: CaP-X 오픈소스 공개: 대규모 언어 모델 에이전트, 물리 세계로 진입. 2026년 4월 1일. https://new.nat6.net/ko/news/cmnw1ysux00zrslc36zorasfw/