기타

CaP-X 오픈소스 공개: 대규모 언어 모델 에이전트, 물리 세계로 진입

원제목:The power of the Claw, in the palm of a robot hand. Agentic robotics is here! Today, we open-source ...

AI 요약

CaP-X는 대규모 언어 모델 에이전트가 로봇 팔과 휴머노이드 로봇을 통해 물리 세계로 진입하게 하는 오픈소스 구현형 지능 시스템이다. SAM3, Molmo 등 인식 API와 IK 솔버, 그리핑 계획 등 제어 인터페이스를 통합해 스킬 라이브러리를 자동 합성한다. 연구팀은 CaP-Gym 벤치마크(187개 조작 작업)와 CaP-Bench(12개 프런티어 모델 평가)를 공개하고, 제로샷 프레임워크 CaP-Agent0와 강화학습 방식 CaP-RL을 제안했다. CaP-RL은 단 50회 반복으로 7B 모델의 성공률을 20%에서 72%로 끌어올렸다. 이 기술은 Minecraft 에이전트 Voyager를 개발한 팀이 내놓은 것이다.

핵심 정보

  • CaP-X는 대규모 언어 모델 에이전트가 로봇 팔과 휴머노이드 로봇을 통해 물리 세계로 진입하게 하는 오픈소스 구현형 지능 시스템이다.
  • SAM3,Molmo 등 인식 API와 IK 솔버,그리핑 계획 등 제어 인터페이스를 통합해 스킬 라이브러리를 자동 합성한다.
  • 연구팀은 CaP-Gym 벤치마크(187개 조작 작업)와 CaP-Bench(12개 프런티어 모델 평가)를 공개하고,제로샷 프레임워크 CaP-Agent0와 강화학습 방식…
  • CaP-RL은 단 50회 반복으로 7B 모델의 성공률을 20%에서 72%로 끌어올렸다.
  • 이 기술은 Minecraft 에이전트 Voyager를 개발한 팀이 내놓은 것이다.

한눈에 보기

게시
업데이트
출처
X:Jim Fan (@DrJimFan)
카테고리
기타
원문 읽기 정보 출처에서 전체 본문 읽기
추천 이유

NVIDIA Jim Fan 开源 CaP-X,让 Vibe Agent 真正进入物理世界操作机器人

출처 및 저작권

이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.

원문 기사 · AIHOT 항목

인용 방법

본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.

Orange News: CaP-X 오픈소스 공개: 대규모 언어 모델 에이전트, 물리 세계로 진입. 2026년 4월 1일. https://new.nat6.net/ko/news/cmnw1ysux00zrslc36zorasfw/

전체 보기 →
  • Falcon Perception

    Technology Innovation Institute가 Hugging Face 플랫폼에 Falcon Perception 시스템을 소개하는 블로그 글을 게시했다. 이 시스템은 복잡한 환경에 대한 기계의 이해와…

    Hugging Face 社区博客(混合发现)기타AI 점수 70

  • 대규모 언어 모델의 감정 개념과 그 기능

    연구는 Claude Sonnet 4.5에서 내부 '감정 개념' 표상을 발견했으며, 이는 특정 감정의 추상 개념을 인코딩하고 문맥을 넘어 일반화할 수 있다. 이 표상들은 대화에서 주도적인 감정 개념을 추적하며,…

    Anthropic:Transformer Circuits(可解释性研究)기타AI 점수 90

  • Gradio 백엔드로 임의의 커스텀 프런트엔드 지원

    Gradio가 출시한 `gradio.Server` 컴포넌트는 개발자가 React, Svelte 또는 순수 HTML/JS 등 커스텀 프런트엔드 프레임워크를 완전히 사용해 앱을 구축하면서 Gradio의 백엔드 인프라…

    Hugging Face 社区博客(混合发现)기타AI 점수 83

  • Claude 앱 구축의 세 가지 모범 사례

    Anthropic이 Claude 앱 구축의 세 가지 실천법을 공유했다. Claude가 이미 익힌 범용 도구(bash, 텍스트 편집기 등)를 사용하고, 도구 호출 체인을 스스로 편성하게 하며 불필요한 컨텍스트…

    Claude:Blog(网页)기타

  • 개발자 가이드: 스킬로 ADK 에이전트 구축

    Agent Development Kit(ADK) SkillToolset이 '점진적 공개' 아키텍처를 도입해 AI 에이전트가 필요에 따라 도메인 전문 지식을 로드할 수 있게 했으며, 기존 단일 프롬프트 대비 최대…

    Google Developers Blog(RSS)기타AI 점수 71

  • 감정 개념과 대규모 언어 모델에서의 역할

    Anthropic 해석가능성 팀이 171개 감정 개념 어휘로 테스트한 결과, Claude Sonnet 4.5 내부에 특정 인공 뉴런 패턴으로 구성된 기능적 감정 표상이 존재하며 해당 상황에서 활성화되어 행동에…

    Anthropic:Research(发表成果 · 网页)기타