EVA-Bench Data 2.0 출시: 3대 영역, 121개 도구, 213개 시나리오 커버
원제목:EVA-Bench Data 2.0: 3 Domains, 121 Tools, 213 Scenarios
AI 요약
EVA-Bench Data 2.0은 평가 범위를 단일 기업 영역에서 항공사 고객 서비스 관리(CSM), 기업 IT 서비스 관리(ITSM), 의료 HR 서비스 제공(HRSD)의 세 영역으로 확장했으며, 총 121개 도구와 213개 시나리오를 포함해 시나리오 수가 원래 버전보다 약 4배 늘었다. 각 시나리오는 OpenAI GPT-5.4, Google Gemini 3.1 Pro, Anthropic Claude Opus 4.6을 통해 해결 가능성을 검증받았다. 데이터셋은 음성 우선, 사실성, 다양성, 인증 절차, 재현성의 다섯 가지 설계 원칙을 따르며 단일 의도, 다중 의도(최대 4개 의도), 적대적 통화 유형을 포함한다. 세 데이터셋 모두 오픈소스로 공개되어 `load_dataset`을 통해 Hugging Face에서 직접 다운로드할 수 있다. 다국어 확장도 추후 출시될 예정이다.
핵심 정보
- EVA-Bench Data 2.
- 0은 평가 범위를 단일 기업 영역에서 항공사 고객 서비스 관리(CSM),기업 IT 서비스 관리(ITSM),의료 HR 서비스 제공(HRSD)의 세 영역으로 확장했으며,총 121개…
- 각 시나리오는 OpenAI GPT-5.
- 4,Google Gemini 3.
- 1 Pro,Anthropic Claude Opus 4.
한눈에 보기
- 게시
- 업데이트
- 카테고리
- 논문 및 연구
- AI 점수
- 65
语音代理评测缺的就是这种真实场景的数据集,EVA-Bench 2.0 把航空、IT、医疗三个最棘手的领域打包了,生成流水线也开源,做评测的可以直接拿来用。
관련 엔티티
출처 및 저작권
이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.
인용 방법
본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.
Orange News: EVA-Bench Data 2.0 출시: 3대 영역, 121개 도구, 213개 시나리오 커버. 2026년 6월 4일. https://new.nat6.net/ko/news/cmpzhk1rp03k5slkpmx3q7mp3/