모델 출시

Zyphra, 7B 하이브리드 아키텍처 기반 모델 Zamba 출시

원제목:ZAMBA

AI 요약

Zyphra가 7B 기반 모델 Zamba를 출시했다. Mamba 블록과 6개 층마다 가중치를 공유하는 전역 어텐션 층을 결합한 하이브리드 아키텍처를 채택했다.

한눈에 보기

게시
업데이트
출처
Zyphra Research(网页)
카테고리
모델 출시
AI 점수
61
원문 읽기 정보 출처에서 전체 본문 읽기
추천 이유

官方原文给出架构设计、训练规模和开放 checkpoints 细节,读者可以据此评估 Mamba 混合架构在本地部署上的取舍。

출처 및 저작권

이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.

원문 기사 · AIHOT 항목

인용 방법

본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.

Orange News: Zyphra, 7B 하이브리드 아키텍처 기반 모델 Zamba 출시. 2024년 4월 16일. https://new.nat6.net/ko/news/cmtyo1ljj03asrog0h47mq5so/

전체 보기 →