Meta 연구진, Facebook이 2020년부터 TPU로 AI 훈련했다고 공개
원제목:most of people didn’t know this we had been using TPUs at *Facebook* as far back as 2020. Kaiming le...
AI 요약
Meta 연구진은 Facebook이 2020년부터 TPU로 AI를 훈련했으며, Kaiming He가 주도해 TF와 JAX 코드베이스를 개발했고 MAE, DiT 등 모델이 전적으로 TPU 기반으로 구축됐다고 밝혔다. 내부 활용이 제한적이어서 Meta는 2023년 GCP 계약을 취소했다. 트윗은 Google, Anthropic 등 연구소가 오랫동안 TPU로 대규모 언어 모델을 훈련해 왔으며 Nvidia의 CUDA 해자도 넘을 수 없는 것이 아니고, OpenAI도 대안으로 Triton에 투자하고 있다고 지적했다. TPU와 GPU의 효율 차이가 핵심이 아니라 시스템 엔지니어링 인재가 결정적 요인이라는 것이다.
핵심 정보
- Meta 연구진은 Facebook이 2020년부터 TPU로 AI를 훈련했으며,Kaiming He가 주도해 TF와 JAX 코드베이스를 개발했고 MAE,DiT 등 모델이 전적으로…
- 내부 활용이 제한적이어서 Meta는 2023년 GCP 계약을 취소했다.
- 트윗은 Google,Anthropic 등 연구소가 오랫동안 TPU로 대규모 언어 모델을 훈련해 왔으며 Nvidia의 CUDA 해자도 넘을 수 없는 것이 아니고,OpenAI도…
- TPU와 GPU의 효율 차이가 핵심이 아니라 시스템 엔지니어링 인재가 결정적 요인이라는 것이다.
한눈에 보기
- 게시
- 업데이트
- 카테고리
- 기타
何恺明团队2020年起用TPU训练MAE/DiT,Nvidia护城河比想象更浅
관련 엔티티
출처 및 저작권
이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.
인용 방법
본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.
Orange News: Meta 연구진, Facebook이 2020년부터 TPU로 AI 훈련했다고 공개. 2025년 11월 27일. https://new.nat6.net/ko/news/cmnz6dpf402aosl0fdjpw0kw1/