Zyphra, AMD 하드웨어로 학습한 추론 MoE ‘ZAYA1-8B’ 공개… 체급을 뛰어넘는 성능
Zyphra Releases ZAYA1-8B: A Reasoning MoE Trained on AMD Hardware That Punches Far Above Its Weight Class
TL;DR AI
1분핵심 요약
Zyphra가 84억 파라미터 규모의 MoE 추론 모델 ZAYA1-8B를 공개했으며, 실제 활성 파라미터는 7억 6천만 개에 불과합니다.
이 모델은 AMD Instinct MI300 하드웨어에서 학습됐고, MoE++와 Markovian RSA로 연산·메모리 비용을 줄였습니다.
ZAYA1-8B는 Hugging Face에 Apache 2.0 라이선스로 오픈소스 공개됐으며, Zyphra Cloud의 서버리스 엔드포인트로도 제공됩니다.
수학·코딩 벤치마크에서는 DeepSeek, Gemini, Claude, GPT-5 계열 등 더 큰 프런티어 모델들과 견줄 만큼의 성능을 보였다고 합니다.