# Zyphra 发布 7B 混合架构基础模型 Zamba

- 来源：Zyphra Research（网页）
- 发布时间：2024-04-16 08:00
- AIHOT 分数：61
- AIHOT 标记：精选
- AIHOT 链接：https://aihot.news/items/cmtyo1ljj03asrog0h47mq5so
- 原文链接：https://www.zyphra.com/our-work/zamba

## 精选理由

官方原文给出架构设计、训练规模和开放 checkpoints 细节，读者可以据此评估 Mamba 混合架构在本地部署上的取舍。

## AI 摘要

Zyphra 发布 7B 基础模型 Zamba，采用 Mamba 块加每 6 层共享权重的全局注意力层的混合架构。

## 正文

按该来源的展示范围，站内仅提供摘要。

> 站内仅提供摘要，全文见原文。