# 👍 快搞成混合注意力， 社区会嗷嗷叫的

- 来源：karminski-牙医 (@karminski3)
- 发布时间：2026-09-16 14:02
- AIHOT 分数：27
- AIHOT 链接：https://aihot.news/items/cmu3pxii60ar7roc1msnrs9qg
- 原文链接：https://x.com/karminski3/status/2100102911577755706

## 正文

👍 快搞成混合注意力, 社区会嗷嗷叫的

### 引用推文

> Hector Liu：@karminski3 8Bit 量化做了：https://huggingface.co/IFM/K2-Horizon-7B-FP8。4Bit在赶工。 我们还有显存拯救计划正在进行中。