Orange AI· @oran_ge · X·· 3 小时前AI 评分67
AI 导读
DeepSeek 宣布将自研推理框架 DeepInfer 完全开源,代码地址 github.com/deepseek-ai/DeepInfer。官方称 DeepInfer 在生产环境中支撑 DeepSeek-V4.1-Flash,实现高吞吐和低延迟,开源旨在帮助社区降低算力成本与能耗。作者认为这将推动所有模型降价。
正文 · 原文
DeepSeek 把自己低价的秘密武器推理框架给全部开源了
这将推动所有模型大降价
善莫大焉
大鲸鱼是人类之光
🚀 Introducing DeepInfer, our in-house inference framework, now fully open source! Powering DeepSeek-V4.1-Flash at scale with high throughput and low latency. We’re sharing our production stack to help the community lower compute costs, reduce energy use, and make AI more affordable. 🔗 http://github.com/deepseek-ai/DeepInfer 1/4在 X 查看被引用的帖子
来源:Orange AI · x.com