跳到正文

Meta / Llama

Meta 的 AI 动态:Llama 开源模型系列、超级智能实验室与元宇宙之外的 AI 豪赌。

758条收录64条精选最近更新 相关主题xAI / Grok开源生态行业动态

精选归档 · 第 4 页

第 61–64 条 · 共 64 条
2月20日周五
  1. Hugging Face:Blog(RSS)86

    GGML 和 llama.cpp 加入 HF 以确保 Local AI 的长期进展

    GGML 和 llama.cpp 团队正式加入 Hugging Face,以支持本地 AI 社区的长期扩展。创始人 Georgi Gerganov 及团队将全职维护 llama.cpp,保持 100% 技术自主权和社区领导力,项目继续 100% 开源和社区驱动。Hugging Face 提供长期可持续资源,助力项目增长。技术上将优化 transformers 库与 llama.cpp 的无缝集成,实现近乎“一键式”的模型部署,并改进基于 GGML 的软件打包和用户体验。长期愿景是构建高效本地推理堆栈,推动开源超级智能的普及。

    推荐理由:本地推理核心引擎获得长期资源保障,端侧 AI 生态稳定性大幅提升

12月29日周一
  1. Manus:Blog(网页)69

    Manus 官宣加入 Meta,将继续独立运营并服务现有用户

    Manus 官宣加入 Meta,称此举将巩固其在 AI 应用层的战略位置,把 Meta 平台上的数百万企业和数十亿用户作为下一步服务对象。截至 12 月初,Manus 已处理超过 147 万亿个 token,创建超过 8000 万台虚拟计算机;Manus 将继续通过 app 和网站提供产品和订阅服务,公司继续在新加坡运营,CEO 肖弘表示运作方式和决策机制不变。

    推荐理由:官方公告交代了收购后的服务安排和运营计划,读者可以据此判断 Manus 现有用户的订阅与使用是否受影响。

12月11日周四
  1. Hugging Face:Blog(RSS)76

    llama.cpp 服务器新增多模型管理功能

    llama.cpp 服务器新增了类似 Ollama 的多模型管理功能。该功能采用多进程架构,每个模型独立运行,确保单个模型崩溃不影响其他服务。系统支持自动发现本地 GGUF 模型文件、按需加载,并默认采用 LRU 机制管理最多同时加载4个模型。用户可通过请求中的模型字段路由到特定模型,并可使用 API 进行加载、卸载和列表查看。所有加载的模型可继承路由器的统一设置,也支持通过预设文件为每个模型单独配置参数。内置 Web UI 同样支持模型切换。

    推荐理由:本地跑模型终于能像 Ollama 一样热切换,开发调试效率大幅提升

11月27日周四
  1. Saining Xie

    Meta研究人员透露,Facebook自2020年起使用TPU训练AI,由Kaiming He领导开发TF和JAX代码库,MAE、DiT等模型完全基于TPU构建。因内部采用有限,Meta于2023年取消GCP协议。推文指出,Google、Anthropic等实验室长期使用TPU训练大模型,Nvidia的CUDA护城河并非不可逾越,OpenAI亦投资Triton寻求替代。TPU与GPU的效率差异并非关键,系统工程人才才是决定性因素。

    引用Clive Chan@itsclivetime

    我不断看到关于 TPU 的东西,有什么实质性的新进展吗? 没有证据表明 Google 曾在非 TPU 硬件上训练过 Gemini,这可以追溯到多年前 GPT 之前的模型,比如 BERT。TPU 比 Nvidia 自己的张量核心还要早。 Anthropic(以及 Character、SSI 和 Midjourney……)长期以来一直在使用 TPU,如果 Meta *没有* 在考虑它们,我会感到惊讶。 Nvidia 的护城河对大型实验室来说从来都不深——看看 OpenAI 决定它可以做得比 CUDA 更好,转而投资 Triton,在基准测试中经常胜过 CUDNN。这一切都没有什么神奇或结构性的东西,只是优秀的工程师在做优秀的工作。 TPU 并不比 GPU 高效多少,而微小的性能/功耗差异与 Meta 是否拥有正确的内核/系统工程人才来做到这一点相比,简直微不足道。Nvidia 和 Google 的护城河都很小,我们仍然处于个别优秀工程师就能扭转整个平衡的阶段。见下面的旧帖。 这难道……没有被定价进去吗?这些都是超级古老的公开信息。

    推荐理由:何恺明团队2020年起用TPU训练MAE/DiT,Nvidia护城河比想象更浅