跳到正文
2月11日周三
  1. 蚂蚁 inclusionAI:GitHub 新仓库51

    inclusionAI/Ming-omni-tts

    inclusionAI 发布了 Ming-omni-tts,这是一个能够统一生成语音、音乐和声音的模型。该模型的核心特点是结构简单高效,并实现了对生成内容的精确控制。它通过一个统一的框架处理多种音频模态,简化了传统上需要不同模型分别处理语音、音乐和音效的流程。这一进展为跨模态音频内容的创作与编辑提供了更便捷、可控的工具。

  2. ElevenLabs:Blog52

    Klarna 用 ElevenAgents 上线美国电话客服语音智能体,解决速度提升最多 10 倍

    Klarna 基于 ElevenLabs 的 ElevenAgents 平台推出语音 AI 客服,作为美国用户电话支持的第一线,覆盖全部 3500 万美国客户,被该智能体处理的查询解决速度最多快 10 倍。该智能体处理产品咨询、支付状态等信息类请求,并在检测到复杂性或敏感性时无缝转接人工;Klarna 计划将语音 AI 扩展到全球 1.14 亿用户。

2月10日周二
2月7日周六
  1. FireRedTeam:原创语音与多模态项目63

    FireRedTeam 开源 FireRed-OpenStoryline 对话式视频创作工具

    FireRedTeam 于 2026-02-10 正式开源 FireRed-OpenStoryline,将视频创作变为自然语言对话,支持素材搜索下载、脚本生成、BGM 与配音字体推荐,以及全流程剪辑。

    推荐理由:官方开源的对话式视频剪辑项目,覆盖素材检索、脚本生成到剪辑全流程,并可直接通过 Claude Code 等 Agent Skills 安装使用。

2月5日周四
2月4日周三
  1. ElevenLabs:Blog65

    ElevenLabs 融资 5 亿美元 Series D,估值 110 亿美元

    ElevenLabs 于 2026 年 2 月 4 日宣布完成 5 亿美元 Series D 融资,估值 110 亿美元,较一年前增长超过三倍,总融资达 7.81 亿美元。

    推荐理由:官方公告给出融资额、估值变化和 ARR 数字,还交代了资金投向与产品线布局,可据此了解这家语音 AI 公司的扩张重点。

2月2日周一
  1. ElevenLabs:Blog65

    Eleven v3 语音模型正式全量开放,符号与数字朗读错误率下降 68%

    ElevenLabs 宣布其最先进的 Text to Speech 模型 Eleven v3 结束 Alpha 阶段,正式面向所有平台开放。新版本在测试中 72% 的场景被用户认为比 Alpha 更稳定;针对数字、符号和专业记号的处理,内部基准覆盖 8 种语言 27 个类别,错误率从 15.3% 降至 4.9%,整体减少 68%,改进集中在体育比分、货币、化学式等依赖上下文判断符号含义的场景。

    推荐理由:原文给出具体的错误率下降数字和示例对比,读者可以据此评估 Eleven v3 正式版在数字和符号朗读上的实际改进。

2月1日周日
  1. OpenMOSS / 复旦NLP / 上海创智 / MOSI62

    MOVA 发布:32B MoE 端到端同步视频-音频生成模型全栈开源

    OpenMOSS 团队发布 MOVA 音视频基础模型,总参数 32B MoE、激活 18B,支持文本或图像到音视频的端到端同步生成,最高 720p、单段 8 秒。模型采用非对称双塔架构(14B Wan 2.2 I2V 视频塔与 1.3B 音频塔)加双向 Bridge 和 Aligned ROPE 对齐时间轴,并开放模型权重、训练与推理代码及微调方案。

    推荐理由:原文给出架构、训练策略和开源范围,读者可以了解端到端音视频生成如何处理同步问题并可复现研究。

1月29日周四
1月28日周三
  1. ElevenLabs:Blog43

    Revolut 选用 ElevenLabs Agents 强化客户支持

    Revolut 部署 ElevenLabs Agents 作为英国和欧洲客户语音支持的一线,覆盖超 400 万客户,首阶段将问题解决时间缩短 8 倍以上。该智能体支持 30 多种语言实时切换,可在 5 分钟内解决工单,超 99.7% 的来电成功处理,并满足 PCI 合规与零留存要求。Revolut 在对比多家供应商后选择了 ElevenLabs,同时保留自身的编排与业务逻辑控制权。

1月23日周五
  1. MiniMax:Blog

    MiniMax Speech 2.8 语音模型

    MiniMax 发布新一代语音模型 MiniMax Speech 2.8,通过原生声音标签技术模拟人类口语中的"嗯"、"啊"等填充词及呼吸停顿,显著提升对话自然度。该模型支持10秒样本高保真声音克隆,精准还原音色与语速,同时消除背景噪音与数字伪影,输出录音室级纯净音质。此外,模型优化了跨语言表现,从普通话-日语对开始解决口音渗透问题,实现更接近母语者的发音效果。

    推荐理由:10秒样本克隆真人声线,AI说话带'嗯啊'呼吸声,MiniMax语音模型上新

1月22日周四
1月21日周三
1月15日周四
1月9日周五
2025年12月23日周二
2025年12月22日周一
2025年12月17日周三
  1. xAI:News

    xAI 发布 Grok Voice Agent API

    xAI 开放 Grok Voice Agent API,基于自研语音栈(VAD、tokenizer、音频模型),Big Bench Audio 基准排名第一,首音频延迟低于 1 秒(比竞品快近 5 倍),定价 $0.05/分钟。支持数十种语言自动切换、实时搜索 X 和网页、调用自定义工具,已深度集成特斯拉车机。提供 Ara、Eve 等多种自然声线,支持 [whisper] 等听觉标签,兼容 OpenAI Realtime API 规范。

    推荐理由:xAI发布Grok语音Agent API,延迟低于1秒且定价仅为OpenAI一半,已集成至Tesla车载系统

2025年12月15日周一
  1. 通义 QwenAudio:原创语音项目60

    通义实验室开源 Fun-ASR 系列语音识别模型,含方言与 31 语言版本

    通义实验室发布 Fun-ASR 端到端语音识别模型系列并开源。Fun-ASR-Nano-2512 参数量 800M,基于数千万小时语音训练,支持中英日三语、7 种汉语方言和 26 种地方口音;Fun-ASR-MLT-Nano-2512 同为 800M,基于数十万小时训练,支持 31 种语言。

    推荐理由:原文给出两个识别模型的训练规模、语言覆盖和开源基准对比,还附部署与推理路径,读者可据此评估在中文和方言场景的可用性。

2025年12月13日周六
  1. Google DeepMind:Blog68

    Google DeepMind 发布更新版 Gemini 2.5 Flash Native Audio 语音模型

    Google DeepMind 发布更新的 Gemini 2.5 Flash Native Audio 模型,用于实时语音智能体,在 ComplexFuncBench Audio 上取得 71.5%,开发者指令遵循率从 84% 提升到 90%,已在 Google AI Studio、Vertex AI 上线,并开始在 Gemini Live 和 Search Live 推出。

    推荐理由:原文给出具体评测分数和功能细节,读者可以据此评估新模型在语音智能体和翻译场景的可用性。

2025年12月5日周五
2025年11月21日周五
  1. Hugging Face 社区博客83

    Open ASR 排行榜新增多语言与长格式赛道,揭示模型性能新挑战

    Hugging Face 的 Open ASR 排行榜新增多语言和长格式语音识别评估赛道。多语言赛道涵盖8种语言,长格式赛道则测试模型处理连续数分钟语音的能力。新榜单显示,领先模型在多语言任务上的词错误率平均比专用单语模型高约15%,在长格式任务上错误率可能上升超20%,凸显了模型在实际应用中的泛化能力仍面临严峻挑战。

    推荐理由:ASR排行榜新增多语言和长形式评估,助力开发者优化语音应用。

2025年11月20日周四
2025年11月11日周二
2025年11月4日周二
2025年10月30日周四
  1. MiniMax:Blog

    MiniMax发布新一代语音模型Speech 2.6

    MiniMax发布语音模型Speech 2.6,端到端延迟降至250毫秒内,支持实时对话。新增多语言特殊格式解析能力,可自动朗读URL、邮箱、电话、日期及金额,无需预处理。推出Fluent LoRA功能,即使源录音带口音也能保留音色并生成流畅语音,支持40余种语言。已被LiveKit、Vapi等平台及智能硬件采用。

    推荐理由:MiniMax发布Speech 2.6语音模型,支持Voice Agent场景,实现超低延迟与Fluent LoRA语音克隆优化。

2025年10月28日周二
  1. Hugging Face 社区博客56

    Hugging Face 提出语音同意门机制,探索带授权的语音克隆方案

    Hugging Face 发布带授权语音克隆的语音同意门概念及示例 Space 和配套代码。系统先生成包含同意语句和模型名的全新句子,经 ASR 识别确认后,才允许用该音频驱动语音克隆 TTS,使同意成为可审计的系统前提;作者也指出该设计可被其他 TTS 伪造,未来可结合音频溯源和说话人嵌入校验。

2025年10月24日周五
  1. 美团 LongCat:HuggingFace 新模型

    美团开源全模态模型LongCat-Flash-Omni

    美团开源全模态模型LongCat-Flash-Omni,采用5600亿参数MoE架构(激活270亿),支持128K上下文与实时音视频交互。模型基于快捷连接MoE与零计算专家,配备轻量级编解码器及分块特征交错机制,通过课程式渐进训练提升效率。在OmniBench、WorldSense等基准测试中超越Qwen3-Omni与Gemini-2.5-Pro,在文档理解、语音识别及GUI控制等任务中达到领先水平。

    推荐理由:美团开源 560B 参数多模态模型,27B 激活即可实现实时音视频交互

2025年10月17日周五
2025年10月10日周五
2025年10月6日周一
2025年10月1日周三
2025年9月29日周一
  1. 蚂蚁 inclusionAI:GitHub 新仓库51

    inclusionAI/Ming-UniAudio

    研究团队发布了Ming-UniAudio,这是一个基于统一表示的大语言模型,专门用于语音任务。该模型能够联合处理语音的理解、生成与编辑,实现了多种语音功能的集成。它通过统一的框架,将传统上分离的语音识别、合成和修改任务整合进单一系统,提升了处理效率与协同能力。

  2. 蚂蚁 inclusionAI:GitHub 新仓库57

    inclusionAI发布MingTok-Audio:首个统一连续语音分词器

    inclusionAI团队推出了MingTok-Audio,这是首个能有效融合语义与声学特征的统一连续语音分词器,适用于语音理解与生成任务。该模型基于纯因果Transformer架构,去除了卷积层以提升效率,并采用VAE进行连续特征建模以实现高质量音频重建。在语音重建性能上,其帧率为50,在SEED-ZH和SEED-EN测试集上的PESQ分别达到4.21和4.04,SIM为0.96,STOI为0.98,显著优于对比模型。在下游ASR任务中,其在多个方言数据集上取得了更低的错误率,例如在Hunan Minnan数据集上WER低至9.80%。

    推荐理由:蚂蚁把语音 tokenizer 做到了 PESQ 4.2 的离谱分数,比第二名翻了快一倍,做语音理解和生成的团队值得拿这个当新 baseline 跑一下。

2025年9月19日周五