小米开源工业级语音识别大模型 CocktailASR-1,专攻「鸡尾酒会」多人混叠难题
9 月 11 日,小米正式发布并开源工业级目标说话人语音识别大模型 Xiaomi-CocktailASR-1。该模型采用端到端 LLM 架构,仅需一小段目标说话人参考音频即可在多人同时发言的复杂声学环境中精准提取并仅转录目标语音,在 AliMeeting、AMI、LibriMix 等多个主流测试集上达到 SOTA,权重以 Apache 2.0 协议开放。
语音识别在单人场景下已相当成熟,但当说话人增至两人或更多时,识别率会急剧下降——这一难题被称为「鸡尾酒会问题」。小米此次开源的 CocktailASR-1 走端到端 LLM 架构:以目标说话人的一段参考音频作为「声纹提示」与混合语音一同送入模型,直接转写目标说话人内容,省去先分离再识别两步,且目标不在场时输出空文本以降低误触发。
据技术报告披露,模型音频编码器约 0.6B 参数(源自 Data2Vec2 自监督模型),语言模型骨干为 Qwen3-8B,训练数据约百万小时。在真实会议测试集 AliMeeting 远场词错率达 20.63%(此前最好约 27.5%),合成混音集 LibriMix 两人混叠词错率 4.11%,而 Qwen3-ASR、StepAudio 在重度混叠下飙至 60% 以上;负样本拒识率 68%–80%,通用 ASR 普遍为 0。
开发者侧有两条利好:协议为 Apache 2.0 可免费商用,权重已在 Hugging Face(Ease3/Xiaomi-CocktailASR-1)发布,transformers 加载仅需 trust_remote_code,bf16 单卡可跑。会议纪要、访谈整理、庭审记录这类「只认一个人」的场景,第一次有了免费商用的工业级起点。
相关资讯
DeepSeek-V4-Pro 正式版上线,Agent 能力大幅跃升并实行分时定价
8 月 12 日晚 DeepSeek 与 xAI 同日发布新模型。V4-Pro 正式版主打智能体能力,DeepSWE 得分由 12.8 升至 62.7、多项 Agent 测试超过 Claude Opus 4.8;8 月 17 日起实行分时定价,高峰输出价涨至现行 4.5 倍。
Gemini 3.7 Flash 发布:编程与智能体升级,API 价格年内直降 50%
Google DeepMind 推出 Gemini 3.7 Flash,软件工程、调试与多步智能体工作流显著提升,登 WebDev Code Arena 第 8、Agent Arena 第 20;上下文扩至 100 万 token,API 价格年内下调 50%。
智谱发布 GLM-5.3 开源大模型,编程能力跃居开源模型首位
智谱发布 GLM-5.3,基于 GLM-5.2 基座、通过后训练 Scaling 提升智能上限;Terminal-Bench 3.0 编程能力较前代提升 50%、居开源模型第一,模型权重将于两周后开源。
OpenAI 被曝测试 GPT Image 2.5,官方为 GPT Image 2 API 加透明背景
多名海外用户发现名为 luna-lisa-alpha 的神秘模型现身 LMArena 盲测平台,重点提升人物一致性、真实感与文字生成能力,社区猜测其为 GPT Image 2.5 早期版本;同期 GPT Image 2 API 预览支持透明背景生成。OpenAI 尚未公开确认该模型存在。