跳到正文
10月15日周四
  1. arXiv cs.CL27

    Ouvia:面向真实沟通场景的语音翻译可用性评估框架

    研究团队提出 Ouvia,一个以用户为中心、衡量真实场景语音翻译可用性的评估框架,通过定制 Web 应用收集了 1,750 余次英译葡一对一沟通交互,覆盖医疗与日常场景、四套 ST 系统、三种英语口音和两种性别。结果显示仅约一半交互被评为可用,且不同人群间可用性差距显著;在各类质量指标中,基于 QA 的评估对真实可用性的预测能力明显强于标准方法。

  2. arXiv cs.CL29

    SEA-HELM Audio:评估多语言 ASR-LLM 流水线在 SEA-HELM 各子集上的表现

    SEA-HELM Audio 将文本版 SEA-HELM 基准扩展到语音领域,用合成语音对比中文、英语、马来语、印尼语和泰米尔语五种语言在 ASR-LLM 级联流水线中的语音与文本输入表现。结果显示语音输入带来显著性能下降:多项选择推理准确率下降 9.00 至 18.50 个百分点,指令遵循下降 20.00 至 42.86 个百分点,泰米尔语降幅最大,超过 40 个百分点。

  3. arXiv cs.CL37

    LALM 后训练究竟学到了什么?重新审视音频理解与推理能力

    针对大型音频语言模型(LALM)后训练带来的性能提升,受控实验发现这些提升大多并非来自音频理解与推理能力的真实进步:即使没有有效音频信息,提升依然存在,而一旦更换问题格式,提升便基本消失。这表明后训练更多是让模型利用任务特定的文本线索和答题模式,而非习得可泛化的音频理解与推理能力。

  4. arXiv cs.AI23

    AegisVox:面向长时语音的隐私与临床信息因子化保护框架

    AegisVox 是一个因子化框架,为长时临床语音分配一致的替代音色,并用文档一致的替换编辑含身份标识的话轮。在 390 段公开模拟或非患者对话(共 63.6 小时)上,TTS 渲染实现 535/601 次计划替换,基于 codec 的语音编辑器为 453/601。但替换实现更好可能同时伴随更差的临床或说话人关联测量,AegisVox 支持针对具体用途评估这些权衡,而非保证身份标识移除或临床安全。

  5. arXiv cs.CL33

    ELARSpeech:覆盖 675 种低资源语言的 3 万小时多语言语音数据集

    研究者发布 ELARSpeech,一个从濒危语言档案库整理的大规模多语言语音资源,包含 675 种低资源语言、共 30,202 小时语音,融合人工标注与无标注录音。实验显示该数据集可将 ASR 和 TTS 能力扩展至多种低资源语言,伪标注无标注数据还能带来额外提升,但语音表征分析也暴露出当前多语言模型向语言长尾迁移的局限。数据集、训练好的 ASR 与 TTS 模型及完整数据构建流程均已公开。

  6. arXiv cs.CL30

    训练语音智能体遵循未见过的债务催收监管流程

    研究者提出 FlowSpec,用一份机器可读规范为每次部署生成策略指令、门控工具、提供监督并定义测试,智能体只能说经批准的目录语句。基于 297 个随机流程的 2,506 段对话微调 9B 参数模型,在四个未见部署流程上,流程固定的文档化检查通过率从 67–71% 升至 93–100%,场景通过率从 15/43 升至 40/43。对共享规范的审计发现 11 处缺陷,其中 3 处未被其自身指标暴露。

  7. RadarAI21

    千问 App 支持一键绑定千问 AI 耳机

    千问 App 新增「千问耳机」入口,更新至最新版本后按提示即可一键绑定千问 AI 耳机。绑定后支持语音问答、交办任务,进入「工作助理」语音下达指令即可主动执行,并支持 89 种语言专业翻译与多语言 AI 实时听记。

  8. RadarAI62

    Grok Voice 3.0 在语音到语音指数中以 86.9 分排名第一

    Artificial Analysis 的分析显示,SpaceXAI 的 Grok Voice 3.0 以 86.9 的分数在语音到语音指数中排名第一,明显优于其前代产品和现有竞争对手,同时保持了有竞争力的低延迟。该分析还对比了 Grok Voice 3.0 与 GPT-Live-1 和 Gemini 3.8 Live,并考察了其在语音推理、代理性能和偏好评级中的表现。

  9. RadarAI62

    xAI 发布 Grok Voice 3.0,称在多项基准与 Artificial Analysis 语音到语音指数上达到 SOTA

    xAI 公布 Grok Voice 3.0,称其在多项基准和 Artificial Analysis Speech-to-Speech Index 上成为 SOTA 语音到语音模型,延迟降低 40%。引用内容称该模型擅长处理客服来电,响应不到一秒,成本低于其他前沿模型。对比图中 Grok Voice 3.0 的 Agent 成功率为 71.6%,高于 Grok Voice 2.0 的 56.5%。

  10. The Verge · AI42

    Square 推出 Square Kiosk 自助点单终端,可语音对话 AI 下单

    Square 发布 Square Kiosk 自助点单终端,配备 21.5 英寸触摸屏和"智能体对话语音层",能理解商家菜单并实时响应,顾客可像与店员交谈一样提问、要求修改或替换菜品。该设备支持存在检测迎宾和感应/插卡支付,今日起以 1,999 美元面向 Square Plus 或 Premium 订阅商家发售,另收每台每月 99 美元软件费。

  11. Apple Machine Learning Research20

    语音基础模型中的语言选择性维度如何实现语码转换检测

    研究者提出一种轻量方法,直接利用预训练语音编码器帧级语言信息判断一句话中是否同时出现两种语言,无需依赖多语言转录。在 CS-FLEURS 的 14 个语言对上,Whisper-small 编码器平均 F1 达 0.798,高于 CNN 的 0.776 和 HuBERT 线性基线的 0.751。该方法表明预训练语音编码器已编码识别语码转换所需信息,可用于构建更具代表性的多语言语料。

  12. Apple Machine Learning Research30

    Apple 首次从零预训练三模态掩码扩散模型,3B 规模验证统一设计

    Apple 提出首个从零预训练的三模态掩码扩散模型(MDM),在文本、图文和音频-文本数据上联合训练,并系统分析了多模态缩放规律、模态混合比例、噪声调度与批大小影响。其基于 SDE 的重参数化将物理批大小与逻辑批大小解耦,免去最优批大小调参。初步模型在 3B 规模(6.4T tokens)下于文本生成、T2I 和 T2S 任务均取得强劲结果。