Block 发布本地运行的全双工语音模型 Dessa
Block 研究实验室发布语音模型 Dessa,可本地运行,能同时说话和倾听,并带有笑声、停顿、哭泣等表达。该模型完全基于人类语音训练,可在 MacBook M4 Max 或更高配置的消费级电脑上运行,目前尚未公开访问,Block 正邀请安全研究人员测试。
Block 研究实验室发布语音模型 Dessa,可本地运行,能同时说话和倾听,并带有笑声、停顿、哭泣等表达。该模型完全基于人类语音训练,可在 MacBook M4 Max 或更高配置的消费级电脑上运行,目前尚未公开访问,Block 正邀请安全研究人员测试。
Block 发布语音模型 Dessa,称其完全基于人类语音训练、不含任何文本数据,并从头构建。Dessa 直接处理音频而非先转文字,可实时识别情绪、讽刺、笑声和停顿,支持全双工交流,能在 MacBook Pro M4 Max 上本地运行,训练使用单台 NVIDIA GB200 NVL72。该模型尚未公开,团队正招募 AI 安全研究者测试潜在风险。
Jack Dorsey 旗下 Block 发布 AI 模型 Dessa,称其完全从人类对话训练,是真正的语音到语音模型,可在 MacBook Pro M4 Max 或更高配置上本地运行。
Nirva 完成 2500 万美元 pre-Series A 轮融资,加上今年早些时候的 800 万美元,累计融资达 3300 万美元。其首款设备是重约 8 克、可作手链佩戴的吊坠,续航最长三天,通过用户录入的语音样本建模,只记录佩戴者本人并默认不保留音频与转录文本。该设备定价 249 美元,11 月开始接受订单,目标年底前向早期用户发货。
Amazon Polly 生成式引擎完成升级,语音输出更自然准确且延迟更低,新增 14 种语音、覆盖 9 个 locale,Hindi 和 Finnish 首次在生成式引擎上正式可用。
在 Amazon SageMaker AI 上部署 Kokoro-82M 文本转语音模型,可让 AI 语音智能体每生成一句就立即流式合成,无需等完整回复结束再开始播报。
针对 Amazon SageMaker AI 上自托管 TTS 端点自动扩缩容目标值靠猜的问题,该方案将 82M 参数的 Kokoro-82M 以自定义容器部署在实时端点上,用实测的 Q_max(单实例在 SLO 内可承受的最高并发)和 T_total(一次扩容端到端耗时)推算扩容阈值、缩容阈值与两个冷却时间。
IBM 更新 Granite Speech 系列,新增 granite-speech-5.0-2b,并修订 granite-speech-5.0-470m-turboctc 和 granite-speech-4.1-2b-plus。
Mistral 发布 Voxtral 3 语音模型家族,包含支持 50+ 语言的转录模型 Voxtral Small Transcribe 3、支持 35+ 语言和 50+ 方言的 TTS 模型 Voxtral Mini TTS 3,以及基于 LiveKit 的语音智能体 SDK。
推荐理由:原文给出语音模型与智能体 SDK 的完整能力、定价和部署方式,便于判断实时语音智能体的落地成本。