Skip to content

Speech and audio

AI 语音与音频的进展:语音合成、实时对话、音乐生成与音频理解的模型与产品。

99selectedRelated topics多模态AI 视频产品更新

Latest selected

41–60 of 99
Oct 13Tue
  1. Hacker News · AI61

    开源呼叫基础设施 Ringee 发布,支持人类与 AI 语音智能体协同作业Chinese

    开源呼叫基础设施 Ringee 正式上线,支持人类销售团队与 AI 语音智能体共用同一套通信栈完成呼叫与客户跟进。系统支持自托管部署与自带运营商 SIP 接入,并提供 MCP 服务端以便通过 Claude 或 ChatGPT 自动化调度拨号与记录分析。团队方案为每月 20 美元且不限席位数,通话与模型用量单独按需计费。

    Why it matters: 该项目将传统电话外呼与 AI 语音智能体整合在开源通信栈中并开放 MCP 接入,读者可据此评估低成本构建自动化呼叫系统的可行性。

Oct 12Mon
  1. TechCrunch AI60

    前 Plaud 高管创立的 Ambi 获 2600 万美元融资,推出全天候后台监听 AI 应用Chinese

    前 Plaud 高管 Peter Mo 创立的 AI 公司 Ambi 宣布完成 2600 万美元融资,由 Luminous Ventures 与华勤领投,并推出支持后台全天候监听的 iPhone、Mac 和 Apple Watch 应用。

    Why it matters: 原文展示了环境式 AI 从被动会后纪要向全程实时辅助演进的商业尝试,有助于理解持续感知产品面临的隐私合规难点。

  2. Hacker News · AI66

    开源 macOS 语音助手 Atticus 发布:基于 Claude Code 实现按住说话与系统级控制Chinese

    开发者开源了面向 macOS 的按住即说语音助手 Atticus,借助现有 Claude 订阅(通过 claude -p)与 Claude Code 运行,无需独立 API 密钥。

    Why it matters: 该项目展示了如何复用已有订阅账号绕过API密钥门槛,并结合本地语音转写与轻量无AI分流来降低桌面智能体的运行成本。

  3. Buzzing HN · 中文精选66

    开源 Mac 语音输入工具 BetterWispr 发布,支持本地模型离线转录Chinese

    BetterWispr 是一款面向 macOS 14 及以上系统的免费开源语音输入工具,采用 Apache 2.0 协议,无需注册账号即可在本地设备完成离线语音转录。软件内置 Apple 语音、Parakeet 与 Whisper 等 9 种本地模型,支持过滤语气词、按应用设置语调风格,并可结合 Ollama 本地模型自动整理会议纪要。

    Why it matters: 工具将语音识别与文本润色全部移至本地运行,为注重隐私的桌面办公输入提供了无需网络和订阅的轻量方案。

Oct 11Sun
  1. TechCrunch AI60

    Apple 披露反向收购协议:聘用个性化播客初创公司 Huxe 团队并获得技术授权Chinese

    Apple 在监管文件中披露已与个性化音频初创公司 Huxe 达成反向人才并购协议,将聘用其部分团队成员并获得技术非独占授权。Huxe 由曾参与 NotebookLM AI 播客功能的开发者创立,在宣布关停应用并删除用户数据后与 Apple 达成此项合作。该交易已向欧盟委员会报备,但文件中未透露具体的录用名单及 Apple 未来的产品整合规划。

    Why it matters: 这种反向人才并购模式展现了大厂在规避反垄断审查的同时快速补充特定 AI 技术团队的操作路径。

Oct 9Fri
  1. Hacker News · AI70

    开源跨平台语音听写与 AI 助手 SpeakoFlow 支持本地离线运行Chinese

    开源语音听写与 AI 助手 SpeakoFlow 正式支持 Windows、macOS 和 Linux,所有功能默认在本地离线运行。用户可通过全局快捷键在任意应用中进行语音输入、对选中内容提问、开展免提实时语音对话以及生成多发言人会议纪要。系统底层集成 whisper.cpp、llama.cpp 和 Silero VAD 等本地技术栈,同时也支持接入各类云端模型 API。

    Why it matters: 该项目为桌面端提供全平台且默认离线的语音听写与交互方案,为注重隐私与本地运行的用户提供了无需订阅的开源替代工具。

  2. Buzzing HN · 中文精选71

    开源端侧语音识别模型 Whistle 发布:体积仅 16.9 MB 且首 Token 延迟 11 毫秒Chinese

    Cactus Compute 开源发布端侧语音识别模型 Whistle,单文件仅 16.9 MB,可在 CPU 上无依赖本地运行。该模型支持英、德、法、西、意、荷、波兰 7 种语言的 30 秒内语音转录、词级时间戳及语音嵌入,在 Apple M4 Pro 上首 Token 延迟低至 11.1 ms、解码速度达 1,319 tokens/s。

    Why it matters: 原文给出了 16.9 MB 端侧语音模型在 CPU 上的转录与工具调用联动方案,读者可以据此评估在可穿戴或边缘设备上的离线语音集成可行性。

Oct 8Thu
  1. The Verge · AI 筛选70

    Google 推出实验性 AI 笔记应用 Foresight,支持在 Mac 上离线转录会议Chinese

    Google 推出名为 Google AI Edge Foresight 的免费实验性 AI 笔记应用,可在 macOS 上完全离线转录会议和音频文件。该应用基于端侧 EmbeddingGemma 2 模型运行,支持将速记要点整理为润色笔记,并内置助手用于针对会议内容和关联的本地文件进行问答。

    Why it matters: 该应用基于端侧模型在本地完成会议转录与问答,为注重隐私和离线处理的会议记录场景提供了新的工具选择。

  2. Hacker News · AI72

    开源语音 AI 通话延迟分析工具 Dialtrace 发布Chinese

    Dialtrace 是一款开源的语音 AI 通话延迟测量工具,可将运营商通话事件与开发者自有的 STT、LLM、TTS 流水线阶段整合到同一时间线中。开发者无需抓包或掌握 SIP 协议,通过一条命令即可测量真实通话中的首字延迟、API 往返耗时和线路质量,精准定位模型之外的电信网络耗时。

    Why it matters: 语音智能体优化常忽略电信链路耗时,该工具将运营商事件与推理流水线对齐,便于开发者定位端到端静音来源。

Oct 7Wed
  1. Hacker News · AI61

    意大利总理梅洛尼申请声音商标以防范 AI 深度伪造Chinese

    意大利总理焦尔吉娅·梅洛尼(Giorgia Meloni)向欧盟知识产权局(EUIPO)申请注册其声音商标,以防止个人声音被 AI 深度伪造技术滥用。申请材料包含一段 4 秒的音频,梅洛尼在其中用意大利语两次说出“我是焦尔吉娅”。此前已有演艺界人士在美国和英国通过商标申请或呼吁立法,以保护个人声音与肖像免受未授权的 AI 克隆。

    Why it matters: 公众人物通过申请声音商标防范 AI 深度伪造,为应对声音克隆与肖像滥用提供了法律维权实践参考。

  2. Hacker News · AI75

    诈骗分子利用 AI 语音伪造冒充高管诱骗意大利银行高层转账 9500 万欧元Chinese

    诈骗分子利用 AI 技术伪造声音冒充高管与律师,从意大利联合圣保罗银行旗下的私人银行 Fideuram 骗走 9500 万欧元。诈骗始于 2 月,诈骗分子通过 WhatsApp 伪造银行 CEO 消息并使用 AI 仿冒知名律所合伙人语音致电,促使原董事长安排多笔海外转账。通过多国协作已追回约 5300 万欧元,但仍有约 3600 万欧元在流入加密货币网络后尚未追回。

    Why it matters: 原文披露了利用 AI 语音仿冒高管实施大额金融欺诈的具体手法,为评估社交工程攻击对金融风控流程的冲击提供了典型案例。

Oct 6Tue
  1. Hacker News · AI60

    旧金山学区引入 AI 辅导工具 Amira 引发儿童语音隐私与监管争议Chinese

    旧金山联合学区(SFUSD)因采用 AI 伴读工具 Amira 记录低年级学生语音,引发家长与倡导团体对数据隐私和知情同意缺失的强烈抗议。调查指出,Amira 曾承认利用学生录音优化 AI 模型,而学区在推行时并未向家长充分说明其 AI 属性与录音行为。目前多地家长已发起退出行动与联名请愿,要求学区暂停生成式 AI 工具并建立完善的教育科技监管政策。

    Why it matters: 文章以旧金山学区引入 AI 辅导工具为例,呈现了儿童语音数据采集缺乏知情同意与教育科技监管滞后的现实困境。

Oct 5Mon
Oct 4Sun
  1. Hacker News · AI65

    SCM 发布:面向 macOS 的本地多模态图文与视频分镜 AI 搜索引擎Chinese

    开源工具 SCM(Screen Memories)面向 macOS 推出本地优先的 AI 媒体搜索引擎,支持对本地照片及视频分镜进行语义检索。工具提供视觉嵌入搜索、视频镜头时间戳定位、Tesseract 离线 OCR 文字匹配以及 Whisper 语音台词检索,并支持接入 llama.cpp 进行本地问答。

    Why it matters: 原文给出了端侧视频切片嵌入与离线检索架构,读者可以据此了解本地多模态媒体库的具体工程落地方式。

Oct 3Sat
  1. IT之家 · AI 筛选76

    Suno 推出 Speech 语音功能,支持端到端同步生成语音与背景音乐Chinese

    AI 音乐制作平台 Suno 推出音频功能 Speech 并开启公测,支持将语音朗读与原创背景音乐作为单一连贯音轨进行端到端一体化生成。用户只需输入文本并描述音色与音乐风格即可创作带配乐的语音音频。官方表示当前公测版仍存在偶发口音漂移以及情感停顿过于戏剧化导致断句偏慢的问题。

    Why it matters: 该功能改变了先做文本转语音再单独拼接背景音乐的传统流程,为内容配乐提供了端到端一体化生成的新路径。

  2. Hacker News · AI60

    洛杉矶电台 AI DJ 走红引同行担忧:传统广播加速引入合成主播与商业化变现Chinese

    洛杉矶西班牙语电台 José FM 推出的大语言模型与 ElevenLabs 驱动的 AI 电台主播 Coyotec 走红并带动收听率上升,引发广播工会与人类主播关于岗位替代和真实连接的担忧。

    Why it matters: 原文展现了生成式语音与大模型在传统广播落地后的商业回报与收听反馈,有助于观察生成式音频对传统媒体工作流与就业生态的实际冲击。

  3. TechCrunch AI67

    肖恩·帕克推动 Stability AI 转型音乐领域Chinese

    Napster 联合创始人肖恩·帕克与 Stability AI 现任 CEO 普雷姆·阿卡拉朱正推动公司转型,旨在打造面向音乐专业人士的 AI 工具链。Stability AI 此前获得索尼、华纳和环球等机构的 7600 万美元投资并取得曲库训练授权,已上线三款音频模型及 AI 音乐编辑软件,支持文本生成完整器乐音轨,后续更新还将支持哼唱旋律与口技节奏控制。

    Why it matters: 原文梳理了 Stability AI 转向音乐领域的最新商业与技术布局,读者可据此了解其与三大唱片公司的版权合作与产品方向。

  4. The Decoder62

    AI 音乐生成平台 Suno 推出 Speech 功能可同时生成配音与背景音乐Chinese

    AI 音乐生成平台 Suno 推出新功能 Speech,支持用户输入文本并指定声音与音乐风格,同步生成带有匹配背景音乐的单一语音音频轨。该功能适用于诗歌、冥想引导和睡前故事等场景,目前处于公测阶段但偶尔存在口音偏差。Suno 尚未公开该模型的训练细节,同时正面临主要唱片公司的版权诉讼压力。

    Why it matters: Suno 将语音朗读与背景音乐整合为单轨生成功能,展现了生成式音频在诗歌朗诵和冥想伴奏等场景的实用落地形态。

  5. Hacker News · AI73

    为什么 STT-LLM-TTS 语音架构已死:call4me 端到端语音智能体实践Chinese

    开发者推出代打电话智能体工具 call4me 并分享架构实践,提出用端到端实时语音模型直连通信线路以取代传统的 STT-LLM-TTS 级联方案。系统基于 Cloudflare 与 Telnyx 搭建,直接通过 G.711 μ-law 格式将电话音频透传给 GPT-Live 消除级联延迟,并将工具调用与流程决策解耦给后台文本模型。

    Why it matters: 作者结合实际落地踩坑说明了放弃传统语音级联架构、采用端到端音频直连与决策解耦的完整工程方案。