本文へスキップ

音声とオーディオ

AI 语音与音频的进展:语音合成、实时对话、音乐生成与音频理解的模型与产品。

101件の厳選関連トピック多模态AI 视频产品更新

最新の厳選

41〜60 件目 · 全 101 件
10月13日火
  1. Hacker News · AI75

    投机工具调用:如何降低语音 AI 智能体的端到端延迟中国語

    投机工具调用通过在用户说话过程中提前预测并异步触发工具查询,以消除语音智能体在轮次结束后的工具等待延迟。该方案借鉴投机解码思想,仅对只读或幂等工具在置信度达标时预执行并缓存结果,轮次结束时若与大语言模型的真实调用一致则瞬间返回,不匹配则丢弃且不改变执行逻辑。文章指出该机制适合由实时运行的小型音频决策模型驱动,并提醒注意隐私泄露风险与口语自我纠错带来的参数不稳定性。

    推薦理由:文章系统梳理了语音智能体中投机工具调用的执行机制与安全边界,为开发者解决语音交互下的工具调用延迟提供了清晰的架构参考。

  2. Hacker News · AI62

    开源系统 Veda 推出常驻桌面语音智能体架构中国語

    开源系统 Veda 将语音智能体作为操作系统常驻组件,支持用户通过自然语音直接控制窗口、编辑文本与管理文件。该系统后端接入 Deepgram 语音服务与 OpenAI 模型,并在系统服务层对敏感和破坏性操作实施强制用户确认机制,防止大语言模型越权执行危险指令。此外,Veda 还提供了应用适配框架,允许各类原生应用向智能体暴露结构化操作与状态数据。

    推薦理由:原文展示了将语音智能体深度整合进操作系统底层的完整实现方案,其系统级权限硬拦截设计对桌面智能体开发者具有直接参考意义。

  3. Hacker News · AI61

    开源呼叫基础设施 Ringee 发布,支持人类与 AI 语音智能体协同作业中国語

    开源呼叫基础设施 Ringee 正式上线,支持人类销售团队与 AI 语音智能体共用同一套通信栈完成呼叫与客户跟进。系统支持自托管部署与自带运营商 SIP 接入,并提供 MCP 服务端以便通过 Claude 或 ChatGPT 自动化调度拨号与记录分析。团队方案为每月 20 美元且不限席位数,通话与模型用量单独按需计费。

    推薦理由:该项目将传统电话外呼与 AI 语音智能体整合在开源通信栈中并开放 MCP 接入,读者可据此评估低成本构建自动化呼叫系统的可行性。

10月12日月
  1. TechCrunch AI60

    前 Plaud 高管创立的 Ambi 获 2600 万美元融资,推出全天候后台监听 AI 应用中国語

    前 Plaud 高管 Peter Mo 创立的 AI 公司 Ambi 宣布完成 2600 万美元融资,由 Luminous Ventures 与华勤领投,并推出支持后台全天候监听的 iPhone、Mac 和 Apple Watch 应用。

    推薦理由:原文展示了环境式 AI 从被动会后纪要向全程实时辅助演进的商业尝试,有助于理解持续感知产品面临的隐私合规难点。

  2. Hacker News · AI66

    开源 macOS 语音助手 Atticus 发布:基于 Claude Code 实现按住说话与系统级控制中国語

    开发者开源了面向 macOS 的按住即说语音助手 Atticus,借助现有 Claude 订阅(通过 claude -p)与 Claude Code 运行,无需独立 API 密钥。

    推薦理由:该项目展示了如何复用已有订阅账号绕过API密钥门槛,并结合本地语音转写与轻量无AI分流来降低桌面智能体的运行成本。

  3. Buzzing HN · 中文精选66

    开源 Mac 语音输入工具 BetterWispr 发布,支持本地模型离线转录中国語

    BetterWispr 是一款面向 macOS 14 及以上系统的免费开源语音输入工具,采用 Apache 2.0 协议,无需注册账号即可在本地设备完成离线语音转录。软件内置 Apple 语音、Parakeet 与 Whisper 等 9 种本地模型,支持过滤语气词、按应用设置语调风格,并可结合 Ollama 本地模型自动整理会议纪要。

    推薦理由:工具将语音识别与文本润色全部移至本地运行,为注重隐私的桌面办公输入提供了无需网络和订阅的轻量方案。

10月11日日
  1. TechCrunch AI60

    Apple 披露反向收购协议:聘用个性化播客初创公司 Huxe 团队并获得技术授权中国語

    Apple 在监管文件中披露已与个性化音频初创公司 Huxe 达成反向人才并购协议,将聘用其部分团队成员并获得技术非独占授权。Huxe 由曾参与 NotebookLM AI 播客功能的开发者创立,在宣布关停应用并删除用户数据后与 Apple 达成此项合作。该交易已向欧盟委员会报备,但文件中未透露具体的录用名单及 Apple 未来的产品整合规划。

    推薦理由:这种反向人才并购模式展现了大厂在规避反垄断审查的同时快速补充特定 AI 技术团队的操作路径。

10月9日金
  1. Hacker News · AI70

    开源跨平台语音听写与 AI 助手 SpeakoFlow 支持本地离线运行中国語

    开源语音听写与 AI 助手 SpeakoFlow 正式支持 Windows、macOS 和 Linux,所有功能默认在本地离线运行。用户可通过全局快捷键在任意应用中进行语音输入、对选中内容提问、开展免提实时语音对话以及生成多发言人会议纪要。系统底层集成 whisper.cpp、llama.cpp 和 Silero VAD 等本地技术栈,同时也支持接入各类云端模型 API。

    推薦理由:该项目为桌面端提供全平台且默认离线的语音听写与交互方案,为注重隐私与本地运行的用户提供了无需订阅的开源替代工具。

  2. Buzzing HN · 中文精选71

    开源端侧语音识别模型 Whistle 发布:体积仅 16.9 MB 且首 Token 延迟 11 毫秒中国語

    Cactus Compute 开源发布端侧语音识别模型 Whistle,单文件仅 16.9 MB,可在 CPU 上无依赖本地运行。该模型支持英、德、法、西、意、荷、波兰 7 种语言的 30 秒内语音转录、词级时间戳及语音嵌入,在 Apple M4 Pro 上首 Token 延迟低至 11.1 ms、解码速度达 1,319 tokens/s。

    推薦理由:原文给出了 16.9 MB 端侧语音模型在 CPU 上的转录与工具调用联动方案,读者可以据此评估在可穿戴或边缘设备上的离线语音集成可行性。

10月8日木
  1. The Verge · AI 筛选70

    Google 推出实验性 AI 笔记应用 Foresight,支持在 Mac 上离线转录会议中国語

    Google 推出名为 Google AI Edge Foresight 的免费实验性 AI 笔记应用,可在 macOS 上完全离线转录会议和音频文件。该应用基于端侧 EmbeddingGemma 2 模型运行,支持将速记要点整理为润色笔记,并内置助手用于针对会议内容和关联的本地文件进行问答。

    推薦理由:该应用基于端侧模型在本地完成会议转录与问答,为注重隐私和离线处理的会议记录场景提供了新的工具选择。

  2. Hacker News · AI72

    开源语音 AI 通话延迟分析工具 Dialtrace 发布中国語

    Dialtrace 是一款开源的语音 AI 通话延迟测量工具,可将运营商通话事件与开发者自有的 STT、LLM、TTS 流水线阶段整合到同一时间线中。开发者无需抓包或掌握 SIP 协议,通过一条命令即可测量真实通话中的首字延迟、API 往返耗时和线路质量,精准定位模型之外的电信网络耗时。

    推薦理由:语音智能体优化常忽略电信链路耗时,该工具将运营商事件与推理流水线对齐,便于开发者定位端到端静音来源。

10月7日水
  1. Hacker News · AI61

    意大利总理梅洛尼申请声音商标以防范 AI 深度伪造中国語

    意大利总理焦尔吉娅·梅洛尼(Giorgia Meloni)向欧盟知识产权局(EUIPO)申请注册其声音商标,以防止个人声音被 AI 深度伪造技术滥用。申请材料包含一段 4 秒的音频,梅洛尼在其中用意大利语两次说出“我是焦尔吉娅”。此前已有演艺界人士在美国和英国通过商标申请或呼吁立法,以保护个人声音与肖像免受未授权的 AI 克隆。

    推薦理由:公众人物通过申请声音商标防范 AI 深度伪造,为应对声音克隆与肖像滥用提供了法律维权实践参考。

  2. Hacker News · AI75

    诈骗分子利用 AI 语音伪造冒充高管诱骗意大利银行高层转账 9500 万欧元中国語

    诈骗分子利用 AI 技术伪造声音冒充高管与律师,从意大利联合圣保罗银行旗下的私人银行 Fideuram 骗走 9500 万欧元。诈骗始于 2 月,诈骗分子通过 WhatsApp 伪造银行 CEO 消息并使用 AI 仿冒知名律所合伙人语音致电,促使原董事长安排多笔海外转账。通过多国协作已追回约 5300 万欧元,但仍有约 3600 万欧元在流入加密货币网络后尚未追回。

    推薦理由:原文披露了利用 AI 语音仿冒高管实施大额金融欺诈的具体手法,为评估社交工程攻击对金融风控流程的冲击提供了典型案例。

10月6日火
  1. Hacker News · AI60

    旧金山学区引入 AI 辅导工具 Amira 引发儿童语音隐私与监管争议中国語

    旧金山联合学区(SFUSD)因采用 AI 伴读工具 Amira 记录低年级学生语音,引发家长与倡导团体对数据隐私和知情同意缺失的强烈抗议。调查指出,Amira 曾承认利用学生录音优化 AI 模型,而学区在推行时并未向家长充分说明其 AI 属性与录音行为。目前多地家长已发起退出行动与联名请愿,要求学区暂停生成式 AI 工具并建立完善的教育科技监管政策。

    推薦理由:文章以旧金山学区引入 AI 辅导工具为例,呈现了儿童语音数据采集缺乏知情同意与教育科技监管滞后的现实困境。

10月5日月
  1. Hacker News · AI74

    开源 AI 录音工具 Recly 发布:支持智能手表录音与本地端侧转录中国語

    开源 AI 录音工具 Recly 正式发布,可将 Apple Watch 或 Galaxy Watch 等现有设备转变为类似 Plaud 的 AI 录音机。

    推薦理由:该项目通过复用现有智能手表与本地端侧转录模型,为不需要额外购买硬件的语音记录提供了零云端依赖的替代方案。

10月4日日
  1. Hacker News · AI65

    SCM 发布:面向 macOS 的本地多模态图文与视频分镜 AI 搜索引擎中国語

    开源工具 SCM(Screen Memories)面向 macOS 推出本地优先的 AI 媒体搜索引擎,支持对本地照片及视频分镜进行语义检索。工具提供视觉嵌入搜索、视频镜头时间戳定位、Tesseract 离线 OCR 文字匹配以及 Whisper 语音台词检索,并支持接入 llama.cpp 进行本地问答。

    推薦理由:原文给出了端侧视频切片嵌入与离线检索架构,读者可以据此了解本地多模态媒体库的具体工程落地方式。

10月3日土
  1. Hacker News · AI68

    GeaStack 开源 Spark 与 Amuse:在 ESP32 手表板上运行实时语音 Agent 与数字人中国語

    GeaStack 开源了两款运行在 Waveshare ESP32-S3 AMOLED 触摸手表开发板上的端侧 AI 应用 Spark 与 Amuse。

    推薦理由:展示了在低成本微控制器上通过原生编译跑通实时全双工语音与数字人交互的完整方案,为端侧硬件交互开发提供了参考范例。

  2. IT之家 · AI 筛选76

    Suno 推出 Speech 语音功能,支持端到端同步生成语音与背景音乐中国語

    AI 音乐制作平台 Suno 推出音频功能 Speech 并开启公测,支持将语音朗读与原创背景音乐作为单一连贯音轨进行端到端一体化生成。用户只需输入文本并描述音色与音乐风格即可创作带配乐的语音音频。官方表示当前公测版仍存在偶发口音漂移以及情感停顿过于戏剧化导致断句偏慢的问题。

    推薦理由:该功能改变了先做文本转语音再单独拼接背景音乐的传统流程,为内容配乐提供了端到端一体化生成的新路径。

  3. Hacker News · AI60

    洛杉矶电台 AI DJ 走红引同行担忧:传统广播加速引入合成主播与商业化变现中国語

    洛杉矶西班牙语电台 José FM 推出的大语言模型与 ElevenLabs 驱动的 AI 电台主播 Coyotec 走红并带动收听率上升,引发广播工会与人类主播关于岗位替代和真实连接的担忧。

    推薦理由:原文展现了生成式语音与大模型在传统广播落地后的商业回报与收听反馈,有助于观察生成式音频对传统媒体工作流与就业生态的实际冲击。

  4. TechCrunch AI67

    肖恩·帕克推动 Stability AI 转型音乐领域中国語

    Napster 联合创始人肖恩·帕克与 Stability AI 现任 CEO 普雷姆·阿卡拉朱正推动公司转型,旨在打造面向音乐专业人士的 AI 工具链。Stability AI 此前获得索尼、华纳和环球等机构的 7600 万美元投资并取得曲库训练授权,已上线三款音频模型及 AI 音乐编辑软件,支持文本生成完整器乐音轨,后续更新还将支持哼唱旋律与口技节奏控制。

    推薦理由:原文梳理了 Stability AI 转向音乐领域的最新商业与技术布局,读者可据此了解其与三大唱片公司的版权合作与产品方向。