本文へスキップ

AI 视频生成与理解:文生视频模型、视频编辑工具与影视创作变革的追踪。

66件の厳選関連トピック图像生成多模态语音与音频

最新の厳選

41〜60 件目 · 全 66 件
10月8日木
  1. 量子位67

    生数科技开放 Vidu Q4 预览版并开启实测中国語

    生数科技正式开放新一代视频生成旗舰模型 Vidu Q4 预览版,最高支持 4K 直出、15 张参考图与 3 段参考音频输入,720P 模式起步成本约 0.09 元/秒。实测显示其在人物微表情过渡、正反打运镜、环境光影交互及 FPV 镜头上均有提升,单条最长支持生成 16 秒连续画面。目前该版本已在 MaaS 端与 SaaS 端上线并提供相应优惠与计费规格。

    推薦理由:原文通过多组实测案例展示了微表情控制与光影交互能力,读者可以据此评估低成本视频生成模型在影视创作中的可用性。

  2. Hacker News · AI75

    开源 resolve-edit-kit:基于 MCP 让 Claude 在 DaVinci Resolve 中端到端自动剪辑视频中国語

    开发者开源了 resolve-edit-kit 工具集与运行指南,通过 DaVinci Resolve 的 MCP 接口让 Claude 端到端自动完成原始视频剪辑。

    推薦理由:原文开源了基于 MCP 与 DaVinci Resolve 的端到端视频自动剪辑工作流与脚本,读者可直接参考其在音视频自动化管线中的工程设计与踩坑经验。

  3. Hacker News · AI73

    如何让 AI 成为顶级设计师:前苹果工程师分享高质量 UI 设计工作流中国語

    前苹果工程师 Anshu Chimala 提出了一套让大模型与 AI 智能体摆脱均质化平庸设计的 UI 设计方法论。该流程通过外部随机种子打破模型的预测惯性,引入独立的大模型“批评家智能体”仅根据截图评分并驱动小模型迭代,同时接入图像与视频生成模型制作微动效与滚动过渡。最终阶段则通过主动删减多余渐变和装饰元素,让界面回归克制且具质感的原生交互体验。

    推薦理由:文章拆解了用批评家智能体与图像视频生成突破模型设计均质化陷阱的完整流程,提供了一套可复用的 UI 提示与调优方法。

10月7日水
  1. Hacker News · AI63

    AI生成电影《Gods Don't Give Gifts》定档12月并计划冲击奥斯卡中国語

    AI工作室Fable宣布将AI生成电影短片集《Gods Don't Give Gifts》的北美院线上映时间推迟至12月4日,并计划申报奥斯卡最佳动画长片奖项。

    推薦理由:AI生成电影首次进入院线并冲击奥斯卡最佳动画长片评选,读者可以据此观察好莱坞对全流程AI创作的规则界限与接纳程度。

10月6日火
  1. The Decoder67

    Reka AI 发布 19B 多模态模型 Rho-1,单一网络统一文本、音视频与机器人控制中国語

    Reka AI 发布了 19B 参数的全模态研究预览模型 Rho-1,可在单一神经网络内同时处理与生成文本、图像、视频及机器人控制动作。模型无需工具调用或外部分流,所有模态均作为 token 在共享上下文窗口中运行,并支持实时生成连续视频与即时响应指令。为克服机器人训练数据短缺,研发团队利用逆动力学模型从普通互联网视频中提取控制信号,并在 320 块 H100 GPU 上完成了约三个月的训练。

    推薦理由:该模型将视觉生成与机器人控制统一在单一上下文窗口中,展示了利用互联网视频提取控制信号来训练具身模型的路径。

10月3日土
  1. Hacker News · AI77

    美国一杀人案刑期因法庭播放受害者AI视频被上诉法院撤销中国語

    美国亚利桑那州上诉法院撤销了路怒杀人犯 Gabriel Paul Horcasitas 的 10 年刑期并裁定重新量刑,原因是此前量刑前在法庭上违规播放了由 AI 生成的受害者视频。受害者家属利用其录音、视频与照片合成了受害者谈论宽恕的 AI 替身,原审法官曾采信该内容,但上诉法院认定该视频基于家属想象构建而非记录客观事实,已逾越司法界限。

    推薦理由:该判决为法庭使用AI生成内容划定了司法边界,反映出生成式替身进入量刑等严肃法律程序时的争议。

  2. Hacker News · AI80

    184 美元制作 12 部 AI 黏土动画短片:编码智能体全流程自动化与成本实测复盘中国語

    开发团队利用 Claude Code 与 Codex 实现了黏土定格动画短视频的全流程自动化生产,覆盖脚本、配音、画面生成、视频动效与质检发布,五天内以 184 美元生成成本产出 12 部短片并获得近 1.9 万次播放。

    推薦理由:作者完整拆解了利用编码智能体全自动制作黏土动画的管线与成本构成,为内容生成自动化与数据驱动规则迭代提供了具体可复现的参考。

  3. 爱范儿 · AI 筛选66

    AI 原生影视公司 Utopai Studios 如何推动自研模型与平台落地长片制作中国語

    AI 原生影视公司 Utopai Studios 自研的视频生成模型 Utopai X 在 Artificial Analysis 带音频排行榜中位列全球第二,正通过 PAI 制片平台将生成能力嵌入长片与剧集流程。

    推薦理由:文章以 Utopai Studios 为样本,展现了视频生成模型如何结合制片智能平台与传统工会规范推进影视长片落地。

10月2日金
  1. Hacker News · AI62

    尼康因涉嫌使用 AI 重新审查微观世界动图大赛获奖作品中国語

    尼康微观世界动图大赛(Nikon Small World in Motion)正对今年的获奖作品展开重新审查,因科学界质疑获奖者 Ning Xu 博士在显微视频中违规使用了 AI 生成技术。

    推薦理由:微观摄影竞赛中出现的 AI 生成水印与结构异常,展现了生成式 AI 介入科研影像竞赛时引发的真实性与合规争议。

  2. The Decoder64

    Tavus 推出实时音视频交互模型 Griffin,近半数受试者在 1 分钟通话中误认为真人中国語

    Tavus 推出实时交互模型 Griffin,可同时接收并生成视频,实时处理语音、面部表情、语调与手势。在 1 分钟视频通话测试中,48% 的受试者误将其当作真人;在音视频拟人度评测中得分 3.83 分,接近真人的 3.92 分。目前轻量版 Griffin-Lite 已面向部分测试者开放研究预览,潜在场景覆盖教学辅导与技术支持。

    推薦理由:原文给出了模型在音视频实时交互测试中的具体拟人度指标,读者可以据此评估数字人交互能力的最新进展。

10月1日木
  1. AITNT · AI头条(网页)78

    Claude Opus 5.5 代码生成视频的原理解析中国語

    Claude Opus 5.5 制作视频的本质并非直接生成像素的视频模型,而是通过编写代码在无头浏览器中逐帧渲染并结合 FFmpeg 合成 MP4 文件。整个流程分为脚本分镜规划、代码绘制画面、绑定动作时间轴、以配音时间戳作为全局时钟对齐,以及无头浏览器逐帧截图与混音合成五步。该路线具备精确可控和便于按帧修改的优势,适合图表与动效视频,但在活物写实表现与上下文消耗上仍有局限。

    推薦理由:文章拆解了利用模型编写代码、配合无头浏览器逐帧渲染与音视频合成的完整流程,为程序化生成动画提供了清晰的工程实现路径。

  2. Hacker News · AI78

    开发者开源 explainroo:基于 Claude Code 的全本地动画视频生成框架中国語

    作者开源了视频生成框架 explainroo,允许 Claude Code 等 AI 编码智能体通过编写 HTML/JS 代码与 Markdown 旁白生成带手绘动画、配音与音效的解释性视频。

    推薦理由:该项目展示了如何用编码智能体结合 Canvas 与无头渲染管线,实现无需视频生成大模型与 API 的全本地动画生成工作流。

9月30日水
  1. Hacker News · AI74

    explainroo 开源:支持 AI 编码智能体本地生成讲解视频与产品演示中国語

    开源工具 explainroo 支持由 Claude Code 等 AI 编码智能体自动生成讲解视频和软件演示视频,所有语音合成、对齐计时与渲染均在本地运行且无需独立 GPU。智能体通过编写文案与绘图脚本驱动流程,项目内置 Kokoro 语音模型、Whisper 对齐工具、Rough.js 手绘风渲染及 ffmpeg 合成,并提供文字重叠与发音检查等自检机制,支持多种画风与横竖屏尺寸输出。

    推薦理由:原文介绍了用编码智能体全自动编写脚本并本地渲染解说视频的工作流,读者可参考其结合轻量模型实现本地闭环与多格式输出的方案。

  2. 爱范儿 · AI 筛选74

    可灵 AI 推出 Kling 4.0 及 Flash 版本并开启实测中国語

    可灵 AI 推出 Kling 4.0 视频生成模型及兼顾速度与性价比的 Kling 4.0 Flash,在画面真实感、长镜头叙事与专业控制上实现升级。模型支持 10-bit HDR 及 4K/1080P 输出、单次原生最长 30 秒生成,覆盖 9 种语言口型同步,并支持单次任务组合最多 15 项参考素材与 10 张关键帧。

    推薦理由:原文实测了新模型在运镜稳定性、10-bit HDR 输出与多参考控制上的表现,便于创作者评估其接入专业影视流程的实用性。

  3. Google Developers · AI 筛选66

    Google Cloud 携手 HeyGen 将 Avatar IV 迁移至 Trillium TPU 并提速 1.86 倍中国語

    HeyGen 联合 Google Cloud 将 18B 参数的数字人视频模型 Avatar IV 迁移至 8 芯片 Trillium(v6e)TPU 主机,端到端推理速度相比初始版本提升 1.86 倍。

    推薦理由:文章详细拆解了将大模型从 GPU 迁移至 TPU 的通信流水线与算子重构细节,为大吞吐流式生成提供了实测参考。

  4. vLLM 官方博客(网页)75

    vLLM-Omni 支持 MiniMax H3 系统级优化与 FastH3 实时推理中国語

    vLLM-Omni 宣布完成对 MiniMax H3 的全栈推理优化并集成 FastVideo 的 4 步蒸馏方案 FastH3,实现了生成速度快于播放时长的端到端实时服务。

    推薦理由:文章拆解了音视频联合生成从 DiT 到 VAE 及视频封装的全链路瓶颈,为多模态大模型的低延迟部署提供了系统级参考。

  5. AITNT · AI头条(网页)79

    可灵AI发布 Kling 4.0 及 Flash 版视频生成模型中国語

    可灵AI宣布最新一代旗舰视频生成模型 Kling 4.0 开启内测并计划于10月上线,同时推出轻量版 Kling 4.0 Flash。Kling 4.0 单次原生生成时长达到30秒,结合续拍最长可达2分钟,支持最多10张关键帧与15个参考素材输入,并新增双通道立体声、21:9超宽画幅与10-bit HDR高规格输出。

    推薦理由:新版本将原生生成时长提升至30秒并支持10张关键帧控制,反映出视频生成正从短片段生成转向长镜头与专业叙事流程。

9月25日金
  1. Google Research64

    Google 提出 AI 视频联合导演框架,推进长时长连贯视频生成中国語

    Google Research 推出一套面向长时长叙事视频的多智能体框架体系,涵盖 Co-Director、CANVAS、A²RD 和 VQQA 四项核心研究,旨在解决视频扩散模型在多镜头场景中的语义漂移和级联错误。

    推薦理由:Google 将长视频生成解构为多智能体编排与世界状态追踪,提供了解决多镜头叙事中角色与场景漂移的成套系统方案。

9月10日木
  1. Hugging Face71

    Gradio 基于 Workflow 画布重构 AUTOMATIC1111 推出 Workflow1111中国語

    Hugging Face 团队基于 Gradio Workflow 画布推出 Workflow1111,通过 73 个节点和 11 条管线重构了 AUTOMATIC1111 的核心功能。

    推薦理由:展示了如何用可视化节点图复构复杂生图系统,且每个输出节点均可自动转为 REST 接口与 MCP 工具供智能体调用。