跳到正文

AI 视频

AI 视频生成与理解:文生视频模型、视频编辑工具与影视创作变革的追踪。

最新精选

第 1–14 条 · 共 14 条
今天10月1日周四
  1. Hacker News · AI78

    开发者开源 explainroo:基于 Claude Code 的全本地动画视频生成框架

    作者开源了视频生成框架 explainroo,允许 Claude Code 等 AI 编码智能体通过编写 HTML/JS 代码与 Markdown 旁白生成带手绘动画、配音与音效的解释性视频。

    推荐理由:该项目展示了如何用编码智能体结合 Canvas 与无头渲染管线,实现无需视频生成大模型与 API 的全本地动画生成工作流。

9月30日周三
  1. Hacker News · AI67

    开源框架 Explainroo 发布,支持通过 Claude 等智能体全自动制作解说视频

    Explainroo 是一款免费开源的解说视频生成框架,支持 Claude Code 等编码智能体在本地全自动完成脚本、配音与渲染并导出 MP4。该工具使用开源 Kokoro 模型合成语音,通过 Whisper 确定逐词时间戳,并在后台调用 Chrome 与 ffmpeg 进行矢量绘图与压制,无需独立显卡即可离线运行。

    推荐理由:该项目让编码智能体通过本地轻量模型和无头浏览器全自动制作解说视频,为自动化内容创作提供了无需 GPU 的端到端实现范式。

  2. 爱范儿 · AI 筛选74

    可灵 AI 推出 Kling 4.0 及 Flash 版本并开启实测

    可灵 AI 推出 Kling 4.0 视频生成模型及兼顾速度与性价比的 Kling 4.0 Flash,在画面真实感、长镜头叙事与专业控制上实现升级。模型支持 10-bit HDR 及 4K/1080P 输出、单次原生最长 30 秒生成,覆盖 9 种语言口型同步,并支持单次任务组合最多 15 项参考素材与 10 张关键帧。

    推荐理由:原文实测了新模型在运镜稳定性、10-bit HDR 输出与多参考控制上的表现,便于创作者评估其接入专业影视流程的实用性。

  3. Google Developers · AI 筛选66

    Google Cloud 携手 HeyGen 将 Avatar IV 迁移至 Trillium TPU 并提速 1.86 倍

    HeyGen 联合 Google Cloud 将 18B 参数的数字人视频模型 Avatar IV 迁移至 8 芯片 Trillium(v6e)TPU 主机,端到端推理速度相比初始版本提升 1.86 倍。

    推荐理由:文章详细拆解了将大模型从 GPU 迁移至 TPU 的通信流水线与算子重构细节,为大吞吐流式生成提供了实测参考。

  4. vLLM 官方博客(网页)75

    vLLM-Omni 支持 MiniMax H3 系统级优化与 FastH3 实时推理

    vLLM-Omni 宣布完成对 MiniMax H3 的全栈推理优化并集成 FastVideo 的 4 步蒸馏方案 FastH3,实现了生成速度快于播放时长的端到端实时服务。

    推荐理由:文章拆解了音视频联合生成从 DiT 到 VAE 及视频封装的全链路瓶颈,为多模态大模型的低延迟部署提供了系统级参考。

  5. AITNT · AI头条(网页)79

    可灵AI发布 Kling 4.0 及 Flash 版视频生成模型

    可灵AI宣布最新一代旗舰视频生成模型 Kling 4.0 开启内测并计划于10月上线,同时推出轻量版 Kling 4.0 Flash。Kling 4.0 单次原生生成时长达到30秒,结合续拍最长可达2分钟,支持最多10张关键帧与15个参考素材输入,并新增双通道立体声、21:9超宽画幅与10-bit HDR高规格输出。

    推荐理由:新版本将原生生成时长提升至30秒并支持10张关键帧控制,反映出视频生成正从短片段生成转向长镜头与专业叙事流程。

9月25日周五
  1. Google Research64

    Google 提出 AI 视频联合导演框架,推进长时长连贯视频生成

    Google Research 推出一套面向长时长叙事视频的多智能体框架体系,涵盖 Co-Director、CANVAS、A²RD 和 VQQA 四项核心研究,旨在解决视频扩散模型在多镜头场景中的语义漂移和级联错误。

    推荐理由:Google 将长视频生成解构为多智能体编排与世界状态追踪,提供了解决多镜头叙事中角色与场景漂移的成套系统方案。

9月10日周四
9月2日周三
  1. Google DeepMind79

    Google DeepMind 为 Gemini 推出智能体视频理解功能

    Google DeepMind 为 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 推出智能体视频理解(agentic video understanding)功能,可将 token 消耗降低最高 88%、成本降低最高 66%,并将准确率提升最高 7%。

    推荐理由:原文展示了模型通过主动调用工具按需动态分析视频的机制,为长视频处理的成本与精度优化提供了具体参考。

8月28日周五
7月17日周五
  1. 通义实验室 公众号79

    通义实验室发布实时多模态交互模型 Wan-Streamer v0.2

    通义实验室发布实时双工全模态交互模型 Wan-Streamer v0.2,端到端响应延迟约 550ms,输出视频分辨率提升至 640×368 @ 25FPS。模型将传统流水线重构为基于 160ms 流式单元的原生因果流,并采用单卡 Thinker 与多卡 Performer 双通路硬件解耦与 Ulysses 序列并行机制,实现低延迟感知与重载视频生成的时序重叠。

    推荐理由:原文给出了双通路硬件解耦与时序重叠调度方案,展示了在大幅提升视频分辨率时维持超低交互延迟的具体工程路径。

7月3日周五
  1. Google DeepMind63

    Google DeepMind 与影视制作公司 A24 达成研究合作,Google 同步完成投资

    Google DeepMind 宣布与独立电影制片发行公司 A24 达成长期研发合作,Google 同时已对 A24 完成投资。双方将把 DeepMind 的前沿技术研究直接融入影视创作者的实际工作流,借助一线艺术家的反馈共同探索和塑造下一代影视创作工具与叙事形式。

    推荐理由:该合作将前沿 AI 技术直接接入专业影视制作流程,为观察生成式工具在电影工业中的研发与落地提供了样本。

7月1日周三
5月18日周一
  1. Google DeepMind88

    Google DeepMind 发布 Gemini Omni 与 Gemini Omni Flash 视频生成模型

    Google DeepMind 正式推出 Gemini Omni 系列模型及首款模型 Gemini Omni Flash,支持将图像、音频、视频和文本任意组合输入并生成高质量视频。

    推荐理由:原文介绍了支持任意模态输入并能对话式编辑视频的新模型,读者可以了解多模态生成与推理能力结合的最新落地进展。