Latest selected
241–260 of 288- NVIDIA Developer BlogSelectedAI score6565
NVIDIA 推出 TensorRT 多设备推理能力并在 Dynamo-Triton 中完成集成,旨在简化多 GPU 场景下的模型服务。该能力基于 NCCL 分布式通信集合,允许单个 TensorRT 网络跨多张 GPU 执行,同时保留 TensorRT 的推理优化性能,已自 TensorRT 11.0 起获得完整支持。
Why it matters: 原文介绍了基于 NCCL 的多 GPU 分布式推理新特性,读者可据此了解 TensorRT 11.0 的多卡部署优化机制。
- The Next PlatformSelectedAI score7373
IDC 最新数据显示,2026 年第二季度全球服务器销售额达到 1663.2 亿美元,同比增长 52%,其中 GPU 加速系统销售额达 874 亿美元。
Why it matters: 文章通过拆解服务器出货量与均价数据,揭示了算力投资激增背后整机形态向机架级演进的采购结构变化。
- NVIDIA · AI 筛选SelectedAI score7878
NVIDIA 正式推出 DSX Ready 认证计划,用于验证符合其 DSX AI 工厂参考设计要求的合作伙伴供电与散热解决方案。该项目首批设立电池储能系统(BESS)与冷量分配单元(CDU)两个类别,首批认证方案来自 Hitachi Energy、LG Energy Solution、Tesla、LG Electronics、LiquidStack 和 Vertiv。
Why it matters: 该计划为液冷与储能设备建立了统一的参考设计规范,有助于建设方降低 AI 数据中心的供电与散热系统集成风险。
- The Next PlatformSelectedAI score6666
受生成式 AI 算力需求拉动,IDC 数据显示 2026 年 Q2 全球以太网交换机营收同比增长 43.4% 达到 189.1 亿美元,其中数据中心以太网交换机营收达 123 亿美元,同比增长 64.5%。
Why it matters: 文章通过拆解数据中心交换机市场与端口速率变化,展现了生成式 AI 算力集群对高速以太网架构的强劲拉动。
- SemiAnalysis · 算力产业SelectedAI score7676
SemiAnalysis针对Engram模型架构开展推理测试,评估了DeepSeek-V4.1-Flash将多token嵌入表卸载至主机DRAM与SSD的系统表现。
Why it matters: 实测展示了将嵌入表卸载至主机DRAM可释放显存并降低并行开销,而SSD卸载路径在当前协同机制下性价比偏低。
- NVIDIA · AI 筛选SelectedAI score7676
NVIDIA 在 MLPerf Inference v6.1 预览评测中展示了 Vera Rubin NVL72 系统,在 Qwen3-VL 任务上的吞吐量达到 GB300 NVL72 的 3.7 倍,在 DeepSeek-R1 上的吞吐量最高达到 2.5 倍。
Why it matters: 原文通过实测基准数据对比了新一代架构在长上下文与多模态模型上的吞吐与扩展效率,便于评估大模型推理基础设施的代际演进。
- NVIDIA · AI 筛选SelectedAI score6767
Emerald AI、Google 和 NVIDIA 宣布联合发起 AI 能源管理联盟(AEMA),旨在推动能够根据电网状况动态调节用电的柔性 AI 数据中心建设。
Why it matters: 原文介绍了科技巨头联合推动柔性用电数据中心的技术与并网准则,读者可据此了解 AI 算力扩张应对电力瓶颈的协同路径。
- NVIDIA · AI 筛选SelectedAI score6363
黄仁勋在 Salesforce Dreamforce 大会上发表演讲,强调 AI 已成为全球基础设施层,同时 Salesforce 宣布推出基于 NVIDIA Nemotron 3 Super 构建的首个 CRM 推理模型 Koa。
Why it matters: 黄仁勋在对话中阐明了企业级推理模型与安全工程的边界,有助于理解开源基础模型在垂直领域落地的技术路径。
- NVIDIA · AI 筛选SelectedAI score8080
NVIDIA 详细阐述了面向 AI 工厂的 DSX 能效管理架构,涵盖动态电力分配软件 DSX MaxLPS、电网柔性调度 DSX Flex 以及 800V DC 供电设计。
Why it matters: 原文给出了 AI 工厂在固定电力预算下的动态调优与电网响应实测数据,读者可以据此评估算力中心的能效瓶颈与扩展方案。
- NVIDIA · AI 筛选SelectedAI score7878
NVIDIA 在 AI Infra Summit 上公布了 Vera Rubin 系统与 DSX 平台的最新能效进展,推动 AI 基础设施评估从峰值性能转向每兆瓦有效 Token 产出。
Why it matters: 材料展现了从单卡峰值算力转向每兆瓦可用生成量的指标变化,为评估智算集群的电力与能效经济性提供了参考数据。
- SemiAnalysis · 算力产业SelectedAI score7676
SemiAnalysis 发布了基于 AgentX 基准的 Vera Rubin NVL72 首批实测数据,显示其智能体推理能效与每美元吞吐量大幅超越 Blackwell 架构。
Why it matters: 文章通过多负载基准实测拆解了新一代集群在每瓦吞吐和总体拥有成本上的真实收益,为智算中心选型提供了量化参考。
- The Next PlatformSelectedAI score8080
甲骨文最新财季实现营收191.8亿美元,其中云基础设施(IaaS)营收同比增长1倍至74亿美元,展现出巨额算力投入正加速转化为实际收入。该季度甲骨文新增850兆瓦基础设施容量并部署超30万颗GPU,已向OpenAI阿比林数据中心交付618兆瓦容量以支撑前沿模型训练。
Why it matters: 文章通过拆解甲骨文云基础设施与算力交付数据,展现了超大规模算力投入如何通过AI积压订单逐步转化为营收回报。
- SemiAnalysis · 算力产业SelectedAI score7777
SemiAnalysis 分析了通用机器人智能体系的算力部署难题,指出机器人通用规划模型(System 2)参数规模正向千亿乃至万亿迈进,受功耗、散热与晶圆短缺限制,难以完全在端侧芯片承载。
Why it matters: 文章从晶圆供给、DRAM占用与TCO拆解了机器人端侧与云端推理的经济性分水岭,为具身智能系统架构选型提供了罕见的硬件成本参照。
- SemiAnalysis · 算力产业SelectedAI score7474
SemiAnalysis 分析指出,4 层堆叠(4-hi)HBM 在推理场景下能提供更优的单位带宽成本与更低的每 token 成本,正在打破盲目追求高层堆叠的行业趋势。
Why it matters: 文章从带宽成本与机架级聚合内存变化切入,测算了堆叠高度降低对每 token 成本与供应链晶圆利用率的具体影响。
- SemiAnalysis · 算力产业SelectedAI score7272
SemiAnalysis 分析了英伟达表外担保体系及算力资产负债表的承载能力。英伟达披露的表外担保总额增至 5300 亿美元,涵盖供货承诺、数据中心租赁以及为 Neocloud 算力提供的收入保底等项目。分析指出,英伟达通过制造信用锚点协助第三方算力扩张并赚取全额利润,但若出现深幅行业下行且 Neocloud 违约,将面临关联的信用与表外履约风险。
Why it matters: 拆解了英伟达表外担保的兜底机制与风险结构,有助于读者理解智算基础设施扩张背后的信用传导路径。
- The Next PlatformSelectedAI score7272
AI 推理芯片初创公司 d-Matrix 宣布与 Nvidia 达成合作,将其基于 3D-RAM 的下一代推理芯片 Raptor XPU 接入 Nvidia MGX 架构与 NVL144 液冷机架。
Why it matters: 存算一体芯片通过接入主流机架与高速互连架构降低落地门槛,为高并发低延迟的生成式推理提供了机架级异构部署参考。
- NVIDIA Developer BlogSelectedAI score6161
NVIDIA 宣布推出 CUDA Rust,正式支持使用 Rust 语言进行原生 GPU 内核编程。继 CUDA C++ 与 CUDA Python 之后,NVIDIA 计划在 2027 年及未来持续完善 CUDA Rust 工具链,以支持推理引擎、服务基建与智能体运行时等 AI 系统层软件的开发。
Why it matters: NVIDIA 将 GPU 内核编程拓展至 Rust 生态,为 AI 系统层与推理基础设施开发提供了新的工具选择。
- SemiAnalysis · 算力产业SelectedAI score8080
SemiAnalysis 发布 InferenceX 针对谷歌 TPUv7 Ironwood 的第三方推理评测,在 FP8 聚合服务场景对比 NVIDIA B200 与 B300 时单位成本性能最高领先 50%。
Why it matters: 文章从硬件架构与软件栈演进两个维度拆解了谷歌 TPU 对外商业化的可行性与性价比表现。
- The Next PlatformSelectedAI score9191
Nvidia 宣布将斥资 129 亿美元收购开源 AI 社区与平台 Hugging Face,该交易预计在 2027 年上半年完成并需等待监管部门批准。Hugging Face 平台目前拥有超过 1800 万名开发者、20 万家企业用户以及 300 万个模型,平台随开源生态扩张而面临的巨大计算与审核成本是促成此次交易的重要原因。
Why it matters: 原文梳理了交易背后的算力成本与生态诉求,读者可以据此了解芯片巨头整合开源社区对开发者生态的深远影响。
- SemiAnalysis · 算力产业SelectedAI score7373
SemiAnalysis 深入分析了韩国的主权 AI 布局,指出韩国正通过基座模型淘汰赛与近万亿美元的算力基建摆脱对美国前沿模型的依赖。韩国计划到 2029 年建成 8.4GW、到 2035 年达到 18.4GW 数据中心容量,由 SK 集团、GS 集团和 Naver 等主导建设。
Why it matters: 文章拆解了国家级主权算力竞赛的运作机制与局限,有助于理解非中美市场如何通过基建投资平衡前沿模型依赖风险。