GPT Image 2.5 is live — OpenAI's newest image model, targeted edits that leave the rest of the frame alone
全部教程与指南

· reAPI Team

DGX Spark 配置参数:GB10、128 GB 内存与可运行的模型

依据 NVIDIA 官方规格表介绍 DGX Spark 配置:GB10 芯片、64 或 128 GB 统一内存、273 GB/s 带宽、1 PFLOP FP4 算力,以及能容纳哪些本地大模型。

DGX Spark 配置参数:GB10、128 GB 内存与可运行的模型

NVIDIA DGX Spark 是一台采用 GB10 Grace Blackwell Superchip、底面为 150 mm 正方形的桌面计算机。DGX Spark 的主要配置包括 20 核 Arm CPU、最高 1 petaFLOP FP4 算力、带宽为 273 GB/s 的 64 GB 或 128 GB 统一 LPDDR5x 内存、最高 4 TB NVMe 存储以及 200 Gbps ConnectX-7 网络端口。它预装 NVIDIA 基于 Ubuntu 的 DGX OS。[1]

两个数字决定这台机器的擅长之处:128 GB 内存决定能容纳多大的模型,273 GB/s 决定模型生成 token 的速度。本文先列出 DGX Spark 的官方配置,再解释这些参数对本地运行大语言模型意味着什么。

DGX Spark 配置参数速览

组件规格
芯片NVIDIA GB10 Grace Blackwell Superchip
CPU20 核 Arm:10 Cortex-X925 + 10 Cortex-A725
GPUBlackwell 架构,第 5 代 Tensor Cores,第 4 代 RT Cores
AI 性能最高 1 PFLOP FP4(启用稀疏性的理论值)
内存64 GB 或 128 GB LPDDR5x,一致性统一内存,256 位接口
内存带宽273 GB/s
存储最高 4 TB NVMe M.2,支持自加密
网络10 GbE RJ-45、200 Gbps ConnectX-7 网卡、Wi-Fi 7、Bluetooth 5.4
端口4x USB Type-C、1x HDMI 2.1a、通过 USB-C 提供最多 3x DisplayPort
功率240 W 电源;GB10 TDP 为 140 W
尺寸与重量150 x 150 x 50.5 mm,1.2 kg
操作系统NVIDIA DGX OS

来源:NVIDIA DGX Spark 规格,核对于 2026 年 11 月 4 日。[1]

NVIDIA 规格表中的两条脚注影响了表格的解读。1 petaFLOP 是“使用稀疏性功能时的理论 FP4 TOPS”,不是稠密模型的持续性能。64 GB 配置“仅通过参与的 OEM 合作伙伴提供”,因此 64 GB 版本只由这些合作伙伴销售。[1] NVIDIA 产品页未列出价格,而是将买家引导至 NVIDIA Marketplace 和合作伙伴。

128 GB 统一内存能容纳什么模型

NVIDIA 表示,DGX Spark 可以对最高 2000 亿参数的模型运行推理。[1] 背后的计算很简单。以 4 位格式存储一个权重需要半个字节,因此 2000 亿参数需要约 100 GB,128 GB 中还剩约 28 GB 可供操作系统、运行时和上下文缓存使用。同样容量在 8 位精度下能容纳的参数量约为一半。

按模型大小和精度计算,仅权重占用如下:

模型大小4 位权重8 位权重能放入 128 GB 吗?
30B 参数~15 GB~30 GB两种精度都可以,且有长上下文余量
70B 参数~35 GB~70 GB两种精度都可以
120B 参数~60 GB~120 GB4 位较充裕;8 位几乎没有上下文余量
200B 参数~100 GB~200 GB仅 4 位可以

这些数字是参数量乘以每个权重的字节数,未计入上下文缓存、激活值和运行时开销。因此,纸面上“放得下”的模型,遇到长提示词时仍可能耗尽内存。

由于 CPU 和 GPU 共用一个内存池,无需满足独立的显存容量限制。这也意味着上下文窗口会与权重争用内存。例如,Ollama 在 VRAM 达到 48 GiB 及以上时会将默认上下文提高至 256k token,并建议编程智能体至少使用 64,000 token;大模型配合长上下文可能使总占用超过可用容量。[2]

64 GB 版本将这些容量全部减半。以 4 位格式计算,在尚未预留上下文空间前,它最多能容纳约 1000 亿参数的模型。

为什么 273 GB/s 比 1 petaFLOP 更重要

每生成一个 token,都需要从内存读取模型的激活权重。对稠密模型而言,就是全部权重,因此内存带宽决定了解码速度的上限:

maximum tokens per second ≈ memory bandwidth ÷ bytes of weights read per token

对于 4 位格式的 700 亿参数稠密模型,每个 token 约需读取 35 GB 权重,因此 273 GB/s 最多允许约每秒 7.8 token。若一个混合专家模型每个 token 激活例如 100 亿参数,在 4 位格式下读取约 5 GB,上限就提高到约每秒 55 token。这些是根据公开带宽推算的上限,并非实测;计入缓存、注意力和软件开销后,实际吞吐会更低。

实际含义是:DGX Spark 能容纳消费级 GPU 放不下的模型,而且比起最大的稠密模型,它更适合激活参数量较小的混合专家模型。

在 DGX Spark 上运行本地大模型

GB10 芯片位于 Ollama 的 GPU 支持列表中,CUDA 计算能力为 12.1。[2] LM Studio 提供 ARM64 Linux 版本,与 DGX Spark 的 Arm CPU 匹配。[3] DGX OS 支持包括 NIM 微服务在内的 NVIDIA 自有软件栈。[1] 磁盘空间很少成为限制:4 位格式的 2000 亿参数模型在磁盘上约占 100 GB,因此最高 4 TB 的容量能容纳数十个大模型。两款最常见本地运行工具的对比,见 Ollama 与 LM Studio。

对于单台设备放不下的模型,ConnectX 网络可让最多四台 DGX Spark 共同运行一个模型。[1]

FAQ

DGX Spark 运行 Windows 吗?

它预装 NVIDIA DGX OS,这是一个基于 Ubuntu 的 Linux 发行版,与 NVIDIA 其他 DGX 系统的软件保持一致。[1] 搭载 NVIDIA RTX Spark 的 Windows PC 属于另一条产品线。

DGX Spark 的内存是显存吗?

它是 CPU 与 GPU 共享的统一内存,容量为 64 GB 或 128 GB,类型为 LPDDR5x。扣除操作系统和其他进程所需部分后,模型可以使用其中的大部分。[1]

最多可以连接多少台 DGX Spark?

通过内置的 200 Gbps ConnectX-7 网络,最多连接四台。[1]

当 DGX Spark 的配置仍不够用时

DGX Spark 的配置偏重容量而非速度:128 GB 能容纳 4 位格式的 2000 亿参数模型,但 273 GB/s 会使稠密模型输出较慢。如果项目需要最大的模型、长上下文和快速响应,托管 API 是一种替代方案。reAPI 通过一个兼容 OpenAI 的密钥提供 DeepSeek V4 和拥有 1M-token 上下文的 Kimi K3 等大模型,便于将本地结果与托管版本进行比较。

参考资料

  1. NVIDIA. DGX Spark product page and specifications. 2026 年 11 月 4 日获取自 nvidia.com/en-us/products/workstations/dgx-spark
  2. Ollama. Hardware support and context length. 2026 年 11 月 4 日获取自 docs.ollama.com/gpu 和 docs.ollama.com/context-length
  3. LM Studio. System requirements. 2026 年 11 月 4 日获取自 lmstudio.ai/docs/app/system-requirements
全部教程与指南