72-GPU system
Grace Blackwell
具体 GPU 版本、CPU、内存与互联取决于确认后的实例配置,硬件显存参考值不代表已分配资源
厂商规格说明 ↗查看实时价格 →
按需价格为 Arvica 实时目录费率(美元/GPU 小时),在部署时显示。预留与企业价格以 Arvica 已接受的方案为准。
申请算力方案 →确认可用容量
选择按需或预留算力,开通前确认地区、开始时间与访问环境
GB200 NVL72 将 Grace CPU 与 Blackwell GPU 整合为液冷机架级系统 该方案围绕完整系统容量展开 并非单卡租用
| 系统 | 72 × Blackwell GPU + 36 × Grace CPU |
|---|---|
| GPU 总显存 | 13.4 TB HBM3e |
| NVLink 带宽 | 130 TB/s 汇总带宽(第五代 NVLink) |
| FP4 Tensor Core(稀疏) | 1,440 PFLOPS(含稀疏化,厂商公布) |
登记预订意向,无需付款或承诺 Arvica 会在下单前确认配置、价格与可用容量
Grace Blackwell
具体 GPU 版本、CPU、内存与互联取决于确认后的实例配置,硬件显存参考值不代表已分配资源
厂商规格说明 ↗按需价格为 Arvica 实时目录费率(美元/GPU 小时),在部署时显示。预留与企业价格以 Arvica 已接受的方案为准。
申请算力方案 →选择按需或预留算力,开通前确认地区、开始时间与访问环境
Arvica 实时目录费率(美元/GPU 小时),按具体配置与当前可用性报价,付款前以签名报价锁定。
租期、规模与专用容量价格以 Arvica 已接受的方案为准。 配置、区域与交付时间在您的方案中确认。
下单受理前确认可用性。 税费及附加服务在付款前确认。
适合评估可受益于大型 NVLink 域的分布式训练或推理 应从模型并行策略、数据集和预期利用率开始规划
需要 Blackwell Ultra 时可比较 GB300 若任务无需机架级配额 B200 节点可能更容易按需规划
NVL72 设计包含 72 个 Blackwell GPU 和 36 个 Grace CPU 分布式软件仍需管理跨设备的数据放置与通信
需一并明确 NVLink 域、外部网络、存储吞吐、液冷环境与验收测试 汇总带宽不等于单卡应用可用带宽
Grace 使用 Arm CPU 迁移前需验证容器、原生库、监控代理和数据工具对主机架构的支持
NVIDIA 硬件参考 ↗ · 选型建议为 Arvica 的评估 请结合实际工作负载验证
明确操作系统、框架和容器镜像版本 Arvica 在开通前确认驱动与 GPU 兼容性 模板名称不代表软件许可或已保证预装的镜像
配置时保存 SSH 公钥 私钥保留在自己的设备上 访问准备就绪后 经核实的部署记录会提供实际主机和登录用户
容量规划中应区分启动盘、数据集、模型权重与检查点 使用数据卷前确认持久性、备份责任、挂载规则和删除行为
按需确认数据进出、公网 IP 访问与私有网络 涉及受监管或位置敏感的数据时 应在提交前通过高级设置指定所需地区
Arvica 提供经核实的访问信息后 使用私钥及实例页面显示的准确主机与用户名连接 然后检查分配的 GPU 与拓扑
ssh -i ~/.ssh/your_key USER@HOST nvidia-smi nvidia-smi topo -m
将 USER 与 HOST 替换为你自己的部署信息 这些命令用于检查已有机器 不会创建机器
参数量 × 每权重字节数仅估算权重 还需加入 KV 缓存、激活值、临时张量和框架开销 训练还需要梯度与优化器状态
同时记录模型版本、精度、输入输出长度、并发、延迟与错误率 在相同条件下比较完成任务或成功请求的成本
计入全部分配 GPU、运行时间、存储、网络、税费与支持 月度估算采用 730 小时方便比较 实际计费周期和最低租期由合同明确
适合评估可受益于大型 NVLink 域的分布式训练或推理 应从模型并行策略、数据集和预期利用率开始规划
NVL72 设计包含 72 个 Blackwell GPU 和 36 个 Grace CPU 分布式软件仍需管理跨设备的数据放置与通信
Grace 使用 Arm CPU 迁移前需验证容器、原生库、监控代理和数据工具对主机架构的支持
需一并明确 NVLink 域、外部网络、存储吞吐、液冷环境与验收测试 汇总带宽不等于单卡应用可用带宽
不能据此判断 资源配额、存储和预留承诺可能继续计费 请核对合同并通过支持申请对应生命周期操作
保留方式取决于约定的存储配置 申请销毁前应导出数据 并确认备份与数据卷保留安排
当前配置进入 Arvica 容量审核,只有基础设施核实后才显示运行状态
不一定。按需用量按 Arvica 实时目录费率计费;存储、网络、税费与服务费用会在订购前分项列明,预留或企业条款以您的方案为准
多节点互联及容量预留需求可通过企业容量入口提交
| GPU | 显存参考 | 选型依据 |
|---|---|---|
| GB200 NVL72 | 72-GPU system | 适合评估可受益于大型 NVLink 域的分布式训练或推理 应从模型并行策略、数据集和预期利用率开始规划 |
| B200 | 180–192 GB HBM3e | 适合已具备 Blackwell 兼容软件栈 且需要低精度加速的工作负载 更换精度时应同时评估质量与吞吐 |
| B300 | 288 GB HBM3e | 模型状态、激活值或 KV 缓存限制当前部署时 可评估 B300 使用代表性模型和目标并发 判断减少卡数并采用更大显存是否改善总成本 |
| GB300 NVL72 | 72-GPU system | 可评估用于持续大模型推理或高通信需求分布式训练的机架容量 提交需求时提供并行方案与服务目标 |
| 配置 | 实际差异 | 下单前确认 |
|---|---|---|
| NVL72 rack · Bare Metal · 72-GPU system | 独立物理主机配置 主机权限以确认服务为准 | 具体卡型、GPU 分配、卡间连接、CPU 与磁盘限制 |
仅权重可按参数量 × 每参数字节数估算 7B 模型 BF16 权重约 14 GB 70B 约 140 GB 还需加上 KV 缓存、激活、框架缓冲和训练状态 这是算术估算 不是可运行保证
使用相同模型版本、精度、序列长度和并发 记录首 token 时间、p95 延迟、输出 tokens/s、峰值显存及完整实例费用 训练比较还需记录每步时间及相同质量目标下的收敛情况
下方提供厂商规格来源 当前尚未发布此配置的 Arvica 应用吞吐实测数据 性能承诺前应进行针对工作负载的验收测试
NVIDIA ↗向 Arvica 申请 PCIe/SXM、虚拟机及专属裸金属容量,提交需求以获取部署方案。
1 款可询价配置