| 规格 | AMD Instinct MI325X | NVIDIA H200 SXM |
|---|---|---|
| 架构 | CDNA 3 | Hopper |
| 显存 | 256 GB HBM3E | 141 GB HBM3e |
| 显存带宽 | 6 TB/s | 4.8 TB/s |
| FP8 稠密算力 | 2.6 PF | 1.98 PF |
| 稠密 FP4 | n/a | n/a |
| 互联 | Infinity Fabric · 896 GB/s | NVLink 4 · 900 GB/s |
| 功耗（TDP） | 1,000 W | 700 W |
| 每 GPU 月价 | $2,299 | $2,699 |
| 每 GB 显存价格 | $8.98 | $19.14 |
| 每 FP8 PFLOPS 价格 | $884 | $1,363 |
| 库存 | 12月2日到货 | 34 块可用 |
每行中更优的数值以绿色标出。价格均为 CoreGPU 每 GPU 每月价格，比市场中位价低至少 25%。
- 用更少的 GPU 运行 400B+ 模型
- 基于 ROCm 的长上下文推理服务
- 大批量微调
$2,299 /GPU/月查看到货日期 MI325X
- 仅支持 CUDA 的内核与 TensorRT-LLM
- 使用标准配方微调 70B 模型
- 对初次接触 ROCm 的团队风险更低
$2,699 /GPU/月配置 H200
MI325X vs H200：不同服务器规格的月价
| 服务器 | MI325X | H200 | 差价 |
|---|---|---|---|
| 1 块 GPU | $2,299/月 | $2,699/月 | MI325X 便宜 $400 |
| 2 块 GPU | $4,598/月 | $5,398/月 | MI325X 便宜 $800 |
| 4 块 GPU | $9,196/月 | $10,796/月 | MI325X 便宜 $1,600 |
| 8 块 GPU | $18,392/月 | $21,592/月 | MI325X 便宜 $3,200 |
每 GPU 固定月价，所有服务器规格均相同。以 USD 计价，不含税。
显存可容纳的最大模型
| 权重 | 1× MI325X | 1× H200 | 8× MI325X | 8× H200 |
|---|---|---|---|---|
| BF16 | 106B | 58B | 853B | 470B |
| FP8 | 213B | 117B | 1.7T | 940B |
| FP4 | 426B | 235B | 3.4T | 1.9T |
表中为预留 20% 激活值与运行时余量后，权重可装入显存的参数规模。长上下文和大批量需要为 KV 缓存预留更多空间：参见您需要多少显存。
常见问题
MI325X vs H200：常见问题
已经是客户？请在控制台提交工单：工程师会在一个工作日内回复。
了解支持流程MI325X 比 H200 更快吗？
在稠密 FP8 Tensor 算力上，MI325X 更快：每 GPU 2.6 PF，而对方为 1.98 PF。MI325X 的显存带宽为 6 TB/s，H200 为 4.8 TB/s，而这一指标对 LLM 解码影响最大。
MI325X 与 H200 的月价相比如何？
在 CoreGPU，MI325X 为每 GPU 每月 $2,299，H200 为每 GPU 每月 $2,699，因此一台 8 卡服务器的月费分别为 $18,392 和 $21,592。MI325X 每 GPU 便宜 15%。两者价格均比市场中位价低至少 25%，按月从预付余额中扣费。
LLM 推理选 MI325X 还是 H200 更好？
对于大模型和长上下文，MI325X 凭借每 GPU 256 GB 显存更胜一筹，同一模型所需的 GPU 更少。如需用更少的 GPU 运行 400B+ 模型，请选择 MI325X；仅支持 CUDA 的内核和 TensorRT-LLM 请选择 H200。
MI325X 和 H200 可以按月租用吗？
可以。两者都是按月租用的独享 GPU，每台服务器 1 至 8 块，并提供 root SSH 访问权限。目前 MI325X 已售罄，12月2日补货，H200 有现货（34 块可用）。支持使用 BTC、ETH、XMR、USDT (TRC-20) 或 SOL 付款。