GPU 对比
MI355X vs H200:规格、月价与选购建议
MI355X 比 H200 领先一代:显存约为其两倍(288 GB 对 141 GB),带宽为其 1.7 倍(8 TB/s 对 4.8 TB/s),稠密 FP8 算力为其 2.5 倍(5.0 PF 对 1.98 PF),并支持 Hopper 不具备的 FP4,月价却低约 9%。如果您的代码依赖仅支持 CUDA 的内核、TensorRT-LLM 或针对 Hopper 调优的配方,H200 仍是稳妥之选。
| 规格 | AMD Instinct MI355X | NVIDIA H200 SXM |
|---|---|---|
| 架构 | CDNA 4 | Hopper |
| 显存 | 288 GB HBM3E | 141 GB HBM3e |
| 显存带宽 | 8 TB/s | 4.8 TB/s |
| FP8 稠密算力 | 5 PF | 1.98 PF |
| 稠密 FP4 | 10.1 PF | n/a |
| 互联 | Infinity Fabric · 1.08 TB/s | NVLink 4 · 900 GB/s |
| 功耗(TDP) | 1,400 W | 700 W |
| 每 GPU 月价 | $2,449 | $2,699 |
| 每 GB 显存价格 | $8.50 | $19.14 |
| 每 FP8 PFLOPS 价格 | $490 | $1,363 |
| 库存 | 21 块可用 | 34 块可用 |
每行中更优的数值以绿色标出。价格均为 CoreGPU 每 GPU 每月价格,比市场中位价低至少 25%。
- 用更少的 GPU 部署 70B 至 400B 模型
- 在 ROCm 上进行 FP8 与 FP4 推理
- 每美元可获得更多显存与算力
- 仅支持 CUDA 的内核与 TensorRT-LLM
- 针对 Hopper 调优的配方
- 全团队统一使用 NVIDIA 工具链
MI355X vs H200:不同服务器规格的月价
| 服务器 | MI355X | H200 | 差价 |
|---|---|---|---|
| 1 块 GPU | $2,449/月 | $2,699/月 | MI355X 便宜 $250 |
| 2 块 GPU | $4,898/月 | $5,398/月 | MI355X 便宜 $500 |
| 4 块 GPU | $9,796/月 | $10,796/月 | MI355X 便宜 $1,000 |
| 8 块 GPU | $19,592/月 | $21,592/月 | MI355X 便宜 $2,000 |
每 GPU 固定月价,所有服务器规格均相同。以 USD 计价,不含税。
显存可容纳的最大模型
| 权重 | 1× MI355X | 1× H200 | 8× MI355X | 8× H200 |
|---|---|---|---|---|
| BF16 | 120B | 58B | 960B | 470B |
| FP8 | 240B | 117B | 1.9T | 940B |
| FP4 | 480B | 235B | 3.8T | 1.9T |
表中为预留 20% 激活值与运行时余量后,权重可装入显存的参数规模。长上下文和大批量需要为 KV 缓存预留更多空间:参见您需要多少显存。
MI355X vs H200:常见问题
已经是客户?请在控制台提交工单:工程师会在一个工作日内回复。
了解支持流程MI355X 比 H200 更快吗?
在稠密 FP8 Tensor 算力上,MI355X 更快:每 GPU 5 PF,而对方为 1.98 PF。MI355X 的显存带宽为 8 TB/s,H200 为 4.8 TB/s,而这一指标对 LLM 解码影响最大。
MI355X 与 H200 的月价相比如何?
在 CoreGPU,MI355X 为每 GPU 每月 $2,449,H200 为每 GPU 每月 $2,699,因此一台 8 卡服务器的月费分别为 $19,592 和 $21,592。MI355X 每 GPU 便宜 9%。两者价格均比市场中位价低至少 25%,按月从预付余额中扣费。
LLM 推理选 MI355X 还是 H200 更好?
对于大模型和长上下文,MI355X 凭借每 GPU 288 GB 显存更胜一筹,同一模型所需的 GPU 更少。如需用更少的 GPU 部署 70B 至 400B 模型,请选择 MI355X;仅支持 CUDA 的内核和 TensorRT-LLM 请选择 H200。
MI355X 和 H200 可以按月租用吗?
可以。两者都是按月租用的独享 GPU,每台服务器 1 至 8 块,并提供 root SSH 访问权限。目前 MI355X 有现货(21 块可用),H200 有现货(34 块可用)。支持使用 BTC、ETH、XMR、USDT (TRC-20) 或 SOL 付款。

