H200 SXM と A100 SXM の違いは何ですか？
すべての数値は、ダッシュボードが価格を計算するのと同じカタログから取得した、実際に貸し出す際のものです。GPU時間あたりの料金は 月額定額を720時間で割ったものであり、時間単位で請求されることはありません。
| H200 SXM | A100 SXM | |
|---|---|---|
| メモリ | 141 GB HBM3e | 80 GB HBM2e |
| メモリ帯域幅 | 4.8 TB/s | 2.04 TB/s |
| アーキテクチャ | Hopper (2024) | Ampere (2020) |
| コア | 16,896 CUDA · 528 Tensor | 6,912 CUDA · 432 Tensor |
| FP8 | 3,958 TFLOPS (sparse) | not supported |
| FP16 | 1,979 TFLOPS (sparse) | 624 TFLOPS (sparse) |
| インターコネクト | NVLink · 900 GB/s | NVLink · 600 GB/s |
| 基板電力 | 700 W | 400 W |
| ホストvCPU | 24 | 16 |
| ホストRAM | 251 GB | 125 GB |
| ローカルNVMe | 2 TB | 1 TB |
| 週額料金 | $640 | $280 |
| 月額料金 | $2,290 | $990 |
| GPU時間あたり | $3.18 | $1.38 |
| VRAM 1GBあたりの価格 | $16.24 | $12.38 |
| 在庫あり | 19 | 78 |
どちらを借りるべきですか？
H200 SXMは61 GB多くのメモリを搭載しており、それがモデルをロードできるかどうかを決める唯一の要素です。 H200 SXMはFP8に対応しており、A100 SXMは対応していません。これは量子化モデルが必要とするメモリをおよそ半分にし、両者の実用上の最大の違いです。 帯域幅は2.04 TB/sに対して4.8 TB/sであり、単一ストリームのトークン生成では、速度を決めるのは仕様表のFLOPS値ではなく帯域幅です。 H200 SXMは月額で131%高く、$990に対して$2,290、GPU時間あたりでは$1.38に対して$3.18です。
このようなときにH200 SXMを借りる
Serving 70B–120B models without sharding. A 70B model in BF16 fits on two cards with room for a batch; in FP8 it fits on one.
$2,290/月 · $640/週 · 仕様と在庫
このようなときにA100 SXMを借りる
The cheapest 80 GB card with NVLink. 80 GB of HBM2e under $1,000 a month, the value pick for multi-week runs.
$990/月 · $280/週 · 仕様と在庫
各カードの在庫がある場所
ダッシュは、その地域ではカードがキャンセル待ちであることを意味します。価格は3地域すべてで同一なので、レイテンシと 在庫だけで選んでください。他の要素はありません。
| リージョン | H200 SXM | A100 SXM |
|---|---|---|
| DFW-1Dallas, TX | 11 | 40 |
| IAD-1Ashburn, VA | 8 | 22 |
| PDX-1Hillsboro, OR | — | 16 |
H200 SXM 対 A100 SXM
H200 SXMはA100 SXMより優れていますか？
H200 SXMとA100 SXMの価格差はいくらですか？
H200 SXM の VRAM は A100 SXM と比べてどのくらいですか？
どちらのカードもKYCなしで借りられますか？
今日利用可能なのはどちらですか？
1台のマシンにH200 SXMを複数枚搭載できますか？
週単位または月単位でどちらかを借りる
本人確認不要、メールアドレス不要、カード不要。マシンを構成し、生成される1件の注文を7種類の暗号通貨のいずれかで支払えば、約90秒で稼働します。