GPU Rent Hubのステータスとアップタイム。9つのコンポーネント、3つのデータセンター。
GPU Rent Hubは、DFW-1 ダラス、IAD-1 アッシュバーン、PDX-1 ヒルズボロの各拠点において、コンピュート、ネットワーク、ダッシュボードとAPI、暗号資産入金の検知、Torサービスのライブステータスと90日間のアップタイムを公開しています。直近12か月のアップタイムは99.97%です。私たちを呼び出すのと同じプローブから自動更新されます。インシデントはマーケティングではなく当番のエンジニアが書いています。だから率直なものもあるのです。
最終確認:
DFW-1 — コンピュート
アップタイムDFW-1 — ネットワーク
アップタイムIAD-1 — コンピュート
アップタイムIAD-1 — ネットワーク
アップタイムPDX-1 — コンピュート
アップタイムPDX-1 — ネットワーク
アップタイムダッシュボード & API
アップタイム入金検知（すべてのコイン）
アップタイムTor onionサービス
アップタイムGPU Rent Hubは2021年以降、どのようなインシデントがありましたか？
複数の顧客に影響を与えたすべての事象を、稼働開始から最初の月までさかのぼって掲載しています。メンテナンス時間枠はダッシュボードで7日前に告知され、超過した場合のみここに掲載されます。各サイトの電力、冷却、キャリアの詳細は米国データセンターページにあります。
IAD-1 エッジルーターのフェイルオーバー 低下
プライマリエッジでラインカードが故障しました。フェイルオーバーは機能しましたが、セカンダリが経路を再学習する間、一部の東海岸向け宛先で25分間、遅延が増加しました（+30 ms）。
当番エンジニア RK 記
Monero入金の検知遅延 低下
再起動後、当社のmonerodがチェーンに追いつけなくなりました。入金の反映は遅れました（最大2時間20分）が、すべて実際の初回承認時点のレートで反映され、遅延検知時点のレートではありません。
当番エンジニア MT 記
DFW-1 上流ファイバー切断 停止
建設作業員がDFW-1へのLumen経路を切断しました。CogentとHEは稼働を続けましたが、エッジの古いprefix-listが原因でBGPの再収束に本来より14分長くかかりました。コンピュートには影響はありませんでした。お客様では合計2時間29分、30～60%のパケットロスが発生しました。prefix-listの根本原因は修正済みで、3本目の多様な経路（Zayo）を発注しました。
当番エンジニア RK 記
DFW-1 ケージ2 PDU交換が超過 低下
予定の60分の作業枠が70分かかりました。A6000/A40インスタンス96台が、告知されていた再起動ゼロの交換ではなく、1回再起動しました。A給電の切替スイッチが保持しませんでした。影響を受けたお客様には3日分をクレジットしました。
当番エンジニア AV 記
APIレイテンシ 低下
在庫同期ジョブがインベントリテーブルをロックした後、カタログエンドポイントのp99が4秒を超えました。ダッシュボードの応答が遅くなりましたが、インスタンスへの影響はありませんでした。ジョブは読み取りレプリカへ移しました。
当番エンジニア MT 記
DFW-1 冷却ループのアラーム 低下
施設のCRAHユニットの故障により、ケージ4の吸気温度が31 °Cまで上昇しました。熱によるシャットダウンのリスクを避けるため、8-way H100/H200ノードを1時間45分間、80%の電力に制限しました。再起動はありません。影響を受けたノードのお客様には2日分をクレジットしました。
当番エンジニア RK 記
ダッシュボード利用不可 停止
ダッシュボードの不具合のあるデプロイにより、全員のログインが2.5時間使えなくなりました。APIとすべてのインスタンスは正常でしたが、午前4時にコンソールが必要だった方には慰めにならないでしょう。この後、カナリーステージを追加しました。
当番エンジニア AV 記
PDX-1 ネットワークのフラップ 低下
上流（HE）のメンテナンスが当社に共有されていませんでした。PDX-1で25分間、断続的な損失が発生しました。
当番エンジニア MT 記
DFW-1 系統電力の障害 停止
嵐の最中に系統電力が停止し、発電機は起動しましたが、切替中にB側UPSがケージ3を支えられませんでした。412インスタンスが最大4時間45分にわたり電源を失いました（ハード再起動）。データ消失の報告はありません。施設はUPSストリングを交換し、2024年10月までに全ケージを2N UPS構成へ移行しました。7日分をクレジットしました。
当番エンジニア RK 記
IAD-1 上流の性能低下 低下
Zayo経路が輻輳しました。当時IAD-1には上流が1本しかありませんでした。2本目のキャリア（Lumen）は2023年3月までに稼働しました。
当番エンジニア AV 記
IAD-1 開設の遅延 通知
IAD-1の最初のデプロイは28 Novを予定していましたが、クロスコネクト待ちで2日ずれ込みました。プレオーダーのお客様には1週間分をクレジットしました。
当番エンジニア MT 記
Bitcoin入金の検知停止 低下
当社にとって最初の支払いインシデントでした。bitcoindのディスクが枯渇しました。入金は遅れて反映されましたが、正しいレートでした。振り返れば、ディスクアラームは良いアイデアでした。
当番エンジニア RK 記
DFW-1 スイッチ障害 停止
最初のラックにあったトップオブラックスイッチ1台が故障しました。交換する間、RTX 3090 40台が1時間45分オフラインになりました。2021年5月以降、すべてのラックに冗長なToRスイッチを設置しています。
当番エンジニア AV 記
入金インシデントで遅れるのは反映であって、受け取るレートではありません。仕組みは暗号通貨でGPUレンタル料金を支払うに、2026年8月のエントリの背景となるノードポリシーはMonero GPUホスティングにあります。ダウンタイムのクレジットは99.9%を超える1時間ごとに契約期間1日分で、利用規約に記載されています。