GPU Rent Hub 状态与正常运行时间。九个组件,三个数据中心。

GPU Rent Hub 发布 DFW-1 达拉斯、IAD-1 阿什本和 PDX-1 希尔斯伯勒的计算、网络、仪表板和 API、加密货币充值检测以及 Tor 服务的实时状态与 90 天正常运行时间;过去十二个月正常运行时间为 99.97%。数据由与我们告警相同的探针自动更新。事件由值班工程师而非市场部门撰写——所以有些措辞直白。

每 30 秒从 6 个观测点探测一次
最近检查:

所有系统运行正常

过去 90 天:99.98% · 过去 12 个月:99.97%

DFW-1 — 计算

正常运行时间
90 天前今天

DFW-1 — 网络

正常运行时间
90 天前今天

IAD-1 — 计算

正常运行时间
90 天前今天

IAD-1 — 网络

正常运行时间
90 天前今天

PDX-1 — 计算

正常运行时间
90 天前今天

PDX-1 — 网络

正常运行时间
90 天前今天

仪表板 & API

正常运行时间
90 天前今天

充值检测(所有币种)

正常运行时间
90 天前今天

Tor 洋葱服务

正常运行时间
90 天前今天
历史 自 2021 年以来

自 2021 年以来,GPU Rent Hub 发生过哪些事件?

这里记录了自运营第一个月以来影响超过一位客户的所有事件。维护窗口会提前 7 天在仪表板中公布,只有超时才会在此列出。每个站点的电力、冷却和运营商详情见美国数据中心页面。

IAD-1 边缘路由器故障切换 降级

主边缘路由器丢失了一块线卡。故障切换正常工作;在备用设备重新学习路由期间,到部分东海岸目的地的延迟升高了 25 分钟(+30 毫秒)。

值班工程师 RK 撰写。

Monero 充值检测延迟 降级

我们的 monerod 在重启后落后于链。充值入账延迟(最长 2h20),但所有充值均按实际首次确认时的汇率入账,而非按延迟检测时间。

值班工程师 MT 撰写。

DFW-1 上游光纤被切断 中断

施工队切断了进入 DFW-1 的 Lumen 路径。Cogent 和 HE 保持在线,但我们的 BGP 重新收敛比预期多用了 14 分钟,原因是边缘设备上的前缀列表已过期。计算未受影响;客户在总共 2h29 内看到 30–60% 的丢包。前缀列表的根本原因已修复,并已订购第三条不同的路径(Zayo)。

07:12 检测到 Lumen 丢失 · 07:26 流量排空 · 08:50 Lumen 接续完成 · 09:41 已解决

值班工程师 RK 撰写。

DFW-1 2 号笼区 PDU 更换超时 降级

原计划 60 分钟的窗口实际用了 70 分钟。96 台 A6000/A40 实例重启了一次,而原公布的是零重启更换;A 路转换开关未保持。受影响客户获得了 3 天补偿。

值班工程师 AV 撰写。

API 延迟 降级

目录端点的 p99 在库存同步任务锁定库存表后超过 4 s。仪表板变慢;没有实例受到影响。任务已移至只读副本。

值班工程师 MT 撰写。

DFW-1 冷却回路报警 降级

设施 CRAH 机组故障导致 4 号笼区进风温度升至 31 °C。我们将 8 路 H100/H200 节点限制到 80% 功率持续 1h45,而不是冒险触发过热关机。没有重启。受影响节点上的客户获得了 2 天补偿。

值班工程师 RK 撰写。

仪表板不可用 中断

仪表板的一次错误部署导致所有人 2.5 小时无法登录。API 和所有实例均正常;如果你在凌晨 4 点需要控制台,这并不能带来多少安慰。事件后我们增加了金丝雀阶段。

值班工程师 AV 撰写。

PDX-1 网络抖动 降级

上游(HE)维护未通知我们。PDX-1 出现 25 分钟间歇性丢包。

值班工程师 MT 撰写。

DFW-1 市电事件 中断

暴风雨期间市电输入中断;发电机启动,但 B 侧 UPS 在切换期间未能为 3 号笼区供电。412 台实例断电最长 4h45(硬重启)。未报告数据丢失。设施更换了 UPS 串;到 2024 年 10 月,我们已将所有笼区改为 2N UPS。补偿 7 天。

值班工程师 RK 撰写。

IAD-1 上游降级 降级

Zayo 路径拥塞;当时我们在 IAD-1 只有一条上游。第二条运营商(Lumen)于 2023 年 3 月上线。

值班工程师 AV 撰写。

IAD-1 启用延迟 通知

首批 IAD-1 部署原定于 28 Nov,由于等待交叉连接而延迟了两天。预购客户获得一周补偿。

值班工程师 MT 撰写。

Bitcoin 充值检测暂停 降级

我们的第一次支付事件。bitcoind 耗尽了磁盘。充值入账延迟,但汇率正确。事后看来,磁盘报警是个好主意。

值班工程师 RK 撰写。

DFW-1 交换机故障 中断

我们第一个机架中唯一的架顶交换机损坏。在更换期间,四十台 RTX 3090 离线了 1h45。自 2021 年 5 月以来,每个机架都配备了冗余 ToR 交换机。

值班工程师 AV 撰写。

充值事件只会延迟入账,绝不会改变你得到的汇率:相关机制见使用加密货币支付 GPU 租用费用,2026 年 8 月条目背后的节点政策见Monero GPU 托管。停机补偿为超过 99.9% 后每超出 1 小时补偿 1 天租期,详见服务条款。