حالة GPU Rent Hub ووقت التشغيل. تسعة مكونات وثلاثة مراكز بيانات.
تنشر GPU Rent Hub حالة مباشرة ووقت تشغيل على مدار 90 يومًا للحوسبة والشبكة ولوحة التحكم وAPI وكشف إيداعات العملات الرقمية وخدمة Tor عبر DFW-1 في دالاس وIAD-1 في أشبورن وPDX-1 في هيلزبورو؛ ويبلغ متوسط وقت التشغيل خلال الاثني عشر شهرًا الماضية 99.97%. يُحدَّث تلقائيًا من نقاط الفحص نفسها التي ترسل إلينا التنبيهات. يكتب المهندس المناوب الحوادث، لا فريق التسويق — ولهذا بعضها صريح.
Last check:
DFW-1 — الحوسبة
وقت التشغيلDFW-1 — الشبكة
وقت التشغيلIAD-1 — الحوسبة
وقت التشغيلIAD-1 — الشبكة
وقت التشغيلPDX-1 — الحوسبة
وقت التشغيلPDX-1 — الشبكة
وقت التشغيللوحة التحكم & API
وقت التشغيلكشف الإيداعات (كل العملات)
وقت التشغيلخدمة Tor onion
وقت التشغيلما الحوادث التي شهدتها GPU Rent Hub منذ 2021؟
كل ما أثر على أكثر من عميل واحد، منذ الشهر الأول للتشغيل. تُعلن نوافذ الصيانة قبل 7 أيام في لوحة التحكم ولا تُدرج هنا إلا إذا تجاوزت مدتها. تفاصيل الطاقة والتبريد ومزودي الاتصال لكل موقع موجودة في صفحة مراكز البيانات الأمريكية.
تجاوز فشل موجّه الحافة في IAD-1 تدهور
فقد جهاز الحافة الأساسي بطاقة خط. عمل تجاوز الفشل، لكن سجلنا ارتفاعًا في زمن الاستجابة (+30 ms) نحو بعض وجهات الساحل الشرقي لمدة 25 دقيقة بينما أعاد الجهاز الثانوي تعلم المسارات.
Written by RK, on call.
تأخر كشف إيداعات Monero تدهور
تأخر برنامج monerod لدينا عن السلسلة بعد إعادة تشغيل. أُضيفت الإيداعات متأخرة (حتى 2h20) لكن جميعها حُسبت بسعر أول تأكيد فعلي لها، وليس بوقت الاكتشاف المتأخر.
Written by MT, on call.
قطع كابل الألياف الصاعد في DFW-1 انقطاع
قطع طاقم إنشاءات مسار Lumen إلى DFW-1. بقيت مسارات Cogent وHE تعمل، لكن إعادة تقارب BGP استغرقت 14 دقيقة أطول مما ينبغي بسبب قائمة بادئات قديمة على جهاز الحافة. لم تتأثر الحوسبة؛ لاحظ العملاء فقدان حزم بنسبة 30–60% لمدة 2h29 إجمالًا. أُصلح السبب الجذري في قائمة البادئات وطُلب مسار ثالث متنوع (Zayo).
Written by RK, on call.
تجاوز استبدال PDU بالقفص 2 في DFW-1 مدته تدهور
استغرقت نافذة مخططة مدتها 60 دقيقة سبعين دقيقة. أُعيد تشغيل 96 خادمًا من نوع A6000/A40 مرة واحدة بدلًا من الاستبدال المعلن دون إعادة تشغيل؛ لم يصمد مفتاح التحويل على التغذية A. حصل العملاء المتأثرون على رصيد 3 أيام.
Written by AV, on call.
زمن استجابة API تدهور
تجاوز مؤشر p99 لنقطة نهاية الكتالوج 4 s بعد أن قفلت مهمة مزامنة المخزون جدول المخزون. كانت لوحات التحكم بطيئة؛ لم يتأثر أي خادم. نُقلت المهمة إلى نسخة قراءة احتياطية.
Written by MT, on call.
إنذار حلقة التبريد في DFW-1 تدهور
تسبب عطل في وحدة CRAH بالمنشأة في ارتفاع درجات حرارة مدخل الهواء في القفص 4 إلى 31 °C. خفّضنا قدرة عقد H100/H200 ثمانية المسارات إلى 80% من الطاقة لمدة 1h45 بدلًا من المخاطرة بتوقف حراري. لم تحدث أي إعادة تشغيل. حصل العملاء على العقد المتأثرة على رصيد يومين.
Written by RK, on call.
تعذر الوصول إلى لوحة التحكم انقطاع
أدى نشر خاطئ للوحة التحكم إلى تعطل تسجيل الدخول للجميع لمدة 2.5 ساعة. كانت API وكل الخوادم سليمة، وهو عزاء بارد إذا كنت تحتاج إلى وحدة التحكم في الرابعة صباحًا. أضفنا مرحلة canary بعد ذلك.
Written by AV, on call.
اضطراب شبكة PDX-1 تدهور
أُجريت صيانة من المزود العلوي (HE) دون إبلاغنا. شهدت PDX-1 فقدانًا متقطعًا لمدة 25 دقيقة.
Written by MT, on call.
حدث في الكهرباء العمومية بمركز DFW-1 انقطاع
انقطع تغذية الكهرباء العمومية أثناء عاصفة؛ عملت المولدات لكن UPS على الجانب B فشل في تحميل القفص 3 أثناء التحويل. فقدت 412 خادمًا الطاقة لمدة تصل إلى 4h45 (إعادة تشغيل قسري). لم يُبلَّغ عن فقدان بيانات. استبدلت المنشأة سلسلة UPS؛ وانتقلنا إلى نظام UPS بتكرار 2N في جميع الأقفاص بحلول أكتوبر 2024. مُنح رصيد 7 أيام.
Written by RK, on call.
تدهور المزود العلوي لـ IAD-1 تدهور
كان مسار Zayo مزدحمًا؛ وكان لدينا مزود علوي واحد فقط في IAD-1 في ذلك الوقت. أصبح المزود الثاني (Lumen) قيد التشغيل بحلول مارس 2023.
Written by AV, on call.
تأخر افتتاح IAD-1 تنبيه
كان من المقرر نشر أول خوادم IAD-1 في 28 Nov، لكنها تأجلت يومين بانتظار ربط متقاطع. حصل أصحاب الطلبات المسبقة على رصيد أسبوع.
Written by MT, on call.
توقف كشف إيداعات Bitcoin مؤقتًا تدهور
أول حادث دفع لنا. نفد قرص bitcoind. أُضيفت الإيداعات متأخرة، بالسعر الصحيح. كانت تنبيهات القرص، في وقت لاحق، فكرة جيدة.
Written by RK, on call.
عطل مفتاح الشبكة في DFW-1 انقطاع
تعطل مفتاح الشبكة الوحيد أعلى الرف في أول رف لدينا. انقطعت أربعون بطاقة RTX 3090 عن العمل لمدة 1h45 أثناء استبداله. أصبح لكل رف محولات ToR متكررة منذ مايو 2021.
Written by AV, on call.
حادث الإيداع يؤخر إضافة الرصيد، ولا يؤخر السعر الذي تحصل عليه أبدًا: الآلية موضحة في الدفع مقابل استئجار GPU بالعملات الرقمية، وسياسة العقد خلف بلاغ أغسطس 2026 في استضافة Monero على وحدات GPU. رصيد التعطل هو يوم واحد من المدة عن كل ساعة تتجاوز 99.9%، كما هو منصوص في شروط الخدمة.