Coinbase تراجع حادثة انقطاع الخدمة في مايو: فشل متسلسل في AWS يكشف عن مخاطر معمارية

أصدرت Coinbase تقريراً استرجاعياً حول حدث انقطاع الخدمة واسع النطاق في 7 مايو 2026.

استمر الانقطاع لمدة 8 ساعات تقريباً، واستغرق التعافي الكامل حوالي 12 ساعة. خلال هذا الوقت، كانت عمليات التداول والإيداع والسحب ومعظم الخدمات الأساسية غير متاحة أو متأثرة بشدة. وذكرت Coinbase أن الانقطاع كان بسبب تعطل وحدات تبريد متعددة في وقت واحد داخل نظام التبريد الخاص بمركز بيانات في منطقة توافر واحدة (use1-az4) ضمن منطقة AWS us-east-1، مما أدى إلى تفعيل عمليات الإغلاق للحماية الحرارية للخزائن، وهو ما تسبب في توقف مثيلات EC2 ووحدات تخزين EBS عن العمل، مما أثر على العديد من خدمات الإنترنت.

خلال عملية التعافي، فقد محرك مطابقة التداول في Coinbase النصاب القانوني (quorum) بسبب فقدان معظم العقد في بنية المجموعة المنتشرة في مركز بيانات واحد تابع لـ AWS. تطلب الأمر إجراء تعديلات برمجية عاجلة وإعادة بناء مجموعة عقد جديدة لاستعادة التشغيل، مع إعادة تشغيل تداول السوق تدريجياً أثناء التعافي.

بالإضافة إلى ذلك، واجهت خدمة Kafka المدارة من AWS (MSK) أعطالاً في مستوى التحكم، مما منع إعادة الانتخاب التلقائي لقادة الأقسام، وهو ما أدى إلى مزيد من التعطيل في أنظمة الأسعار والرسوم وبعض أنظمة التسوية وتدفق البيانات، مما وسع نطاق التأثير الإجمالي.

بعد إجراء ترحيل يدوي للأقسام بالتعاون مع فريق هندسة AWS، عاد النظام تدريجياً إلى طبيعته. وذكرت Coinbase أن هذا الحادث كشف عن أوجه قصور في قدرات التبديل التلقائي عبر مناطق التوافر والتعافي من الكوارث للبرمجيات الوسيطة المدارة. ستعمل الشركة على ترقية بنية النسخ الاحتياطي الساخن عبر المناطق، وتعزيز تدريبات الفشل الدورية، وترقية نظام Kafka من مناطق توافر مزدوجة إلى نشر في ثلاث مناطق توافر، مع العمل أيضاً مع AWS لدفع إصلاحات الأسباب الجذرية والتحسينات.