- أدى تحديث لتكوين شبكة Google Cloud إلى تعطيل مجموعات VMware Engine الممتدة في سيدني وملبورن وفرانكفورت لما يقرب من 12 ساعة
- وظلت خدمات الحوسبة والتخزين متاحة، لكن فشل الروابط بين مناطق المجموعات والجهاز الشاهد أدى إلى عزل بعض الأجهزة الافتراضية
الواقعة
أدى تحديث لتكوين شبكة Google Cloud إلى تعطيل مجموعات VMware Engine الممتدة في سيدني وملبورن وفرانكفورت في 14 يوليو. واستمر الانقطاع لمدة 11 ساعة و46 دقيقة. واستعادت Google الخدمة من خلال التراجع عن التحديث والعودة إلى التكوين السابق الذي كان يعمل بشكل صحيح.
وبدا أن خدمات الحوسبة والتخزين قد ظلت متاحة، لكن الاتصال بين مناطق المجموعات فشل. كما فقدت المناطق المتأثرة الاتصال بالجهاز الشاهد (witness appliance)، مما حال دون تمكن المجموعات من المزامنة بشكل آمن. وتعرضت بعض الأجهزة الافتراضية للعزل وواجهت خطر فقدان الوصول إلى البيانات القابلة للكتابة. ونصحت Google العملاء بالاتصال بالدعم الفني قبل نقل أعباء العمل المتأثرة إلى الجانب السليم من المجموعة.
التقييم
أثر الحادث على العملاء الذين يستخدمون المجموعات الممتدة للحفاظ على إتاحة أعباء العمل عبر المناطق. واستمرت الحوسبة والتخزين في العمل، لكن اتصالات الشبكة والجهاز الشاهد اللازمة لتنسيق المجموعات قد فشلت. وتضع مجموعات VMware Engine الممتدة عُقد البيانات في منطقتين وتستخدم شاهداً في منطقة ثالثة. وعندما فقدت هذه المكونات الاتصال، أصبحت بعض الأجهزة الافتراضية معزولة وواجهت خطر فقدان الوصول إلى البيانات القابلة للكتابة. ونصحت Google العملاء باستشارة الدعم الفني قبل نقل أعباء العمل المتأثرة لأن حالة المنطقة الأخرى لم تكن واضحة دائماً.
بالنسبة لقراء BTW، يوضح هذا الحادث أين تكمن المسؤولية التشغيلية في خدمة المرونة المدارة. فلا يزال العملاء يعتمدون على شبكة Google وخدمة الشاهد الخاصة بها للحفاظ على تنسيق المجموعات. وبالتالي، يجب أن تغطي خطط التعافي فقدان مسار الاتصال هذا، بما في ذلك تحديد متى يمكن نقل أعباء العمل بأمان ومتى يتطلب الأمر دعم مزود الخدمة.
ما يجب مراقبته
ترقب التقرير النهائي من Google بشأن الانقطاع، وما إذا كان سيؤدي إلى تغييرات في إجراءات تحديث الشبكة أو توجيهات تعافٍ أكثر وضوحاً للمجموعات الممتدة التي تفقد الاتصال بالشاهد.