ضع حدوداً آمنة للتعافي الذاتي

تعافَ من حالة معروفة

يكتشف التعافي الذاتي إخفاقاً محدداً تلقائياً، ويحاول إجراء استعادة مأذوناً به. من أمثلته إعادة تشغيل عملية فاشلة أو استبدال نسخة غير سليمة. يجب أن يناسب الفعل الإخفاق ونموذج حالة الخدمة.

يستطيع Kubernetes استبدال نسخ أحمال العمل الفاشلة وإعادة التوافق مع الحالة المعلنة. لا يصحّح ذلك منطق تطبيق معيباً أو كل إخفاق في التخزين. تحتاج استعادة البنية التحتية وصحة البرمجيات إلى فحوص مختلفة. التعافي الذاتي في Kubernetes.

حدّد الهدف قبل الآلية. تعني استعادة التصدير إكمال العمل المؤهل بصورة صحيحة. الحاوية العاملة شرط مسبق واحد فقط.

افصل ثلاثة أنواع من التغيير

قد يقترح وكيل تصحيحاً بعد الاستعادة. ذلك المقترح تغيير برمجي جديد. ويجب ألا يرث صلاحية غير محدودة من متحكم الاستعادة.

ويجب أيضاً ألا يعدّل المتحكم معايير نجاحه عندما يفشل فحص. وإلا فقد يعلن النظام تحسّناً دون تحسين الخدمة.

اكتب سياسة الاستعادة قبل تفعيلها

السياسة التالية خيالية. توضح أرقامها اختيارات تصميم؛ وليست إعدادات افتراضية موصى بها.

استخدم هوية بأقل الصلاحيات. سجّل إصدار السياسة وأدلة شرط التشغيل والفعل والمورد والنتيجة. وفّر طريقة مستقلة لتعطيل المتحكم. حدّد المسؤول البشري الذي يتلقى التصعيد.

اختبر مسارات الإخفاق والاستعادة الناجحة معاً

قد تكرّر إعادة المحاولة أثراً جانبياً. فقد تخزّن عملية العامل ملفاً وتتوقف قبل تأكيد المهمة. تحقّق من عدم تكرار الأثر قبل السماح بتنفيذ آخر. راجع مثال الإخفاق السحابي الأصيل.

قد تضخّم إعادة المحاولة أيضاً الحمل على تبعية مثقلة. استخدم محاولات محدودة ومهلاً وتأخيراً متدرجاً مناسباً. تجنّب إعادة المحاولة المتزامنة عبر مجموعة الموارد. تشرح AWS لماذا يساعد التأخير المتدرج والتفاوت العشوائي على تقليل هذا التضخيم. إرشادات إعادة المحاولة.

اختبر السياسة الخيالية أمام ثلاث حالات. يجب أن تتعافى عملية عامل واحدة متوقفة. ويجب أن يمنع تعطل قاعدة البيانات الاستبدال المتكرر. ويجب أن يوقف إخفاق غير مؤكد في سلامة البيانات الأتمتة ويطلب قرار استجابة.

افحص غياب القياسات التشغيلية أيضاً. قد يعني غياب إشارة الحياة إخفاق عملية العامل أو إخفاق مسار الجمع. يحتاج المتحكم إلى أدلة كافية لفعله، لا إلى الثقة في تفسير ذكاء اصطناعي.

قِس ما إذا كانت السياسة مفيدة

سجّل الاستعادات المتحقق منها والمحاولات غير الناجحة والتصعيدات والعمل المكرر والوقت الذي استمر فيه الأثر على المستخدمين. قارنها بطريقة التشغيل السابقة في ظروف متشابهة.

أبقِ العيب الأساسي عملاً هندسياً مطلوباً. قد تقلّل إعادة تشغيل عملية بها تسرب مراراً الأثر المباشر بينما يستمر التسرب. تابع إلى التحسين الذاتي لربط الملاحظة بتصحيح دائم.