الوحدة 5 — سياسة ميزانية الأخطاء: العتبات وتجميد النشر وتنبيهات burn rate

سياسة ميزانية الأخطاء: مستويات وإجراءات، وتجميد النشر، وتنبيهات burn rate متعددة النوافذ، وبوابة إصدار مع Site Reliability Guardian.
Module 5 — Politique de budget d'erreur : seuils, gel des déploiements et alertes burn rate

الوحدة 5 من دورة SLO وSLA: كتابة سياسة ميزانية الأخطاء، أي تحديد ما سيفعله الفريق مسبقًا حين تذوب الميزانية. العتبات، والإجراءات مثل تجميد النشر، وتنبيهات burn rate متعددة النوافذ، وبوابات الإصدار: كل ما يحوّل SLO إلى قرار.

المسار: دورة SLO وSLA · الوحدة 5/6 · المدة: نحو 40 دقيقة · المستوى: متوسط · المنصة: مفاهيم صالحة في كل مكان؛ ويُشار في كل مرة إلى الأدوات في Dynatrace SaaS وDynatrace Managed

SLO بلا عواقب مجرد مؤشر آخر على شاشة. وفي اليوم الذي تنفد فيه الميزانية يجب أن يقرر أحدهم هل يُنشر مزيد من الميزات. وبلا قاعدة مكتوبة يُتخذ القرار في اجتماع وتحت الضغط، وينتهي غالبًا بنزاع بين فريق المنتج وفريق المناوبة.

تنطلق هذه الوحدة من حسابات الوحدة 2 (حساب ميزانية الأخطاء وburn rate) ومن أهداف SLO المنشأة في الوحدتين 3 و4. والغاية: أن تملك في النهاية وثيقة من صفحة واحدة موقّعة من المنتج والتشغيل، وتنبيهين من نوع burn rate، وبوابة إصدار موصولة بـSLO نفسه.

ما هي سياسة ميزانية الأخطاء؟

هي اتفاق مكتوب يحدد، لـSLO معين، الإجراءات التي يطلقها كل مستوى من استهلاك الميزانية. وينشر Google SRE Workbook مثالًا عليها في فصل Error Budget Policy. وفيه أربع أفكار مفيدة:

  • مشغِّل واضح: إذا تجاوزت الخدمة ميزانيتها على نافذة الأسابيع الأربعة السابقة، تتوقف كل التغييرات وعمليات النشر، عدا إصلاحات P0 والأمان، حتى العودة إلى ضمن SLO.
  • عتبة المراجعة اللاحقة (post-mortem): حادث واحد يستهلك أكثر من 20% من الميزانية على أربعة أسابيع يوجب مراجعة لاحقة.
  • استثناءات: ميزانية استهلكها مستخدمون خارج نطاق SLO (اختبارات الحمل واختبارات الاختراق) لا تطلق التجميد.
  • حَكَم: عند الخلاف على الحساب ترتفع المسألة إلى مستوى إداري يُعيَّن سلفًا (المدير التقني CTO في مثال Workbook).

والنقطة الجوهرية هي وقت الكتابة: تُتفاوض السياسة بهدوء، والميزانية ممتلئة. وفي يوم الحادث يُطبَّق ما كُتب ولا يُناقش من جديد. وهي أيضًا مقاربة بلا لوم (blameless): القاعدة تستهدف الخدمة لا الأشخاص.

الخطوة 1 — تحديد العتبات والإجراءات

قسّم الميزانية المتبقية إلى مستويات. والقيم أدناه أمثلة للانطلاق، تُعدَّل مع فريق المنتج:

الميزانية المتبقية (نافذة 30 يومًا) الحالة الإجراءات
> 50% عادية إصدارات بالوتيرة المعتادة، والتجارب مسموحة.
25 إلى 50% يقظة مراجعة حوادث الفترة، والنشر خارج ساعات الذروة، والنشر التدريجي إلزامي.
0 إلى 25% تقييد لا يمر إلا التغييرات منخفضة المخاطر وإصلاحات الموثوقية؛ ويتوجه جزء من طاقة الفريق إلى الموثوقية.
نفدت (< 0%) تجميد تجميد النشر إلا إصلاحات P0 والأمان، حتى العودة إلى ضمن SLO؛ ومراجعة لاحقة للحوادث الكبرى.

مع SLO بنسبة 99.9% على 30 يومًا تساوي الميزانية 43.2 دقيقة (43200 دقيقة × 0.1%). فمستوى «25%» يقابل إذن 10.8 دقائق من التعطل المتبقي. اكتب هذه القيم بالدقائق في السياسة: فهي أوضح من النسبة المئوية.

وأضف قاعدة للخروج: يُرفع التجميد حين يعود SLI على النافذة المنزلقة إلى ما فوق الغاية، لا حين يتغير الشهر التقويمي. وإلا مُحي حادث يوم 29 في اليوم الأول من الشهر.

الخطوة 2 — التنبيه على burn rate لا على معدل الأخطاء

burn rate هو النسبة بين معدل الأخطاء المرصود ومعدل الأخطاء الذي يسمح به SLO. وتصوغه وثائق Dynatrace SaaS هكذا: burn rate = معدل الأخطاء ÷ ميزانية الأخطاء، مقيسًا على نافذة استرجاعية (look-back window). وburn rate بقيمة 1 يستنفد الميزانية تمامًا عند نهاية نافذة SLO.

ويوصي Workbook، في فصل Alerting on SLOs، بثلاثة تنبيهات متعددة النوافذ لـSLO بنسبة 99.9%. يجمع كل منها نافذة طويلة ونافذة قصيرة تساوي 1/12 من الطويلة؛ ولا ينطلق التنبيه إلا إذا تجاوزت النافذتان العتبة. والميزانية المستهلكة عند الانطلاق تساوي burn rate × النافذة الطويلة ÷ الفترة.

ناتج البرنامج النصي burn.py لـSLO بنسبة 99.9% على 30 يومًا: ميزانية 43.2 دقيقة؛ نافذة ساعة و5 دقائق وburn rate بقيمة 14.4 و1.44% أخطاء و2% من الميزانية وتنفد في 50 ساعة؛ نافذة 6 ساعات و30 دقيقة وburn rate بقيمة 6 و5% من الميزانية و120 ساعة؛ نافذة 72 ساعة و6 ساعات وburn rate بقيمة 1 و10% من الميزانية و720 ساعة

حساب السطر الأول: 14.4 × 1 h ÷ 720 h = 0.02، أي 2% من الميزانية في ساعة. وبهذا المعدل تدوم الميزانية كلها 720 ÷ 14.4 = 50 ساعة. السطران الأولان يوقظان فريق المناوبة؛ والثالث يفتح تذكرة.

اربط هذه التنبيهات بالسياسة: التنبيه السريع يعني «حادث جارٍ»، والتنبيه البطيء يعني «المستوى التالي يقترب». وتفاصيل التنفيذ في تنبيهات burn rate لأهداف SLO في Dynatrace.

في Dynatrace SaaS

تبيّن وثائق تطبيق Service-Level Objectives كيف يُحسب burn rate بإضافة سطر إلى استعلام DQL الخاص بـSLI:

مقتطف من وثائق Dynatrace Service-Level Objectives: أسطر DQL هي fieldsAdd sli وfieldsAdd target وfieldsAdd burnRate = ((100 - sli[]) / (100 - target)) وfieldsRemove sli

يُلصق هذا الاستعلام بعدها في Anomaly Detection لإطلاق حدث حين يتجاوز burn rate عتبة ثابتة. وتوضح الوثائق أن النافذة الاسترجاعية المدعومة هي -1h، وهي مناسبة للتنبيه السريع، وتقترح عتبة بداية بين 10 و14. وتوصي بإضافة خصائص الحدث dt.source_entity وevent.type وslo.name وdt.owner، والأخيرة تُستعمل لتوجيه التنبيه إلى الفريق المناسب. ويمكن للأحداث الناتجة أن تطلق Workflow.

في Dynatrace Managed

تعرض أهداف SLO الكلاسيكية، في قائمة Service-level objectives، حالة كل SLO وميزانية أخطائه وburn rate. ولا يوجد DQL ولا Anomaly Detection على Grail: يجري إعداد التنبيهات عبر أهداف SLO الكلاسيكية، كما في أهداف SLO في Dynatrace Managed عبر الواجهة وAPI.

الخطوة 3 — وصل بوابة للإصدار

تقول السياسة «تجميد حين تنفد الميزانية»؛ ويجب أن يعرف خط النشر ذلك دون أن ينظر إنسان إلى لوحة معلومات.

  • Dynatrace SaaS: يجمع Site Reliability Guardian أهدافًا، يقيس كلًا منها مؤشر مستخرج بـDQL ويقارنه بعتبة تحذير وعتبة فشل. ويطلق Workflow مشغَّل بحدث SDLC لنهاية النشر عملية التحقق، وحالتها pass أو warning أو fail مثلًا. وهدف «الميزانية المتبقية ≥ 25%» يطبّق مباشرة مستوى التقييد. والدرس الكامل: Site Reliability Guardian للتحقق من إصدار.
  • Dynatrace Managed: لا يوجد Site Reliability Guardian. يقرأ خط النشر SLO عبر API ويقارن الميزانية المتبقية بالعتبة، كما في ميزانية الأخطاء بوصفها بوابة إصدار.

وفي الحالتين يجب أن يُغلق غياب البيانات البوابة: فمؤشر SLI الصامت ليس ضوءًا أخضر أبدًا.

تمرين عملي

  1. اختر SLO قائمًا (الوحدة 3 أو 4) واحسب ميزانيته بالدقائق على نافذته.
  2. اكتب السياسة في صفحة: المستويات والإجراءات والاستثناءات وعتبة المراجعة اللاحقة والحَكَم وتاريخ المراجعة.
  3. احسب عتبات التنبيه: burn rate بقيمة 14.4 على ساعة وبقيمة 6 على 6 ساعات، والميزانية المستهلكة عند الانطلاق.
  4. في SaaS أضف السطر burnRate إلى استعلام SLI في Notebook وتحقق من أن القيمة قريبة من 0 في الوضع العادي.
  5. اطلب من مسؤول المنتج أن يراجع السياسة ويوقّعها.

كيف تتحقق من أن الأمر يعمل

  • SaaS: في Anomaly Detection تعرض معاينة التنبيه سلسلة burn rate تحت العتبة؛ فاخفض العتبة مؤقتًا في بيئة اختبار لترى الحدث يظهر مع slo.name وdt.owner.
  • SaaS: شغّل عملية تحقق في guardian وابحث عن نتيجتها في قائمة عمليات التحقق.
  • Managed: يجب أن يطابق عمود ميزانية الأخطاء في قائمة أهداف SLO حسابك بالدقائق.
  • أعد تمثيل حادث سابق على الورق: هل كانت السياسة ستطلق الإجراء الصحيح في الوقت الصحيح؟

اختبار قصير

  1. SLO بنسبة 99.9% على 30 يومًا وburn rate بقيمة 14.4 طوال ساعة: ما حصة الميزانية المستهلكة؟ أ) 0.1% ب) 2% ج) 14.4% د) 50%
  2. أي نافذة قصيرة ترافق نافذة طويلة مدتها 6 ساعات؟ أ) 5 دقائق ب) 30 دقيقة ج) ساعة د) 6 ساعات
  3. بحسب مثال Workbook، أي حادث يوجب مراجعة لاحقة؟ أ) كل حادث ب) أكثر من 20% من الميزانية على أربعة أسابيع ج) أكثر من 50% من الميزانية د) تجاوز SLA فقط
  4. هل يوجد Site Reliability Guardian في Dynatrace Managed؟ أ) نعم ب) لا

الإجابات

  1. ب) 14.4 × 1 ÷ 720 = 2%.
  2. ب) النافذة القصيرة تساوي 1/12 من الطويلة: 6 ساعات ÷ 12 = 30 دقيقة.
  3. ب) هذه عتبة مثال السياسة في Workbook.
  4. ب) هو تطبيق من Dynatrace SaaS؛ وفي Managed نمر بواجهة SLO API.

أفضل الممارسات

  • سياسة واحدة لكل خدمة حرجة، في صفحة واحدة، بتاريخ مراجعة.
  • عتبات بالدقائق وبالطلبات، لا بالنسبة المئوية وحدها.
  • يكفي تنبيهان من نوع burn rate للبداية؛ ثم أضف التذكرة عند 3 أيام.
  • تعريف SLI نفسه لـSLO وللتنبيه ولبوابة الإصدار.

الأسئلة الشائعة

هل تمنع سياسة ميزانية الأخطاء كل عمليات النشر؟

لا. هي تقيّد تدريجيًا ولا تجمّد إلا عند تجاوز الميزانية، مع استثناءات مكتوبة لإصلاحات الموثوقية والأمان.

ماذا نفعل إذا استهلكت الميزانية تبعية خارجية؟

توقّع الحالة في السياسة. ويذكر Workbook مثلًا عطل شبكة على مستوى الشركة سببًا لعدم تجميد الميزات. دوّن ذلك في المراجعة اللاحقة وناقش مع المورّد SLO أكثر واقعية.

هل يلزم burn rate بقيمة 14.4 لكل أهداف SLO؟

لا. هذه القيم مأخوذة من مثال بنسبة 99.9% على 30 يومًا. ولغاية أخرى أو نافذة أخرى أعد الحساب؛ وتقترح وثائق Dynatrace من 10 إلى 14 نقطة انطلاق على نافذة ساعة.

صار لـSLO لديك عواقب مكتوبة وتنبيهات وبوابة. وتنتقل الوحدة الأخيرة من الداخل إلى الخارج: تحويل SLO إلى التزام تعاقدي.

→ الوحدة 4: إنشاء SLO في Managed · فهرس المسار · الوحدة 6: كتابة SLA ←

span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC. لا يغني هذا المسار عن التدريبات الرسمية في Dynatrace University. عتبات السياسة أمثلة؛ تحقق من ميزات Dynatrace في الوثائق الرسمية الخاصة بإصدارك.

Total
0
Shares
Leave a Reply

Your email address will not be published. Required fields are marked *

Previous Post
Module 4 — Créer un SLO Managed : assistant, metric expression et API

الوحدة 4 — إنشاء SLO في Dynatrace Managed: المعالج وmetric expression وAPI

Next Post
Module 6 — Rédiger un SLA à partir de ses SLO : clauses, marge et reporting

الوحدة 6 — كتابة SLA انطلاقًا من أهداف SLO: البنود والهامش والتقارير

Related Posts