Site Reliability Guardian: تحقق من الإصدار تلقائيًا على أهداف SLO (Dynatrace SaaS)

Site Reliability Guardian: عرّف أهدافًا بلغة DQL، وشغّل التحقق بعد كل نشر، وامنع أي إصدار يضعف أهداف SLO الخاصة بك قبل أن يصل إلى المستخدمين.
Site Reliability Guardian : valider une release automatiquement sur vos SLO (Dynatrace SaaS)

يجتاز إصدار خط CI واختبارات التكامل ومراجعة الشيفرة. وبعد عشر دقائق من النشر يتضاعف زمن الاستجابة p95 ويرتفع معدل الأخطاء. لا أحد يلاحظ ذلك قبل المستخدمين. أما Site Reliability Guardian، وهو تطبيق في Dynatrace SaaS، فيعالج هذه المشكلة: يقيّم الإصدار تلقائيًا على أهداف مقيسة في الإنتاج، ويعيد حكمًا واضحًا.

هدف هذا الدرس التطبيقي إنشاء حارس (guardian) بثلاثة أهداف مكتوبة بلغة DQL، وتشغيله بواسطة Workflow بعد كل نشر، ثم استخدام الحكم لمتابعة الإطلاق أو التراجع عنه. بذلك تقصّر الزمن بين إدخال تراجع في الجودة واكتشافه، أي زمن الاستعادة (MTTR) واستهلاك ميزانية الأخطاء (error budget).

النطاق: يعتمد Site Reliability Guardian على Grail وDQL وAutomationEngine. وهو متاح في Dynatrace SaaS (المنصة الحديثة) فقط. أما في Dynatrace Managed فهو غير موجود: والبديل فحص مبرمج عبر واجهة API، موصوف في مقال ميزانية الأخطاء كبوابة إصدار.

المشكلة: اختبارات خضراء وإنتاج أحمر

تتحقق الاختبارات من السلوك المتوقع لا من السلوك الفعلي تحت الحمل. فاستعلام N+1 أو مجموعة اتصالات صغيرة جدًا أو مهلة مضبوطة بشكل خاطئ لا تظهر إلا في الإنتاج. وبلا فحص آلي بعد النشر يتوقف الاكتشاف على تنبيه بعتبة أو على بلاغ من عميل. والحارس يغلق هذه الحلقة في دقائق.

المتطلبات المسبقة

  • بيئة Dynatrace SaaS مع Grail وتطبيق Site Reliability Guardian مثبّتًا (من Hub إن لم يكن موجودًا).
  • خدمات تراقبها OneAgent أو OpenTelemetry، مع مقاييس الطلبات والأخطاء متاحة بلغة DQL.
  • صلاحيات إنشاء الحراس والـ Workflows. تتغير أسماء الصلاحيات الدقيقة: راجع وثائق Site Reliability Guardian.
  • خط CI/CD قادر على إرسال حدث نشر إلى Dynatrace.

الخطوة 1: اختر أهدافًا تعكس المستخدم

هدف الحارس استعلام DQL يعيد قيمة واحدة، تُقارَن بعتبة تحذير وعتبة إخفاق. اختر ثلاث إشارات لا خمس عشرة:

  • معدل الأخطاء للخدمة المنشورة؛
  • زمن الاستجابة p95 للطلبات؛
  • حالة SLO قائم، إن كان لديك.

لاختيار المؤشرات المناسبة اعتمد على طريقة اختيار مؤشرات SLI بلغة DQL.

الخطوة 2: اكتب استعلامات DQL للأهداف

معدل أخطاء الخدمة checkout بالنسبة المئوية:

timeseries total = sum(dt.service.request.count),
           failed = sum(dt.service.request.failure_count),
           filter: { dt.entity.service == "SERVICE-1234567890ABCDEF" }
| fieldsAdd error_rate = 100 * arraySum(failed) / arraySum(total)
| fields error_rate

زمن الاستجابة p95 بالميلي ثانية:

timeseries p95 = percentile(dt.service.request.response_time, 95),
           filter: { dt.entity.service == "SERVICE-1234567890ABCDEF" }
| fieldsAdd p95_ms = arrayAvg(p95) / 1000
| fields p95_ms

الأسطر الحاسمة: يجب أن ينتهي الاستعلام إلى سجل واحد وحقل رقمي واحد، وإلا تعذّر تقييم الهدف. وزمن الاستجابة مخزَّن بالميكروثانية، ومن هنا القسمة على 1000. أما النافذة الزمنية فلا تُكتب في الاستعلام: بل يوفرها التحقق. استبدل معرّف الخدمة بمعرّف خدمتك.

الخطوة 3: أنشئ الحارس

  1. افتح تطبيق Site Reliability Guardian وأنشئ حارسًا جديدًا، مثل checkout-release.
  2. أضف هدفًا لكل استعلام. لمعدل الأخطاء: مقارنة «أقل من أو يساوي»، وتحذير عند 1، وإخفاق عند 2.
  3. لزمن الاستجابة p95: تحذير عند 400، وإخفاق عند 600.
  4. لـ SLO قائم، يقترح التطبيق عادة نوع هدف مخصصًا: تحقق من الخيار المتاح في إصدارك.
  5. احفظ. لا يقيّم الحارس شيئًا ما لم يُطلَق تحقق.

إن كنت تدير أهداف SLO بوصفها شيفرة، فاعتمد المنطق نفسه للحراس: راجع أهداف SLO في Dynatrace مع Terraform. وتحقق في سجل Terraform الخاص بمزوّد Dynatrace من وجود مورد للحراس في إصدارك.

الخطوة 4: أرسل حدث النشر من CI

يعلن خط CI انتهاء النشر إلى Dynatrace. وبرمز منصة (platform token) أو عميل OAuth مخوَّل باستيعاب الأحداث، يناسب استدعاء من النوع التالي. أما نقطة النهاية والمخطط الدقيقان فيجب تأكيدهما في وثائق استيعاب OpenPipeline لبيئتك:

curl -sS -X POST "https://${DT_ENV}.live.dynatrace.com/platform/ingest/v1/events.sdlc" \
  -H "Authorization: Bearer ${DT_PLATFORM_TOKEN}" \
  -H "Content-Type: application/json" \
  -d '{
    "event.kind": "SDLC_EVENT",
    "event.category": "task",
    "event.type": "deployment",
    "event.status": "finished",
    "event.provider": "gitlab-ci",
    "service.name": "checkout",
    "release.version": "2.14.0"
  }'

الخطوة 5: شغّل التحقق بواسطة Workflow

  1. أنشئ Workflow بمشغّل حدث يصفّي الحدث أعلاه، مثل event.type == "deployment" and event.status == "finished" and service.name == "checkout".
  2. أضف مهمة انتظار أولى أو جدولًا زمنيًا للتنفيذ ليتاح للحركة وقت إنتاج البيانات (15 دقيقة بداية جيدة).
  3. أضف إجراء التحقق الخاص بـ Site Reliability Guardian، واختر checkout-release ونافذة نسبية، مثل آخر 15 دقيقة.
  4. أضف مهمة مشروطة بالنتيجة: إشعار في Slack أو Teams عند الإخفاق، واستدعاء واجهة API لأداة النشر لديك للتراجع (rollback).

تُشرح الـ Workflows بالتفصيل في الوحدة 7 من تدريب SaaS.

كيف تتأكد أن كل شيء يعمل

أرسل حدث النشر يدويًا بالأمر curl أعلاه. ثم:

  • في تطبيق Workflows يجب أن يظهر التنفيذ وكل مهمة فيه ناجحة؛
  • في تطبيق Site Reliability Guardian يعرض الحارس تحققًا بحالة إجمالية (نجاح أو تحذير أو إخفاق) وتفصيلًا لكل هدف؛
  • تُسجَّل نتائج التحقق أيضًا كأحداث في Grail. ويتيح استعلام من هذا النوع العثور عليها؛ جدول events، النوع validation:
fetch events, from: now()-24h
| filter event.kind == "SDLC_EVENT"
| filter event.provider == "dynatrace.site.reliability.guardian"
| filter event.type == "validation"
| fields timestamp, validation.result, dt.srg.name, event.version
| sort timestamp desc
| limit 20

لاختبار الإخفاق، اخفض عتبة زمن الاستجابة مؤقتًا إلى ما دون القيمة الفعلية وأعد التشغيل: يجب أن يسلك الـ Workflow فرع الإخفاق.

أفضل الممارسات لـ Site Reliability Guardian

  • أهداف قليلة ومختارة جيدًا: ثلاثة أهداف مرتبطة بالمستخدم أفضل من خمس عشرة مقياسًا تقنيًا تولّد تحذيرات يتجاهلها الجميع.
  • عتبات مستمدة من التاريخ: انطلق من p95 المرصود في الإصدار السابق مع هامش، بدل رقم عشوائي.
  • نافذة تناسب الحركة: الخدمة قليلة الحركة تحتاج نافذة أطول للحصول على نتيجة ذات دلالة.
  • حكم قابل للتنفيذ: يجب أن يطلق الإخفاق إجراءً محددًا (إيقاف مؤقت لـ canary أو تراجع)، وإلا صار الحارس لوحة معلومات إضافية.
  • مراجعة دون لوم (blameless): كل إخفاق معلومة عن عملية التسليم، لا خطأ فردي.

الأسئلة الشائعة

هل يعمل Site Reliability Guardian على Dynatrace Managed؟

لا. فهو يعتمد على Grail وDQL وAutomationEngine الخاصة بمنصة SaaS. وفي Managed استعلم عن أهداف SLO عبر واجهة API v2 من CI، واتخذ القرار داخل خط المعالجة.

هل يمكن مقارنة الإصدار الجديد بالسابق؟

نعم، بكتابة عتبات مستمدة من الإصدار السابق، أو باستخدام خيارات المقارنة التي يقترحها التطبيق إن كان إصدارك يتضمنها. تحقق من الوثائق الرسمية قبل الاعتماد عليها.

هل يحل الحارس محل تنبيهات burn rate؟

لا. يراقب الحارس لحظة محددة هي الإصدار، أما تنبيهات burn rate فتراقب الميزانية باستمرار. وكلاهما يكمل الآخر.

الخلاصة

يحوّل الحارس أهداف SLO إلى فحص آلي للتسليم. ثلاثة استعلامات DQL وحدث نشر وWorkflow تكفي لاكتشاف تراجع في الجودة خلال ربع ساعة بدل ساعات. ابدأ بخدمة حرجة، وراقب الأحكام أسبوعين، ثم اربط التراجع الآلي.

span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC. Dynatrace علامة تجارية لمالكها. تحقق دائمًا من القيم (المنافذ والإصدارات والأحجام) في الوثائق الرسمية الخاصة بإصدارك.

Total
0
Shares
Leave a Reply

Your email address will not be published. Required fields are marked *

Previous Post
Superviser collector OpenTelemetry : sa télémétrie interne dans Dynatrace (SaaS et Managed)

مراقبة OpenTelemetry Collector: قياسه الداخلي في Dynatrace (SaaS وManaged)

Next Post
Tableau de bord SLO pour la direction : statut, budget restant et tendance dans Dynatrace

لوحة معلومات SLO للإدارة العليا: الحالة والميزانية المتبقية والاتجاه في Dynatrace

Related Posts