هندسة الفوضى مع Dynatrace: قِس أولًا قبل أن تحقن العطل

هندسة الفوضى مع Dynatrace: حدّد خط الأساس وعتبات الإيقاف وحكم SRG قبل حقن العطل، لتجري اختبارك دون استنزاف ميزانية الأخطاء.
Chaos engineering avec Dynatrace : mesurer avant d'injecter une panne

قبل أن تخطط لتجربة في هندسة الفوضى مع Dynatrace داخل بيئة الإنتاج، اطرح على نفسك سؤالًا واحدًا: إذا أوقفتُ هذا المكوّن أو أبطأته، فكيف سأعرف خلال عشر دقائق أن التجربة تسير جيدًا أو أن عليّ إيقافها؟ فإن لم يكن لديك جواب رقمي، فالعطل المتعمَّد ليس سوى عطل.

ينطلق هذا المقال من قرار تشغيلي، لا من أداة. فبحسب الوثائق وتدوينة الشركة المزوّدة اللتين قرأتهما، تُستخدم Dynatrace هنا للقياس (الحالة الأولية والآثار والسبب) لا لإحداث العطل. أما الحقن فيبقى على عاتق أداتك المعتادة. وتدافع التدوينة الأصلية (Build systems more reliably with Dynatrace: Chaos Engineering، أغسطس 2024، وحُدّثت في يناير 2025) عن فكرة عامة مشابهة، أما الخطة أدناه فهي من وضعي.

النطاق: تطبيقات Service-Level Objectives وSite Reliability Guardian (SRG) وWorkflows في Dynatrace SaaS، وهي تعتمد على Grail ولغة DQL. لم أتحقق من توفرها في Managed، فلا تفترض شيئًا في تلك الحالة.

معيار الإيقاف قبل الحقن

تجربة الفوضى اختبار لفرضية. اكتبها على شكل عقد من ثلاثة أسطر: ما الذي ستكسره، وما الذي تتوقعه، وما العتبة التي توجب الإيقاف الفوري. فإن عجزت عن وضع أرقام للسطرين الثاني والثالث، فأنت لست جاهزًا بعد.

ملف YAML لفرضية تجربة فوضى: الهدف والعطل المحقون ونطاق التأثير والنتيجة المتوقعة وعتبات الإيقاف على معدل الفشل وزمن الاستجابة

يحمل هذا الملف ثلاثة اختيارات. نطاق التأثير صغير عمدًا (منطقة واحدة، أو جزء من الحركة). والنتيجة المتوقعة مصاغة على هيئة هدف لمستوى الخدمة. أما عتبات الإيقاف فهي أشد صرامة من الهدف، لتتمكن من المقاطعة قبل استنزاف ميزانية الأخطاء. ولاختيار المؤشرات المناسبة راجع كيفية اختيار مؤشرات SLI بلغة DQL.

قياس الحالة الأولية بلغة DQL

الخطأ الشائع أن تبني الفرضية على انطباع («هذه الخدمة متينة»). فخذ أولًا خط الأساس خلال فترة اعتيادية، سبعة أيام مثلًا، وبمستوى حركة يماثل مستوى التجربة.

استعلام DQL من نوع timeseries على مقاييس طلبات الخدمة يحسب نسبة الفشل المئوية لكل خدمة خلال سبعة أيام

الاستعلام مثال يلزم تكييفه: تحقق من مفاتيح المقاييس والأبعاد في بيئتك قبل استخدامه، فأنا لم أشغّله على أي tenant. المهم هو المنهج: معدل فشل وزمن استجابة لكل خدمة، في فترة قابلة للمقارنة، تُدوَّن قبل أي حقن. وأضف عدد المشكلات المفتوحة ومدتها المعتادة لتعرف هل نظامك هشّ أصلًا في ذلك اليوم. وإذا كان خط الأساس سيئًا من البداية، فأجّل التجربة.

تحويل الفرضية إلى أهداف قابلة للتحقق

تقدّم المنصة لبنتين لهذا الغرض، ولكل منهما سؤال مختلف.

  • هدف SLO: المؤشر (SLI) سلسلة موحّدة من 0 إلى 100% يحسبها استعلام DQL وتُقارن بهدف خلال فترة تقييم. وميزانية الأخطاء هي الفرق بين الحالة الراهنة والهدف، أما معدل الاستهلاك (burn rate) فيبيّن سرعة استنزافها. وأثناء التجربة، يخبرك burn rate بما إذا كان الاختبار مكلفًا أكثر من اللازم. راجع تنبيهات burn rate.
  • حارس SRG (guardian): مجموعة أهداف، يغذي كلًّا منها استعلام DQL، ويُحكم عليها بعتبات تحذير وعتبات فشل. والنتيجة الإجمالية هي الأشد من بين النتائج الفردية.

في التجربة يؤدي الـ guardian دور الحَكَم. اجعل هدفًا واحدًا لكل سطر في ملف الفرضية: معدل الفشل، وزمن الاستجابة، ومؤشر سعة إن كنت ستمسّ المعالج. أما العتبات التكيفية التلقائية فتحتاج إلى خمس عمليات تحقق ناجحة على الأقل، وتُرجع «info» قبل ذلك؛ ففي أول تجربة ثبّت عتبات ساكنة مأخوذة من خط الأساس.

أتمتة التحقق باستخدام workflow

يمكن لـ workflow استدعاء إجراء الـ guardian بعد نافذة الحقن، بمشغّل قائم على حدث أو باستدعاء عند الطلب. وتعرض النتيجة حالة التحقق (info أو pass أو warning أو fail أو error) ومعرّفًا ورابطًا إلى عملية التحقق. ومنها تستخلص قرارًا واضحًا: عند pass توسّع نطاق التأثير، وعند warning تعيد التجربة بالنطاق نفسه، وعند fail توقف كل شيء وتفتح تذكرة. وهذا هو منطق بوابة الإصدار نفسه، المشروح في مقال SRG وأهداف SLO للإصدار، مطبّقًا هنا على عطل متعمَّد. وللاطلاع على أساسيات workflows راجع الوحدة 7 من دورة SaaS.

تنبيه بشأن المصطلحات: تسمّي وثائق SRG هذه الخطوة «Site Reliability Guardian» عند اختيار الإجراء، و«guardian validation action» في مواضع أخرى، و«run validation» في workflows المولَّدة. ابحث عن المعنى المشابه لا عن النص الحرفي.

هندسة الفوضى مع Dynatrace في ست خطوات

  1. خذ خط الأساس ودوّن وقت البدء.
  2. أنشئ الـ guardian والـ workflow، وجرّبهما أولًا دون عطل؛ يجب أن تكون النتيجة pass.
  3. أبلغ فريق المناوبة بالنافذة الزمنية وسمِّ الشخص المخوَّل بالمقاطعة.
  4. احقن العطل في أصغر نطاق ممكن بأداة الحقن لديك.
  5. دع التحقق يعمل وراقب burn rate؛ فإذا تجاوزتَ عتبة الإيقاف فأوقف فورًا دون نقاش.
  6. حلّل: إذا وُجدت مشكلة مفتوحة، فإن تحليل السبب الجذري في Davis يبيّن هل نُسبت إلى العطل أم إلى شيء آخر؛ ثم صحّح ووسّع النطاق درجة واحدة.

تذكر تدوينة الشركة، في عرضها التوضيحي، بطئًا في الطلبات وضغطًا على المعالج أعقبهما تحليل للسبب الجذري. لم أعد تشغيل ذلك العرض، فاعتبره مثالًا على الاستخدام لا نتيجة مقيسة في بيئتك.

ممارسات جيدة

  • ابدأ في بيئة ما قبل الإنتاج، ثم انتقل إلى الإنتاج بجزء ضئيل من الحركة.
  • تغيير واحد في كل مرة: لا تجارب أثناء عملية نشر.
  • أبقِ عتبات الإيقاف أشد من SLO، وإلا توقفت متأخرًا.
  • احتفظ بسجل لكل تجربة: الفرضية وخط الأساس ونتيجة الـ guardian والتصحيح.
  • بلا لوم: التجربة تختبر النظام لا الفريق.

الأسئلة الشائعة

هل تحقن Dynatrace الأعطال؟

في صفحات الوثائق والتدوينة اللتين قرأتهما: لا، فهي تصف القياس والتحليل وأتمتة القرار. أما الحقن فمن مهام أداة أخرى. وإن كنت تبحث عن ميزة مدمجة فراجع مستجدات إصدارك.

هل أحتاج إلى SLO أم إلى guardian؟

كلاهما مفيد. يتابع SLO الخدمة على المدى الطويل وميزانية أخطائها، بينما يصدر الـ guardian حكمًا آنيًا على نافذة محددة، وهذا ما يناسب التجربة.

هل يمكن الاختبار مباشرة في الإنتاج؟

فقط بنطاق تأثير محدود وخط أساس متين ومعيار إيقاف تلقائي. وعند التردد، ابدأ في بيئة ما قبل الإنتاج.

الخلاصة

تبدأ هندسة الفوضى مع Dynatrace بالقياس: خط أساس، وعتبات إيقاف، وحكم مؤتمت. ثم يأتي العطل. ولمن أراد التعمق، فمنطق ميزانية الأخطاء مفصَّل في مقال ميزانية الأخطاء كبوابة للإصدار. المصادر الرسمية: Site Reliability Guardian وService-Level Objectives.

span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC. Dynatrace علامة تجارية لشركة Dynatrace LLC. الميزات تتطور: تحقق دائمًا من القيم والسلوك في الوثائق الرسمية الخاصة بإصدارك.

Total
0
Shares
Leave a Reply

Your email address will not be published. Required fields are marked *

Previous Post
Modèle MoE local : ce que Colibri demande à votre disque

نموذج MoE محلي: ما الذي يطلبه Colibri من قرصك

Next Post
Alibaba Cloud Dynatrace : superviser ECS, SLB et bases en multi-cloud

مراقبة Alibaba Cloud باستخدام Dynatrace: ECS وSLB وقواعد البيانات في بيئة متعددة السحب

Related Posts