فريقك يستخدم Prometheus وGrafana بالفعل، والإدارة اشترت للتو Dynatrace. السؤال الفوري في اجتماع SRE: أين تُعرَّف أهداف الموثوقية؟ مقارنة SLO Dynatrace Grafana على كتيّب تسويقي لا تفيد؛ يجب تنفيذ الهدف نفسه في الجهتين ومعاينة كلفة كل منهما في الجهد والصيانة وضجيج المناوبة.
الهدف: بناء هدف SLO متطابق للتوافر (99.5% على 30 يومًا، طلبات HTTP بلا أخطاء 5xx) أولًا بـ Prometheus وGrafana ثم في Dynatrace، واستخلاص شبكة قرار. في جانب Dynatrace يغطي المقال Dynatrace SaaS (أهداف SLO على Grail وDQL) وDynatrace Managed (أهداف SLO كلاسيكية قائمة على محددات المقاييس).
لأساسيات حساب ميزانية الأخطاء (error budget) ومعدل الاستهلاك (burn rate)، أبقِ تنبيهات burn rate لـ SLO في متناولك.
المشكلة: مصدران للحقيقة لهدف SLO واحد
أداتان تحسبان التوافر نفسه بأرقام مختلفة هو أسوأ سيناريو: تتحول كل حادثة إلى جدال حول القياس بدل مراجعة بلا لوم. الاختيار لا يتعلق بالأداة بقدر ما يتعلق بمكان وجود مؤشر SLI المرجعي.
المتطلبات المسبقة
- Prometheus 2.x (أو متوافق) يجمع مقياس طلبات، وهو هنا
http_server_requests_totalبوسمcode؛ كيّفه مع الاسم الفعلي في أدوات القياس لديك. - Grafana 10 أو أحدث، مع مصدر بيانات Prometheus.
- بيئة Dynatrace (SaaS أو Managed) تراقب الخدمة نفسها عبر OneAgent أو OpenTelemetry.
- رمز API مميّز (API token) في Dynatrace بصلاحيتي قراءة أهداف SLO وكتابتها.
الخطوة 1: الـ SLO في Prometheus وGrafana
لا يعرف Prometheus مفهوم SLO: تبنيه بقواعد التسجيل (recording rules). فيما يلي نسبة الأخطاء على نافذتين، ثم تنبيه burn rate سريع.
# slo-checkout.rules.yml
groups:
- name: slo-checkout
rules:
- record: slo:checkout_errors:ratio_rate5m
expr: |
sum(rate(http_server_requests_total{job="checkout",code=~"5.."}[5m]))
/
sum(rate(http_server_requests_total{job="checkout"}[5m]))
- record: slo:checkout_errors:ratio_rate1h
expr: |
sum(rate(http_server_requests_total{job="checkout",code=~"5.."}[1h]))
/
sum(rate(http_server_requests_total{job="checkout"}[1h]))
- alert: CheckoutFastBurn
expr: |
slo:checkout_errors:ratio_rate1h > (14.4 * 0.005)
and
slo:checkout_errors:ratio_rate5m > (14.4 * 0.005)
for: 2m
labels:
severity: page
annotations:
summary: "Checkout consomme son error budget 14,4 fois trop vite"
الأسطر الحرجة: القيمة 0.005 تمثل ميزانية الأخطاء لهدف SLO بنسبة 99.5%. الشرط المزدوج (ساعة و5 دقائق) يمنع إرسال نداء المناوبة بسبب ذروة انتهت بالفعل. تحقق من الملف قبل تحميله:
promtool check rules slo-checkout.rules.yml
في Grafana، تعرض لوحة «Stat» التوافر على 30 يومًا:
1 - (
sum(increase(http_server_requests_total{job="checkout",code=~"5.."}[30d]))
/
sum(increase(http_server_requests_total{job="checkout"}[30d]))
)
استعلام على 30 يومًا من البيانات الخام مكلف على Prometheus كبير؛ في الإنتاج يُبنى عادة على قواعد تسجيل وسيطة. تولّد أدوات مثل Sloth أو ميزة SLO في Grafana Cloud هذه القواعد من مواصفة؛ تحقق من توافرها في عرض Grafana لديك.
الخطوة 2: الـ SLO نفسه في Dynatrace SaaS
في SaaS يعتمد الـ SLO على Grail. ابدأ بالتحقق من مؤشر SLI في Notebook بـ DQL:
timeseries {
total = sum(dt.service.request.count),
failed = sum(dt.service.request.failure_count)
},
filter: dt.entity.service == "SERVICE-0123456789ABCDEF",
from: now()-30d
| fieldsAdd sli = 100 * (1 - (arraySum(failed) / arraySum(total)))
| fields sli
أسماء المقاييس dt.service.request.* تقابل مقاييس الخدمة في Grail؛ تحقق منها في بيئتك لأنها تتوقف على المصدر (OneAgent أو OpenTelemetry). ثم أنشئ الـ SLO في تطبيق SLO انطلاقًا من هذا الاستعلام، بهدف 99.5 ونافذة 30 يومًا. الخطوات الكاملة في SLO مع OpenTelemetry وDQL.
الخطوة 3: الـ SLO نفسه في Dynatrace Managed
في Managed، الـ SLO كائن إعدادات قائم على تعبير مقياس، يُنشأ من الواجهة أو عبر API Environment v2:
curl -s -X POST "$DT_ENV/api/v2/slo" \
-H "Authorization: Api-Token $DT_TOKEN" \
-H "Content-Type: application/json" \
-d '{
"enabled": true,
"name": "checkout - disponibilite",
"metricName": "checkout_availability",
"metricExpression": "(100)*(builtin:service.errors.server.successCount:splitBy())/(builtin:service.requestCount.server:splitBy())",
"evaluationType": "AGGREGATE",
"filter": "type(\"SERVICE\"),entityId(\"SERVICE-0123456789ABCDEF\")",
"target": 99.5,
"warning": 99.8,
"timeframe": "-30d"
}'
قد يختلف مخطط الجسم بحسب إصدار العنقود: قارنه بالمرجع على docs.dynatrace.com. ولإدارة إصدارات هذه الكائنات فضّل SLO Dynatrace Terraform.
مقارنة SLO Dynatrace Grafana عمليًا
| المعيار | Prometheus + Grafana | Dynatrace |
|---|---|---|
| تعريف SLI | PromQL، وقواعد تُكتب يدويًا أو تُولَّد | DQL (SaaS) أو محدد مقياس (Managed) |
| القياس البرمجي (instrumentation) | يجب توفيره (exporters ومكتبات وOpenTelemetry) | OneAgent تلقائيًا، أو OpenTelemetry |
| حساب ميزانية الأخطاء | يجب بناؤه (قواعد ولوحات معلومات) | مدمج في كائن SLO |
| تنبيه burn rate | Alertmanager، وقواعد متعددة النوافذ | حدث مقياس أو تنبيه من تطبيق SLO |
| الربط بالسبب | يدوي، عبر التتبعات والسجلات إن كانت مترابطة | مشكلة Davis وطوبولوجيا Smartscape |
| الكلفة الرئيسية | وقت هندسي وتخزين طويل الأمد | الترخيص والاستهلاك |
قراءة SRE: يمنح Prometheus تحكمًا كاملًا، لكن بثمن عمل يدوي مكرر (toil) لصيانة القواعد. ويقلّل Dynatrace هذا العبء ويختصر MTTR بفضل الربط المباشر بين انتهاك SLO والسبب المحتمل، لكنك تعتمد على نموذج بياناته.
كيف تتحقق من أن الأمر يعمل
- Prometheus:
promtool check rulesبلا أخطاء، ثم تعرض الصفحة/rulesالمجموعةslo-checkoutبحالة OK. - Dynatrace SaaS: يعيد استعلام DQL قيمة، وتعرض بطاقة الـ SLO حالة وميزانية أخطاء.
- Dynatrace Managed: يعيد
GET /api/v2/slo?evaluate=trueالـ SLO مع قيمةevaluatedPercentageمعبّأة. - المقارنة: على النافذة نفسها يجب أن يبقى التوافران متقاربين. فارق يتجاوز بضعة أعشار من النقطة يدل على تعريف مختلف (رموز HTTP المحتسبة، تضمين طلبات الفحص الصحي، نطاق الخدمة).
أفضل الممارسات
- مصدر حقيقة واحد لكل SLO: الأداة الأخرى تعرض ولا تعيد الحساب.
- وثّق مؤشر SLI في جملة واحدة («طلبات checkout بلا 5xx، باستثناء فحوص الصحة») وطبّقها على الأداتين.
- أطلق التنبيه من الأداة التي تحمل الـ SLO لتجنب نداءات مزدوجة.
- ضع قواعد Prometheus وأهداف SLO في Dynatrace تحت إدارة الإصدارات في المستودع نفسه.
الأسئلة الشائعة
هل يمكن عرض أهداف SLO من Dynatrace في Grafana؟
نعم، عبر إضافة مصدر بيانات Dynatrace لـ Grafana أو عبر API المقاييس. تحقق من توافق الإضافة مع إصدارك ونوع بيئتك.
هل يجب التخلي عن Prometheus عند اعتماد Dynatrace؟
لا. يستطيع Dynatrace استيعاب مقاييس Prometheus. المسألة هي تحديد مكان وجود الـ SLO، لا حذف أداة.
ما الخيار لفريق صغير؟
الفريق الذي لا يملك وقتًا لصيانة القواعد يستفيد من إسناد الـ SLO إلى الأداة التي تحسب ميزانية الأخطاء أصلًا. أما فريق مجهّز بـ PromQL فيمكنه البقاء على Prometheus.
الخلاصة
تنفيذ الـ SLO نفسه في الجهتين يحسم الجدل أفضل من قائمة ميزات. اختر الأداة التي تقلل العمل اليدوي المكرر وMTTR لديك، ثم التزم بتعريف واحد.
span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC. Dynatrace علامة تجارية لشركة Dynatrace LLC. Grafana وPrometheus علامتان تجاريتان لمالكيهما.