استنفاد منافذ SNAT في Azure: الكشف والتنبيه مع Dynatrace

استنفاد منافذ SNAT في Azure: اكتشف المنافذ المشبعة في موازن الحمل بمقاييس Azure داخل Dynatrace SaaS، مع تنبيهات عند 75% و90% وحلول عملية.
Épuisement SNAT Azure : détecter et alerter avec Dynatrace

تخيّل مهمة ليلية تستدعي واجهة برمجية لشريك خارجي آلاف المرات. في ثلاث ليالٍ من كل سبع تنتهي مهلة بعض الاستدعاءات، فتعيد المهمة المحاولة وينجح كل شيء في النهاية، ولا يعثر أحد على خطأ واحد في الشيفرة. إن كانت هذه الأجهزة تخرج إلى الإنترنت خلف موازن حمل (Load Balancer) عام، فالمشتبه به معروف: استنفاد منافذ SNAT في Azure. يشرح هذا المقال كيف تتعرف عليه، وكيف تقيسه في Dynatrace SaaS، ومتى يستحق الأمر إيقاظ أحد.

تنبيه للأمانة قبل البدء: لم ينفّذ span.observer هذه الاستعلامات على اشتراك حقيقي. المعلومات عن Azure مأخوذة من صفحات Microsoft حول الاتصالات الصادرة وحول تشخيص موازن الحمل. أما استعلامات DQL فقد بُنيت من وثائق Dynatrace وهي مُعلَّمة بأنها غير منفّذة.

النطاق محدود عن قصد: الجمع الموصوف هنا يتبع Azure Cloud Platform Monitoring، وهو خدمة ضمن Dynatrace SaaS. لم يُتحقق من أي شيء في Dynatrace Managed، فلا تنقل هذه الإعدادات إليه دون الرجوع إلى وثائقه. وإن لم يكن اشتراكك مربوطًا بعد، فابدأ بمقال تكامل Dynatrace مع Azure: Azure Monitor والسجلات.

لماذا يبدو استنفاد منافذ SNAT في Azure كأنه خلل في التطبيق

الجهاز خلف موازن حمل عام لا يملك عنوانًا قابلًا للتوجيه نحو الإنترنت. لذلك تعيد Azure كتابة عنوان المصدر في حزمه الصادرة ليصبح عنوان IP العام للواجهة الأمامية. هذا هو SNAT، وكل اتصال مستقل نحو الزوج نفسه من عنوان الوجهة ومنفذها يستهلك منفذًا. ويوفّر كل عنوان عام للواجهة الأمامية 64000 منفذ قابل للاستخدام.

الفخ في طريقة التقسيم. هذه المنافذ ليست مخزونًا مشتركًا، فـ Azure توزّعها مسبقًا بين نسخ المجموعة الخلفية. وبلا قاعدة صادرة، كلما كبرت المجموعة صغرت حصة كل نسخة، بسقف قدره 1024 منفذًا للنسخة. والجدول التالي من صفحة Microsoft يبيّن الشرائح.

مقتطف من وثائق Microsoft يعرض منافذ SNAT الافتراضية بحسب حجم المجموعة، من 1024 منفذًا لما بين 1 و50 نسخة إلى 32 منفذًا لما بين 801 و1000 نسخة

والنتيجة أن جهازًا واحدًا كثير الاتصالات قد ينفد منه المنفذ بينما تبقى لدى الواجهة الأمامية عشرات الآلاف. تفشل اتصالاته الجديدة، ثم تعود إلى العمل حين يتحرر منفذ (بعد خمول يتراوح بين 4 و120 دقيقة، ويمكن ضبطه في القاعدة الصادرة). هذا التذبذب هو ما يفسّر العطل الذي يزول من تلقاء نفسه ولا تفسّره سجلات التطبيق.

إشارتان بدرجتي استعجال مختلفتين

قبل كتابة أي استعلام، حدّد ما تريد معرفته. تعرض Azure ثلاثة مقاييس SNAT على موازن الحمل العام، بدقة دقيقة واحدة.

مقتطف من مرجع Microsoft لمقاييس Microsoft.Network/loadBalancers يعرض SnatConnectionCount وAllocatedSnatPorts وUsedSnatPorts مع طريقة التجميع والأبعاد
  • يحصي SnatConnectionCount اتصالات SNAT الجديدة، موزعة بحسب ConnectionState (معلّق، ناجح، فاشل).
  • يبيّن AllocatedSnatPorts حصة المنافذ المحجوزة لكل نسخة.
  • يبيّن UsedSnatPorts ما تستهلكه كل نسخة فعليًا.

ولكل منها غرض مختلف. فإخفاقات SnatConnectionCount تثبت أن العطل واقع الآن: أي قيمة أكبر من صفر في الحالة الفاشلة تعني حادثة جارية. أما نسبة المنافذ المستخدمة إلى المخصصة فتنذر مبكرًا. تقترح Microsoft خطورة منخفضة عند 75% وخطورة عالية عند 90% أو 100%. والقاعدة المقترحة: تحذير 75% يذهب إلى تذكرة أو قناة، وأما الإخفاقات والعتبة العالية فتستدعي مناوبًا. ولا تنسَ أن المقاييس متعددة الأبعاد غير مدعومة في موازن الحمل من فئة Basic.

إيصال المقاييس إلى Dynatrace SaaS

يستعلم جامع Dynatrace من Azure Monitor كل 5 دقائق، مع تأخر قدره 5 دقائق. ويحتاج إلى كيان خدمة (service principal) بدور Monitoring Reader، ومزوّد Microsoft.Insights مسجّلًا في كل اشتراك؛ فبدونه تصل البنية الطوبولوجية دون أي مقاييس. دوّن هذا التأخر: التنبيه ليس لحظيًا.

ثم ثلاث تفاصيل تكلّف وقتًا إن اكتُشفت متأخرة.

  1. مجموعة المقاييس. مقاييس SNAT الثلاثة في موازن الحمل Standard ليست ضمن المجموعة «Recommended»، بل ضمن «Recommended+Custom» (microsoft_network.loadbalancers_essentialplus). وإن لم تضفها إلى اتصال Azure فستبحث طويلًا عن بيانات لن تصل.
  2. اسم المفاتيح. القاعدة الموثقة هي cloud.azure.<namespace>.<MetricName> مع كتابة نوع المورد بأحرف صغيرة. يُستنتج منها cloud.azure.microsoft_network.loadbalancers.UsedSnatPorts، لكن الصفحة لا تنص عليه حرفيًا، فتحقق منه.
  3. حالة أحرف الأبعاد. يكتبها الجامع بأحرف صغيرة: backendipaddress وprotocoltype وconnectionstate.

للتحقق من المفتاح، يسرد استعلام الاستكشاف التالي، المقتبس من مثال في الوثائق، ما يصل إلى مستأجرك (tenant) فعلًا.

metrics
| filter startsWith(metric.key, "cloud.azure.microsoft_network.loadbalancers")
| filter dt.da.source == "azure-metric-poller"
| fields metric.key, azure.subscription
| dedup metric.key

وإن كان التكامل القديم (Dynatrace Classic) ما زال يعمل فإن مفاتيحه تبدأ بـ ext:. أبقِ الاثنين فعّالين طوال فترة الانتقال فقط، وإلا ظهرت بيانات مكررة وتنبيهات مزدوجة.

الحساب الذي يهم: النسبة لكل نسخة

المتوسط على موازن الحمل كله يخفي المشكلة، إذ تحجب تسعة أجهزة هادئة العاشر الذي نفدت منافذه. لذلك يقسم الاستعلام أدناه المنافذ المستخدمة على المخصصة، نسخة بنسخة. بُني من العناصر الموصوفة في الوثائق ولم يُنفَّذ، فجرّبه أولًا في Notebook.

استعلام DQL من نوع timeseries يحسب snat_usage_pct بقسمة UsedSnatPorts على AllocatedSnatPorts بحسب backendipaddress وprotocoltype، مع تصفية dt.da.source على azure-metric-poller

ولتحويله إلى تنبيه تحيل الوثائق إلى Settings (متاح منذ الإصدار 1.344، وتطبيق Anomaly Detection مهمل)، ويقبل استعلام timeseries مصدرًا. ضع عتبة ثابتة على snat_usage_pct: القيمة 75 للتحذير و90 للمستوى الحرج، وهما قيمتان مأخوذتان من مثال Microsoft. أما التنبيه الثاني على إخفاقات SnatConnectionCount فيتطلب أولًا التحقق من كيفية كتابة قيمة connectionstate في بياناتك. وتجد الآلية كاملة في إنشاء تنبيه في Dynatrace خطوة بخطوة.

كيف تتأكد أن الإعداد يعمل

  1. شغّل استعلام الاستكشاف: يجب أن تظهر ثلاثة مفاتيح SNAT، وإلا فمجموعة «Recommended+Custom» غير مفعّلة.
  2. شغّل استعلام النسبة: ستحصل على سلسلة لكل عنوان خلفي، بقيم بين 0 و100.
  3. قارن نقطة واحدة مع Used SNAT Ports في بوابة Azure (تجميع Average، دقة دقيقة واحدة)، مع مراعاة تأخر الجمع.

ماذا تفعل حين يرنّ التنبيه

إعادة تشغيل الأجهزة تمنح راحة مؤقتة ولا تحل شيئًا. الحلول الحقيقية بنيوية، وترتبها Microsoft هكذا:

  • Azure NAT Gateway: الطريقة الصادرة المفضلة لدى Microsoft. لا تخضع لحدود الاستنفاد نفسها، وتتقدم على موازن الحمل في الشبكة الفرعية المعنية.
  • التخصيص اليدوي عبر قاعدة صادرة: المنافذ لكل نسخة = عناوين الواجهة الأمامية × 64000 ÷ نسخ المجموعة. مفيد إن بقيت على موازن الحمل.
  • إعادة استخدام الاتصالات: مجمّع اتصالات (connection pool) في التطبيق يقلل الاستهلاك، وغيابه يزيد الخطر.
  • Private Link نحو Storage أو SQL أو Cosmos DB: لا يمر هذا الحركة بعدها عبر SNAT.

ممارسات جيدة

  • نبّه لكل نسخة على حدة، ولا تنبّه أبدًا على متوسط موازن الحمل.
  • تجنب التخصيص الافتراضي في الإنتاج، فـ Microsoft لا توصي به.
  • أبقِ تحذير 75%: فهو الهامش الذي يجنّبك استدعاء المناوب.
  • اجعل فشل الاتصال العَرَض الرئيسي كما في التنبيه على الأعراض لا على الأسباب، واجعل نسبة المنافذ إشارة مبكرة.

الأسئلة الشائعة

كم منفذ SNAT يوفّره Azure Load Balancer؟

بحسب Microsoft: 64000 منفذ لكل عنوان IP عام في الواجهة الأمامية، ناقصًا نطاقًا من ثمانية منافذ لكل منفذ مستخدم في قاعدة توزيع أو NAT وارد. وفي التخصيص الافتراضي تحصل كل نسخة على 1024 منفذًا كحد أقصى.

أي مقياس يدل على استنفاد SNAT في Azure؟

قيمة SnatConnectionCount في الحالة الفاشلة إذا زادت على صفر تؤكد الاستنفاد. أما نسبة UsedSnatPorts إلى AllocatedSnatPorts فتنذر به قبل وقوع الإخفاقات.

هل يجب استبدال موازن الحمل ببوابة NAT Gateway؟

لا، فقط وظيفة الخروج منه. تتولى NAT Gateway الحركة الصادرة، ويحتفظ موازن الحمل بالحركة الواردة.

الخلاصة

كي لا تضيع ليلة أخرى في عطل شبحي: قِس نسبة استخدام المنافذ لكل نسخة، ونبّه عند 75%، وصعّد عند 90% أو عند الإخفاقات، ثم عالج السبب ببوابة NAT Gateway أو بإعادة استخدام الاتصالات. ويبقى عليك التأكد في بيئتك من المفتاح الدقيق للمقاييس، وحالة أحرف قيم الأبعاد، وسلوك التنبيه على بيانات حقيقية.

span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC (ولا لشركة Microsoft). العلامات المذكورة ملك لأصحابها. الخدمات تتغير بسرعة، فتحقق دائمًا من أسماء المقاييس والإعدادات في الوثائق الرسمية الخاصة بإصدارك.

Total
0
Shares
Leave a Reply

Your email address will not be published. Required fields are marked *

Previous Post
Exceptions OpenTelemetry traces : les enregistrer dans les spans

استثناءات OpenTelemetry في التتبع: كيف تسجلها في الـ spans

Next Post
Démo OpenTelemetry Kubernetes : Helm et export OTLP vers Dynatrace

عرض OpenTelemetry التجريبي على Kubernetes: Helm وتصدير OTLP إلى Dynatrace

Related Posts