تخيّل مهمة ليلية تستدعي واجهة برمجية لشريك خارجي آلاف المرات. في ثلاث ليالٍ من كل سبع تنتهي مهلة بعض الاستدعاءات، فتعيد المهمة المحاولة وينجح كل شيء في النهاية، ولا يعثر أحد على خطأ واحد في الشيفرة. إن كانت هذه الأجهزة تخرج إلى الإنترنت خلف موازن حمل (Load Balancer) عام، فالمشتبه به معروف: استنفاد منافذ SNAT في Azure. يشرح هذا المقال كيف تتعرف عليه، وكيف تقيسه في Dynatrace SaaS، ومتى يستحق الأمر إيقاظ أحد.
تنبيه للأمانة قبل البدء: لم ينفّذ span.observer هذه الاستعلامات على اشتراك حقيقي. المعلومات عن Azure مأخوذة من صفحات Microsoft حول الاتصالات الصادرة وحول تشخيص موازن الحمل. أما استعلامات DQL فقد بُنيت من وثائق Dynatrace وهي مُعلَّمة بأنها غير منفّذة.
النطاق محدود عن قصد: الجمع الموصوف هنا يتبع Azure Cloud Platform Monitoring، وهو خدمة ضمن Dynatrace SaaS. لم يُتحقق من أي شيء في Dynatrace Managed، فلا تنقل هذه الإعدادات إليه دون الرجوع إلى وثائقه. وإن لم يكن اشتراكك مربوطًا بعد، فابدأ بمقال تكامل Dynatrace مع Azure: Azure Monitor والسجلات.
لماذا يبدو استنفاد منافذ SNAT في Azure كأنه خلل في التطبيق
الجهاز خلف موازن حمل عام لا يملك عنوانًا قابلًا للتوجيه نحو الإنترنت. لذلك تعيد Azure كتابة عنوان المصدر في حزمه الصادرة ليصبح عنوان IP العام للواجهة الأمامية. هذا هو SNAT، وكل اتصال مستقل نحو الزوج نفسه من عنوان الوجهة ومنفذها يستهلك منفذًا. ويوفّر كل عنوان عام للواجهة الأمامية 64000 منفذ قابل للاستخدام.
الفخ في طريقة التقسيم. هذه المنافذ ليست مخزونًا مشتركًا، فـ Azure توزّعها مسبقًا بين نسخ المجموعة الخلفية. وبلا قاعدة صادرة، كلما كبرت المجموعة صغرت حصة كل نسخة، بسقف قدره 1024 منفذًا للنسخة. والجدول التالي من صفحة Microsoft يبيّن الشرائح.

والنتيجة أن جهازًا واحدًا كثير الاتصالات قد ينفد منه المنفذ بينما تبقى لدى الواجهة الأمامية عشرات الآلاف. تفشل اتصالاته الجديدة، ثم تعود إلى العمل حين يتحرر منفذ (بعد خمول يتراوح بين 4 و120 دقيقة، ويمكن ضبطه في القاعدة الصادرة). هذا التذبذب هو ما يفسّر العطل الذي يزول من تلقاء نفسه ولا تفسّره سجلات التطبيق.
إشارتان بدرجتي استعجال مختلفتين
قبل كتابة أي استعلام، حدّد ما تريد معرفته. تعرض Azure ثلاثة مقاييس SNAT على موازن الحمل العام، بدقة دقيقة واحدة.

- يحصي
SnatConnectionCountاتصالات SNAT الجديدة، موزعة بحسبConnectionState(معلّق، ناجح، فاشل). - يبيّن
AllocatedSnatPortsحصة المنافذ المحجوزة لكل نسخة. - يبيّن
UsedSnatPortsما تستهلكه كل نسخة فعليًا.
ولكل منها غرض مختلف. فإخفاقات SnatConnectionCount تثبت أن العطل واقع الآن: أي قيمة أكبر من صفر في الحالة الفاشلة تعني حادثة جارية. أما نسبة المنافذ المستخدمة إلى المخصصة فتنذر مبكرًا. تقترح Microsoft خطورة منخفضة عند 75% وخطورة عالية عند 90% أو 100%. والقاعدة المقترحة: تحذير 75% يذهب إلى تذكرة أو قناة، وأما الإخفاقات والعتبة العالية فتستدعي مناوبًا. ولا تنسَ أن المقاييس متعددة الأبعاد غير مدعومة في موازن الحمل من فئة Basic.
إيصال المقاييس إلى Dynatrace SaaS
يستعلم جامع Dynatrace من Azure Monitor كل 5 دقائق، مع تأخر قدره 5 دقائق. ويحتاج إلى كيان خدمة (service principal) بدور Monitoring Reader، ومزوّد Microsoft.Insights مسجّلًا في كل اشتراك؛ فبدونه تصل البنية الطوبولوجية دون أي مقاييس. دوّن هذا التأخر: التنبيه ليس لحظيًا.
ثم ثلاث تفاصيل تكلّف وقتًا إن اكتُشفت متأخرة.
- مجموعة المقاييس. مقاييس SNAT الثلاثة في موازن الحمل Standard ليست ضمن المجموعة «Recommended»، بل ضمن «Recommended+Custom» (
microsoft_network.loadbalancers_essentialplus). وإن لم تضفها إلى اتصال Azure فستبحث طويلًا عن بيانات لن تصل. - اسم المفاتيح. القاعدة الموثقة هي
cloud.azure.<namespace>.<MetricName>مع كتابة نوع المورد بأحرف صغيرة. يُستنتج منهاcloud.azure.microsoft_network.loadbalancers.UsedSnatPorts، لكن الصفحة لا تنص عليه حرفيًا، فتحقق منه. - حالة أحرف الأبعاد. يكتبها الجامع بأحرف صغيرة:
backendipaddressوprotocoltypeوconnectionstate.
للتحقق من المفتاح، يسرد استعلام الاستكشاف التالي، المقتبس من مثال في الوثائق، ما يصل إلى مستأجرك (tenant) فعلًا.
metrics
| filter startsWith(metric.key, "cloud.azure.microsoft_network.loadbalancers")
| filter dt.da.source == "azure-metric-poller"
| fields metric.key, azure.subscription
| dedup metric.key
وإن كان التكامل القديم (Dynatrace Classic) ما زال يعمل فإن مفاتيحه تبدأ بـ ext:. أبقِ الاثنين فعّالين طوال فترة الانتقال فقط، وإلا ظهرت بيانات مكررة وتنبيهات مزدوجة.
الحساب الذي يهم: النسبة لكل نسخة
المتوسط على موازن الحمل كله يخفي المشكلة، إذ تحجب تسعة أجهزة هادئة العاشر الذي نفدت منافذه. لذلك يقسم الاستعلام أدناه المنافذ المستخدمة على المخصصة، نسخة بنسخة. بُني من العناصر الموصوفة في الوثائق ولم يُنفَّذ، فجرّبه أولًا في Notebook.

ولتحويله إلى تنبيه تحيل الوثائق إلى Settings (متاح منذ الإصدار 1.344، وتطبيق Anomaly Detection مهمل)، ويقبل استعلام timeseries مصدرًا. ضع عتبة ثابتة على snat_usage_pct: القيمة 75 للتحذير و90 للمستوى الحرج، وهما قيمتان مأخوذتان من مثال Microsoft. أما التنبيه الثاني على إخفاقات SnatConnectionCount فيتطلب أولًا التحقق من كيفية كتابة قيمة connectionstate في بياناتك. وتجد الآلية كاملة في إنشاء تنبيه في Dynatrace خطوة بخطوة.
كيف تتأكد أن الإعداد يعمل
- شغّل استعلام الاستكشاف: يجب أن تظهر ثلاثة مفاتيح SNAT، وإلا فمجموعة «Recommended+Custom» غير مفعّلة.
- شغّل استعلام النسبة: ستحصل على سلسلة لكل عنوان خلفي، بقيم بين 0 و100.
- قارن نقطة واحدة مع Used SNAT Ports في بوابة Azure (تجميع Average، دقة دقيقة واحدة)، مع مراعاة تأخر الجمع.
ماذا تفعل حين يرنّ التنبيه
إعادة تشغيل الأجهزة تمنح راحة مؤقتة ولا تحل شيئًا. الحلول الحقيقية بنيوية، وترتبها Microsoft هكذا:
- Azure NAT Gateway: الطريقة الصادرة المفضلة لدى Microsoft. لا تخضع لحدود الاستنفاد نفسها، وتتقدم على موازن الحمل في الشبكة الفرعية المعنية.
- التخصيص اليدوي عبر قاعدة صادرة: المنافذ لكل نسخة = عناوين الواجهة الأمامية × 64000 ÷ نسخ المجموعة. مفيد إن بقيت على موازن الحمل.
- إعادة استخدام الاتصالات: مجمّع اتصالات (connection pool) في التطبيق يقلل الاستهلاك، وغيابه يزيد الخطر.
- Private Link نحو Storage أو SQL أو Cosmos DB: لا يمر هذا الحركة بعدها عبر SNAT.
ممارسات جيدة
- نبّه لكل نسخة على حدة، ولا تنبّه أبدًا على متوسط موازن الحمل.
- تجنب التخصيص الافتراضي في الإنتاج، فـ Microsoft لا توصي به.
- أبقِ تحذير 75%: فهو الهامش الذي يجنّبك استدعاء المناوب.
- اجعل فشل الاتصال العَرَض الرئيسي كما في التنبيه على الأعراض لا على الأسباب، واجعل نسبة المنافذ إشارة مبكرة.
الأسئلة الشائعة
كم منفذ SNAT يوفّره Azure Load Balancer؟
بحسب Microsoft: 64000 منفذ لكل عنوان IP عام في الواجهة الأمامية، ناقصًا نطاقًا من ثمانية منافذ لكل منفذ مستخدم في قاعدة توزيع أو NAT وارد. وفي التخصيص الافتراضي تحصل كل نسخة على 1024 منفذًا كحد أقصى.
أي مقياس يدل على استنفاد SNAT في Azure؟
قيمة SnatConnectionCount في الحالة الفاشلة إذا زادت على صفر تؤكد الاستنفاد. أما نسبة UsedSnatPorts إلى AllocatedSnatPorts فتنذر به قبل وقوع الإخفاقات.
هل يجب استبدال موازن الحمل ببوابة NAT Gateway؟
لا، فقط وظيفة الخروج منه. تتولى NAT Gateway الحركة الصادرة، ويحتفظ موازن الحمل بالحركة الواردة.
الخلاصة
كي لا تضيع ليلة أخرى في عطل شبحي: قِس نسبة استخدام المنافذ لكل نسخة، ونبّه عند 75%، وصعّد عند 90% أو عند الإخفاقات، ثم عالج السبب ببوابة NAT Gateway أو بإعادة استخدام الاتصالات. ويبقى عليك التأكد في بيئتك من المفتاح الدقيق للمقاييس، وحالة أحرف قيم الأبعاد، وسلوك التنبيه على بيانات حقيقية.
span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC (ولا لشركة Microsoft). العلامات المذكورة ملك لأصحابها. الخدمات تتغير بسرعة، فتحقق دائمًا من أسماء المقاييس والإعدادات في الوثائق الرسمية الخاصة بإصدارك.