الاحتفاظ بالبيانات في Managed: التخزين وCassandra وElasticsearch وتحديد الحجم

الاحتفاظ بالبيانات في Managed: مخازن Cassandra وElasticsearch والمعاملات، وضبط المدة لكل بيئة، وتحديد حجم الأقراص ومراقبتها.
Rétention des données et gestion du stockage en Managed

مع Dynatrace Managed، يستقر كل مقياس وكل تتبع موزّع وكل جلسة مستخدم وكل سطر سجل على أقراص تشتريها وتركّبها وتراقبها بنفسك. وحيث تخفي الخدمة المستضافة المسألة تمامًا، يصبح الاحتفاظ بالبيانات في Managed مع التخزين موازنة دائمة لدى المسؤول بين عمق السجل التاريخي وأداء الاستعلامات وتكلفة البنية التحتية.

أعراض سوء ضبط الاحتفاظ معروفة: وحدة تخزين /var/opt/dynatrace-managed تقترب من 90%، وتنبيهات تخزين في Cluster Management Console، وتتبعات تختفي أبكر من المتوقع لأن العنقود اضطر إلى التنظيف ليبقى حيًا، أو على العكس تيرابايتات تُدفع لحفظ بيانات لا يطّلع عليها أحد.

يشرح هذا المقال كيف يوزع Managed البيانات بين مخازنه المختلفة، وكيف تضبط الاحتفاظ لكل بيئة، وكيف تحدد حجم التخزين وتراقبه لتفادي المفاجآت.

أين تعيش بياناتك في عنقود Managed

عقدة Managed ليست قاعدة بيانات واحدة: تتجاور عدة محركات، لكل منها نمط نمو.

المخزن المحتوى الرئيسي نمط النمو
Cassandra السلاسل الزمنية للمقاييس (المضيفون والخدمات والمقاييس المخصصة) يتناسب مع عدد الكيانات والأبعاد
Elasticsearch جلسات المستخدمين وإجراءات RUM والأحداث وأحداث السجلات (Log Monitoring) يتناسب مع حركة تطبيقات الويب والجوال
مخزن المعاملات التتبعات الموزعة (PurePath) والطلبات التفصيلية شديد الحساسية لحجم الطلبات وعمق الالتقاط
Session Replay (مخزن مخصص، server/replayData) تسجيلات Session Replay إن كانت الميزة مفعّلة متغير، وكثيرًا ما يُستهان به
النسخ الاحتياطية (NFS) الإعدادات والمقاييس وجلسات المستخدمين (مخزن المعاملات لا يُنسخ احتياطيًا) يتناسب مع المخازن المنسوخة

افتراضيًا يقع كل شيء تحت /var/opt/dynatrace-managed، لكن المثبّت يتيح وضع كل مخزن على نقطة ربط (mount point) مستقلة. والأفضل اتخاذ هذا القرار عند التثبيت: نقل مخزن لاحقًا ممكن لكنه يتطلب إجراءً دقيقًا.

الاحتفاظ بالبيانات في Managed: ما الذي يُحفظ ولكم من الوقت

الاحتفاظ بحسب نوع البيانات

في CMC لكل بيئة إعدادات تخزين خاصة بها: الحجم المخصص لمخزن المعاملات، ثم مدد احتفاظ مستقلة لمستوى طلبات الخدمة ومستوى الشيفرة (code-level visibility) وReal User Monitoring وSynthetic وSession Replay والسجلات. وكمرجع، تفترض جداول تحديد الحجم الرسمية 10 أيام من الرؤية على مستوى الشيفرة و35 يومًا من الاحتفاظ في Elasticsearch. أما المقاييس فتُجمَّع تدريجيًا وتُحفظ لمدة أطول بكثير بدقة منخفضة. القيم الافتراضية والحدود القصوى تعتمد على إصدارك: تحقق منها في الوثائق.

تجميع المقاييس

لا تُخزَّن المقاييس إلى الأبد بدقة الدقيقة: تُجمَّع بدقة أخشن مع مرور الوقت. لذا فالاحتفاظ بالمقاييس سنتين أرخص بكثير من الاحتفاظ بالتتبعات سنتين.

صمام أمان مساحة القرص

عندما تنقص مساحة القرص يصدر العنقود الحدث «Insufficient disk space»؛ وإذا تأثر مخزن المعاملات فإن الاحتفاظ التكيفي (adaptive data retention) يقتطع البيانات ويقصّر المدة الفعلية من تلقاء نفسه. بعبارة أخرى، الاحتفاظ المضبوط حد أقصى لا ضمان: إذا لاحظت «فجوات» في سجل التتبعات فانظر أولًا إلى امتلاء القرص.

درس تطبيقي خطوة بخطوة

الخطوة 1: قياس الامتلاء الحالي

على كل عقدة، قِس المساحة لكل مخزن:

df -h /var/opt/dynatrace-managed
sudo du -sh /var/opt/dynatrace-managed/* 2>/dev/null | sort -h

إذا فصلت المخازن على عدة نقاط ربط فكرر الأمر لكل منها. دوّن القيم في جدول: ستكون مرجعك.

الخطوة 2: الاطلاع على عرض التخزين في CMC

في Cluster Management Console تعرض صفحة تفاصيل كل عقدة امتلاء الأقراص وأي تحذيرات. حدد المخزن الأسرع نموًا: هو عادة مخزن المعاملات أو Elasticsearch.

الخطوة 3: تحديد البيئات الأكثر استهلاكًا

في عنقود متعدد البيئات قد تستهلك بيئة واحدة معظم المساحة. في CMC قارن حجم البيانات وعدد المضيفين لكل بيئة. ويمكنك أيضًا الاستعلام من API بيئة ما لمتابعة عدد الكيانات المراقَبة:

curl -s -H "Authorization: Api-Token {token}" \
  "https://{votre-domaine}/e/{id-environnement}/api/v2/entities?entitySelector=type(%22HOST%22)&pageSize=1" \
  | python3 -m json.tool | grep totalCount

الخطوة 4: ضبط الاحتفاظ لكل بيئة

في CMC افتح إعدادات البيئة المعنية، قسم الاحتفاظ بالبيانات. عدّل المدد لكل فئة بحسب احتياجاتك الفعلية:

  • الإنتاج الحرج: تتبعات محفوظة بالحد الأقصى المسموح لتسهيل التحليل بعد الحوادث.
  • الاختبار والتطوير: احتفاظ قصير، وغالبًا تكفي بضعة أيام.
  • جلسات المستخدمين: واءم المدة مع التزاماتك تجاه اللائحة العامة لحماية البيانات (RGPD) وسياسة الخصوصية.

تُطبَّق القيم الجديدة تدريجيًا: لا تتحرر المساحة فورًا.

الخطوة 5: تقليل الحجم من المصدر

قبل إضافة أقراص، قلّل ما يُجمع بلا قيمة:

  • ضع مضيفي التطوير في وضع infrastructure only (--set-monitoring-mode=infra-only عند التثبيت أو عبر oneagentctl).
  • استبعد طلبات فحص السلامة (health-check) والعناوين التقنية من الالتقاط.
  • راجع المقاييس المخصصة عالية العدد الفريد للقيم (cardinality) مثل الأبعاد التي تحوي معرّف طلب.
  • اقصر Session Replay على التطبيقات التي يفيد فيها فعلًا.
sudo /opt/dynatrace/oneagent/agent/tools/oneagentctl --set-monitoring-mode=infra-only --restart-service

الخطوة 6: توسيع التخزين بشكل سليم

إذا كانت الحاجة حقيقية فأمامك خياران: تكبير الوحدات الحالية (LVM أو قرص افتراضي) أو إضافة عقدة إلى العنقود، وهو ما يوزع أيضًا حمل المعالجة. لتكبير LVM تقليدي:

sudo lvextend -L +{taille}G /dev/{vg}/{lv-dynatrace}
sudo xfs_growfs /var/opt/dynatrace-managed   # ou resize2fs pour ext4
df -h /var/opt/dynatrace-managed

نفّذ العملية عقدة بعد عقدة وأبقِ حجم القسم نفسه على جميع العقد. وبالنسبة إلى مخزن المقاييس (Cassandra، ثلاث نسخ في العنقود متعدد العقد) توصي الوثائق بالبقاء دون 2 تيرابايت لكل عقدة: وما فوق ذلك فإضافة عقدة أفضل من التكبير.

الخطوة 7: المراقبة على المدى الطويل

راقب عقد العنقود نفسها (مثلًا بـ OneAgent مرتبط ببيئة مخصصة للتشغيل) وأنشئ تنبيهًا على امتلاء أقراص Dynatrace، بعتبة تحذير نحو 75% وعتبة حرجة نحو 85%، وعدّلهما بحسب حالتك.

أفضل الممارسات

  • فصل المخازن على وحدات مستقلة منذ التثبيت لعزل النمو وتسهيل التشخيص.
  • أقراص سريعة (SSD/NVMe) لـ Cassandra ومخزن المعاملات: زمن استجابة القرص يظهر مباشرة في الواجهة.
  • احتفاظ متمايز لكل بيئة: الإنتاج يستحق سجلًا تاريخيًا، أما الاختبار فنادرًا.
  • التخطيط للنسخ الاحتياطي: يجب أن تواكب مشاركة NFS الخاصة بـالنسخ الاحتياطي نمو المخازن المنسوخة (المقاييس وElasticsearch والإعدادات)؛ ومخزن المعاملات لا يُنسخ.
  • مراجعة فصلية: منحنى النمو، والبيئات الأكثر استهلاكًا، وتوقع لستة أشهر.

الأسئلة الشائعة

لماذا تختفي تتبعات قبل نهاية الاحتفاظ المضبوط؟

عندما يقترب مخزن من سعته قد يقلل العنقود الاحتفاظ الفعلي من تلقاء نفسه لحماية الخدمة. المدة المضبوطة حد أقصى: انظر أولًا إلى امتلاء القرص.

لماذا الاحتفاظ بالمقاييس طويلًا أرخص من التتبعات؟

تُجمَّع المقاييس بدقة أخشن مع الوقت، بينما تحتفظ التتبعات الموزعة بتفاصيلها. لذا يزن سنتان من المقاييس أقل بكثير من سنتين من التتبعات.

هل نضيف أقراصًا أم عقدة؟

ابدأ بتقليل الجمع عديم القيمة. فإن بقيت الحاجة حقيقية فكبّر الوحدات عقدة بعد عقدة للحفاظ على سعة متجانسة، أو أضف عقدة، فهذا يوزع أيضًا حمل المعالجة.

الخلاصة

في Managed ليس الاحتفاظ مجرد معامل: هو عقد بين ما تريد تحليله وما تتحمله أقراصك. بمعرفة المخازن وقياس نموها دوريًا وضبط الاحتفاظ لكل بيئة وتقليل الجمع غير المفيد، تضمن سجلًا تاريخيًا موثوقًا دون مبالغة في حجم البنية التحتية، وتمنع العنقود من إجراء هذه الموازنات نيابة عنك.

span.observer مدوّنة مجتمعية مستقلة وغير تابعة لشركة Dynatrace LLC. Dynatrace علامة تجارية لشركة Dynatrace LLC. تحقق دائمًا من القيم (المنافذ والإصدارات والأحجام) في الوثائق الرسمية الخاصة بإصدارك.

Total
0
Shares
Leave a Reply

Your email address will not be published. Required fields are marked *

Previous Post
Mises à jour cluster Managed : planifier le cluster, les ActiveGate et les OneAgent

ترقية عنقود Managed: تخطيط العنقود وActiveGate وOneAgent

Next Post
Exploiter Dynatrace Managed en mode offline (air-gapped)

وضع عدم الاتصال المعزول (offline air-gapped): تشغيل Dynatrace Managed

Related Posts