حلول التسجيل المركزي

تخيّلوا أن لديكم العديد من الحاويات، وكل منها ينشئ سجلات. كيف ستعثرون على خطأ إذا كان موزعًا عبر مئات ملفات السجل؟

• سجلات متفرقة: توجد السجلات على خوادم أو حاويات مختلفة، ويصعب العثور عليها.
• غياب الرؤى الفورية: لا يمكنكم رؤية الأنماط أو المشكلات بسهولة أثناء حدوثها.
• صعوبة التحليل: يستغرق فحص السجلات يدويًا وقتًا طويلًا، كما أنه عرضة للأخطاء.

هنا يأتي دور التسجيل المركزي!

التسجيل المركزي هو ممارسة جمع السجلات من جميع تطبيقاتكم وبنيتكم التحتية في موقع مركزي واحد.

فكّروا فيه بوصفه برج مراقبة لجميع رسائل نظامكم. فبدلًا من فحص سجلات الحاويات الفردية، تصبح لديكم منصة واحدة تتيح لكم:

• التجميع: جمع جميع السجلات معًا.
• التخزين: الاحتفاظ بالسجلات في قاعدة بيانات منظّمة وقابلة للبحث.
• التحليل: البحث في بيانات السجلات وتصفيتها وتصورها للحصول على رؤى.

وهذا يجعل استكشاف الأخطاء وإصلاحها أسرع وأكثر كفاءة بكثير.

يتضمن نظام التسجيل المركزي النموذجي عدة أجزاء أساسية تعمل معًا:

• وكلاء السجلات: برامج صغيرة تعمل على كل خادم أو حاوية لجمع السجلات.
• مجمّعات السجلات: خدمات تستقبل السجلات من الوكلاء، وتعالجها، ثم ترسلها إلى التخزين.
• تخزين السجلات: قاعدة بيانات محسّنة لتخزين كميات كبيرة من بيانات السجلات والاستعلام عنها.
• أدوات التصور: لوحات معلومات وواجهات لاستكشاف السجلات والبحث فيها وتصورها.

تضمن هذه المكوّنات تدفق السجلات بسلاسة من المصدر إلى التحليل.

تُعد ELK Stack حزمة شائعة مفتوحة المصدر للتسجيل المركزي. ويرمز ELK إلى:

• Elasticsearch: محرك للبحث والتحليلات.
• Logstash: مسار لمعالجة البيانات.
• Kibana: لوحة لتصور البيانات.

توفّر هذه المكوّنات معًا حلًا قويًا لجمع السجلات من تطبيقاتكم وبنيتكم التحتية وتخزينها وتحليلها.

يُعد Elasticsearch قلب ELK Stack لتخزين البيانات والبحث فيها. وهو محرك بحث موزّع وقابل للتوسع بدرجة كبيرة للبحث في النصوص الكاملة.

يأخذ السجلات المعالَجة ويخزّنها بطريقة تجعل البحث فيها وتحليلها سريعًا للغاية، حتى مع وجود بيانات بحجم بيتابايت.

• يخزّن السجلات في مستندات JSON.
• يوفّر إمكانات بحث قوية.
• يتوسع أفقيًا مع مجموعات البيانات الكبيرة.

يعمل Logstash بوصفه مسارًا لمعالجة البيانات. فهو يجمع البيانات من مصادر مختلفة، ويحوّلها، ثم يرسلها إلى «مخزن» (عادةً Elasticsearch).

وهو مرن جدًا، ويمكنه التعامل مع العديد من تنسيقات السجلات ومصادرها المختلفة.

• الإدخال: يستقبل السجلات (مثلًا من الملفات أو الشبكة أو الوكلاء).
• التصفية: يحلّل بيانات السجلات ويحوّلها ويثريها.
• الإخراج: يرسل البيانات المعالَجة إلى Elasticsearch أو إلى وجهات أخرى.

تُعد Kibana نافذتكم إلى البيانات المخزّنة في Elasticsearch. وهي أداة قوية لتصور البيانات وإنشاء لوحات المعلومات.

باستخدام Kibana، يمكنكم:

• البحث والاستكشاف: الاستعلام عن بيانات سجلاتكم بسهولة.
• التصور: إنشاء مخططات ورسوم بيانية وخرائط من سجلاتكم.
• لوحات المعلومات: إنشاء لوحات معلومات تفاعلية لمراقبة سلامة النظام وسلوك التطبيق في الوقت الفعلي.

فهي تساعد على تحويل البيانات الخام إلى رؤى قابلة للتنفيذ.

قبل جمع السجلات، يجب إنشاؤها أولًا! تكتب معظم التطبيقات داخل الحاويات مخرجاتها ببساطة إلى stdout (المخرجات القياسية) أو stderr (الأخطاء القياسية).

يلتقط Docker هذه التدفقات بوصفها سجلات الحاوية. جرّبوا تشغيل هذا الأمر البسيط لرؤية حاوية تنشئ بعض المخرجات:

إليكم تدفقًا مبسّطًا للسجلات في إعداد ELK:

1. يكتب تطبيقكم داخل حاوية Docker السجلات إلى stdout.
2. يجمع وكيل سجلات (مثل Filebeat، المستخدم غالبًا مع ELK) هذه السجلات.
3. يرسل الوكيل السجلات إلى Logstash لمعالجتها.
4. يحلّل Logstash السجلات ويحوّلها.
5. تُرسل السجلات المعالَجة إلى Elasticsearch لتخزينها.
6. يتصل Kibana بـ Elasticsearch لتصور السجلات والبحث فيها.

ينشئ هذا مسارًا واضحًا لجميع سجلات حاوياتكم.

أي العبارات التالية تصف بشكل صحيح دور المكوّنات في ELK Stack؟

أحسنتم! تعلّمتم أساسيات التسجيل المركزي وELK Stack.

• يجمع التسجيل المركزي السجلات من مصادر عديدة في مكان واحد.
• يساعد على استكشاف الأخطاء وإصلاحها بسرعة أكبر، ويوفّر رؤى أفضل.
• تُعد ELK Stack (Elasticsearch وLogstash وKibana) حلًا شائعًا.
• Elasticsearch يخزّن السجلات ويفهرسها.
• Logstash يعالج السجلات ويحوّلها.
• Kibana يصور السجلات ويتيح استكشافها.

يساعدكم هذا المزيج القوي على إدارة سجلات حاوياتكم وفهمها بفعالية.