اپلیکیشنهای وان پلتفرم
ELK Stack
ELK Stack چیست؟
ELK Stack نام شناختهشدهٔ ترکیب Elasticsearch، Logstash و Kibana است. این سه جزء بهترتیب در ذخیره و جستوجو، دریافت و تبدیل، و نمایش و بررسی داده نقش دارند. هدف معمول، جمع کردن رویدادهای پراکنده در محیطی است که تیم بتواند هنگام بررسی مشکل، اطلاعات مرتبط را پیدا کند. ابزارهای دریافت دیگری هم ممکن است در معماری واقعی به این مجموعه اضافه شوند.
راهاندازی ELK یعنی طراحی یک مسیر کامل، نه صرفاً روشن کردن سه برنامه. لاگ باید از منبع درست برسد، معنای فیلدها حفظ شود و در پنل قابل مشاهده باشد. علاوه بر آن، مدت نگهداری، دسترسی تیمها و رفتار هنگام قطع ارتباط باید مشخص شوند. نقص در هر مرحله میتواند گزارش نهایی را ناقص کند.
چه مشکلی را برای تیم حل میکند؟
وقتی چند سرور و برنامه دارید، پیدا کردن خطای یک درخواست در فایلهای جدا زمانبر میشود. لاگ متمرکز کمک میکند رویدادها بر اساس زمان، سرویس یا شناسهٔ درخواست کنار هم بررسی شوند. این کاربرد برای تیم پشتیبانی و عملیات زمانی مفید است که تولیدکنندگان لاگ فیلدهای کافی و قابل اعتماد ثبت کنند.
برای مثال، کاربر از شکست یک عملیات در زمان مشخص خبر میدهد. تیم باید بتواند درخواست را پیدا کند، سرویسهای درگیر را بشناسد و تفاوت خطای اصلی با پیامهای بعدی را ببیند. اگر فقط متن کلی «خطا رخ داد» ثبت شده باشد، قویترین سرور هم اطلاعاتی را که تولید نشده ایجاد نمیکند.
نقش اجزا و مرزهای آنها
در طراحی معمول، Logstash دادهٔ دریافتی را مطابق قواعد تبدیل میکند و به مقصد میفرستد. Elasticsearch آن را برای جستوجو آماده میکند و Kibana محیط مشاهده را فراهم میسازد. مشخص کردن نقشها کمک میکند هنگام اختلال بدانید مشکل دریافت، ثبت یا نمایش است و از تغییر تصادفی همهٔ بخشها جلوگیری شود.
لازم نیست همهٔ منابع دقیقاً از یک مسیر عبور کنند. انتخاب مسیر دریافت باید با قابلیت منبع و نیاز پردازش هماهنگ باشد. اما تفاوت مسیر نباید به تفاوت معنای فیلدهای مشترک منجر شود. نام سرویس، محیط و زمان باید در کل سامانه تعریف یکسان داشته باشند تا تحلیل بین چند برنامه معتبر بماند.
شروع با چند منبع نماینده
بهتر است ورود اولیه با چند منبع متفاوت انجام شود: یک وبسرور، یک برنامه و یک کار پسزمینه. برای هرکدام پیام عادی، خطا و حالت غیرمعمول داشته باشید. این نمونهها نشان میدهند قواعد دریافت و نمایش واقعاً نیاز را پوشش میدهند یا فقط با یک قالب ساده کار میکنند.
پس از تأیید، منابع بعدی را مرحلهای اضافه کنید و اثر آنها بر حجم و کیفیت داده را بسنجید. ورود ناگهانی همهٔ سرویسها میتواند پیدا کردن علت خطا را سخت کند. فهرست منابع، مالک و زمان آخرین دریافت را نگه دارید. منبعی که بیصدا قطع شده نباید ماهها از دید تیم پنهان بماند.
ظرفیت ذخیرهسازی و مدت نگهداری
حجم روزانهٔ ورودی، مدت نگهداری و تعداد نسخههای داده از معیارهای اصلیاند. حجم فایل اولیه لزوماً با حجم نهایی ایندکس برابر نیست. برای رشد، عملیات نگهداری و زمان اختلال هم فضای کافی لازم است. نزدیک شدن به سقف دیسک باید زودتر دیده شود، نه زمانی که ورود داده متوقف شده است.
همهٔ رویدادها ارزش نگهداری یکسان ندارند. جزئیات پرحجم عیبیابی ممکن است دورهٔ کوتاهتری بخواهند و بعضی دادههای عملیاتی دیرتر حذف شوند. سیاست را با نیاز واقعی تیم تنظیم کنید. نگهداری نامحدود بدون دلیل، هزینه و پیچیدگی دسترسی را بالا میبرد و پیدا کردن دادهٔ مهم را لزوماً سادهتر نمیکند.
انتخاب یک سرور یا چند سرور
برای آزمون اولیه میتوان اجزا را در محیط محدود قرار داد، اما منابع مشترک باید دیده شوند. پردازش ورودی و جستوجوی سنگین ممکن است همزمان به حافظه و دیسک فشار بیاورند. اگر بار پایدار زیاد است، مشخصات سرور اختصاصی را با حجم واقعی و هدف تحمل خرابی مقایسه کنید.
چند جزء روی یک ماشین، در برابر خرابی آن ماشین استقلال ندارند. در طراحی چند میزبان نیز باید محل داده، شبکه و نقش هر بخش مشخص باشد. افزونگی فقط تعداد فرایند نیست. آزمایش باید نشان دهد با از دست رفتن جزء موردنظر، دریافت، جستوجو و نمایش چه وضعیتی پیدا میکنند و بازگشت چقدر زمان میبرد.
داشبورد و هشدار قابل اقدام
داشبورد اولیه بهتر است پاسخ چند سوال مشخص را بدهد: کدام سرویس خطا دارد، از چه زمانی و با چه شدتی؟ تعداد زیاد نمودار بدون تعریف واحد و بازهٔ درست ممکن است گمراهکننده باشد. برای هر شاخص، معنای شمارش و منبع آن را مشخص کنید و با یک نمونهٔ واقعی تطبیق دهید.
هر هشدار هم به مسئول و اقدام اولیه نیاز دارد. اگر تیم فقط پیام دریافت کند اما نداند چه چیزی را بررسی کند، اعلان به مرور نادیده گرفته میشود. قابلیتهای هشدار و کنترل دسترسی را با نسخه و شرایط ارائه تطبیق دهید. وعدهٔ امکانات یک بستهٔ خاص را نباید به هر نصب پایه تعمیم داد.
حریم داده و بازیابی
اطلاعات حساس را بیدلیل وارد لاگ نکنید و دسترسی تیمها را بر اساس وظیفه محدود کنید. دادهای که برای توسعه مفید است ممکن است برای همهٔ کاربران پنل مناسب نباشد. کنترل دسترسی باید روی مسیر واقعی داده اعمال شود، نه فقط با مخفی کردن یک داشبورد از منو.
بکاپ باید دادهٔ لازم و تنظیمات دریافت و نمایش را پوشش دهد. بازگرداندن بخشی از مجموعه ممکن است سرویس کامل را برنگرداند. یک سناریوی بازیابی در محیط جدا اجرا کنید و زمان آن را ثبت کنید. مشخص کنید در فاصلهٔ توقف، منابع داده را نگه میدارند یا بخشی از رویدادها قابل جبران نخواهد بود.
درخواست نصب ELK Stack
برای وان پلتفرم، تعداد منابع، حجم روزانه و مدت نگهداری را اعلام کنید. از دکمهٔ نصب و استفاده وارد ناحیهٔ کاربری شوید. نصب اجزا، نوشتن قواعد اختصاصی و طراحی داشبورد باید محدودهٔ مشخص داشته باشند. معیار تحویل را از ارسال رویداد نمونه تا مشاهدهٔ درست آن در پنل تعریف کنید.
سوالات متداول
آیا ELK یک برنامهٔ واحد است؟
خیر. نام یک مجموعه است و اجزای آن نقشها و نیازهای عملیاتی متفاوت دارند.
آیا برای شروع حتماً چند سرور لازم است؟
به بار و هدف تحمل خرابی بستگی دارد. محیط آزمایشی و سرویس عملیاتی الزاماً طراحی یکسان ندارند.
آیا ELK جای بکاپ برنامه را میگیرد؟
خیر. لاگ برای بررسی رویداد است و نسخهٔ پشتیبان اطلاعات اصلی نقش جدا دارد.
آیا دریافت لاگ بهتنهایی کافی است؟
خیر. کامل بودن، نوع فیلد، زمان و امکان جستوجو باید از ابتدا تا انتهای مسیر بررسی شوند.
زیرساخت مناسب برای راهاندازی را انتخاب کنید
پلنها و منابع سرور را متناسب با نیاز نرمافزار و پروژهٔ خود مقایسه کنید.