childe/gohangout
این ابزار یک جایگزین سبک‌تر و سریع‌تر برای Logstash است که با زبان Go نوشته شده و برای پردازش جریان داده‌ها از Kafka و ارسال آن‌ها به مقاصدی مثل Elasticsearch و ClickHouse طراحی شده.
کاربرد:
این ابزار برای گردآوری، تبدیل و انتقال داده‌های لاگ در مقیاس بزرگ استفاده می‌شه. مناسب محیط‌هایی که نیاز به کارایی بالا و مصرف منابع کم دارن.
در چه شرایطی بهتره استفاده شود؟
وقتی که می‌خوای بدون سنگینی Logstash، داده‌های Kafka رو به سرعت پردازش و ذخیره کنی. به‌ویژه در سیستم‌هایی که از Go به عنوان زبان اصلی استفاده می‌کنن یا به کاهش تأخیر پردازش داده نیاز دارن.
چند مثال از موارد استفاده:
جمع‌آوری لاگ‌های سرورها و ارسال به Elasticsearch برای نمایش در Kibana
ذخیره‌سازی داده‌های رویداد (event) در ClickHouse برای تحلیل‌های تیزهوشی (BI)
تبدیل فرمت داده‌ها (مثل JSON parsing) در حین جریان از Kafka به مقصد نهایی
استفاده در پایپلاین‌های مانیتورینگ و نظارت بر عملکرد سیستم‌ها
- ##data
- ##log
- ##golang
- ##kafka
- ##elasticsearch
- ##clickhouse
- ##stream
- ##monitoring
- ##devops
- ##high