BauplanLabs/quack-reduce
این یک محیط آزمایشی برای اجرای DuckDB به عنوان موتور پرسوجوی بدون حالت (stateless) روی یک دریاچه داده (data lake) است.
کاربرد:
این ابزار به تو اجازه میده تا بدون نیاز به زیرساخت پیچیده، پرسوجوهای قدرتمند روی دادههای خام (مثل فایلهای CSV، Parquet و غیره) در فضای ذخیرهسازی ابری اجرا کنی. مناسب تحلیلهای سریع و بدون نیاز به بارگذاری داده در دیتابیس.
در چه شرایطی بهتره استفاده شود؟
وقتی دادههات در فضای ابری (مثل S3 یا GCS) ذخیره شدن و میخوای بدون ساخت دیتابیس یا ETL، مستقیماً رویشون query اجرا کنی. همچنین برای توسعهدهندگانی که میخوان DuckDB رو در محیطهای بدون سرور تست کنند عالیه. ️
چند مثال از موارد استفاده:
- تحلیل لگهای سرور از فایلهای فشرده در S3
- جمعآوری آمار از دادههای Parquet بدون بارگذاری در دیتابیس
- اجرای پرسوجوهای تحقیقاتی روی دادههای تاریخی در GCS
- تست queryهای پیچیده قبل از رفتن به محیط تولید
- ##data
- ##DuckDB
- ##serverless
- ##query
- ##cloud
- ##big
- ##data
- ##open
- ##BauplanLabs
- ##quack