cdarlint/winutils
کاربرد:
این پروژه شامل فایل‌های اجرایی winutils.exe، hadoop.dll و hdfs.dll هست که برای اجرای Hadoop روی سیستم‌عامل ویندوز ضروری‌اند. ️
چون هادوپ به‌طور پیش‌فرض برای لینوکس طراحی شده، این فایل‌ها به توسعه‌دهندگان کمک می‌کنند تا محیط هادوپ روی ویندوز را راه‌اندازی کنند.
در چه شرایطی بهتره استفاده شود؟
وقتی که می‌خوای روی ویندوز از Hadoop یا ابزارهای مبتنی بر آن مثل Spark استفاده کنی، اما با خطاهای مربوط به winutils مواجه می‌شی، این پروژه راه‌حل مناسبیه.
همچنین برای توسعه و تست برنامه‌های بیگ دیتا در محیط ویندوز ضروریه.
چند مثال از موارد استفاده
اجرای Apache Spark با PySpark روی ویندوز بدون خطای HDFS
رفع خطای "Cannot run program winutils.exe" در محیط توسعه
تست برنامه‌های MapReduce در محیط محلی ویندوزی
استفاده از ابزارهای تحلیل داده مبتنی بر Hadoop بدون نیاز به ماشین مجازی لینوکس
- ##Hadoop
- ##Spark
- ##BigData
- ##WindowsDev
- ##DataEngineering
- ##PySpark
- ##winutils
- ##DataScience
- ##Apache
- ##DistributedComputing