وب‌سرویس مجید

پروژه hdfs-shell

avast/hdfs-shell

این ابزار یک شِل برای کار با HDFS (سیستم فایل توزیع‌شده هادوپ) است که امکان مدیریت و دستکاری داده‌ها روی HDFS رو با دستورات ساده فراهم می‌کنه. ️

کاربرد:

این ابزار به تو اجازه می‌ده تا بدون نیاز به دستورات پیچیده هادوپ، به راحتی فایل‌ها و دایرکتوری‌های HDFS رو ببینی، انتقال بدی، حذف کنی، بارگذاری و دانلود کنی و عملیات‌های روزمره رو انجام بدی.

در چه شرایطی بهتره استفاده شود؟

وقتی که تو محیط توسعه یا عملیاتی هادوپ کار می‌کنی و می‌خوای به صورت تعاملی و سریع با HDFS کار کنی، این ابزار خیلی مفیده. مخصوصاً وقتی دستورات hadoop fs برات گنگ یا زمان‌بره، این شِل تجربه کاربری بهتری ارائه می‌ده.

چند مثال از موارد استفاده:

لیست کردن فایل‌های داخل یک مسیر خاص در HDFS

آپلود و دانلود فایل‌ها بین سیستم محلی و HDFS

حذف یا تغییر نام فایل‌ها و پوشه‌ها

اجرای دستورات به صورت دسته‌ای (batch)

بررسی سلامت و ساختار دایرکتوری‌ها در HDFS

  • ##HDFS
  • ##Hadoop
  • ##DataEngineering
  • ##BigData
  • ##ShellTool
  • ##DataManagement
  • ##Avast
  • ##CLI
  • ##DistributedStorage
  • ##Filesystem