godaai/scale-py-zh
این پروژه یک راهنمای عملی برای مقیاس‌دهی محاسبات در علم داده با پایتون است و ابزارهایی مثل Dask، Ray، Xorbits و mpi4py را پوشش می‌دهد.
کاربرد:
این پروژه به تو کمک می‌کنه تا پردازش داده‌های حجیم رو با استفاده از محاسبات موازی و توزیع‌شده در محیط پایتون سریع‌تر انجام بدی.
در چه شرایطی بهتره استفاده شود؟
وقتی با داده‌هایی کار می‌کنی که از حافظه RAM بیشترن، یا زمان اجرای کد خیلی طولانیه، استفاده از این ابزارها می‌تونه انقلابی در عملکرد ایجاد کنه. همچنین برای پردازش داده در محیط‌های کلاستر یا ابری مناسبه. ️
چند مثال از موارد استفاده:
- پردازش داده‌های تاریخچه‌ای بورس با Dask
- آموزش مدل‌های یادگیری ماشین توزیع‌شده با Ray
- تحلیل داده‌های بزرگ شبیه‌سازی علمی با Xorbits
- استفاده از mpi4py برای محاسبات علمی موازی در HPC
- ##DataScience
- ##Python
- ##Dask
- ##Ray
- ##Xorbits
- ##mpi4py
- ##ParallelComputing
- ##DistributedComputing
- ##BigData
- ##HPC