پروژه big-data-mapreduce-course

mahmoudparsian/big-data-mapreduce-course

این پروژه یک دوره جامع در مورد مدل‌سازی داده‌های بزرگ، MapReduce، Spark و PySpark است که توسط دانشگاه سانتا کلارا ارائه شده است.

کاربرد:

این دوره به شما کمک می‌کنه تا با ابزارها و مفاهیم پایه‌ای پردازش داده‌های حجیم آشنا بشید و بتونید در پروژه‌های واقعی از MapReduce و Apache Spark استفاده کنید.

در چه شرایطی بهتره استفاده شود؟

اگر دانشجوی علوم داده، مهندس نرم‌افزار یا تحلیل‌گر داده هستید و می‌خواهید داده‌های بزرگ رو پردازش کنید، این دوره در شرایطی که نیاز به یادگیری توزیع‌شده پردازش داده دارید عالیه. همچنین برای کسانی که می‌خواهند وارد حوزه Big Data Engineering بشن مناسب است.

چند مثال از موارد استفاده:

پیاده‌سازی الگوریتم‌های MapReduce برای شمارش کلمات در فایل‌های حجیم

تحلیل لاگ‌های وب با استفاده از PySpark

پردازش داده‌های زمان واقعی از سنسورها با Spark Streaming

مدل‌سازی داده‌های تراکنشی برای سیستم‌های توصیه‌گر