immu0001/Udacity-Data-Engineer-nanodegree
این پروژه شامل کارهای عملی و تمرین‌های انجام‌شده در دورهٔ نانودیگری دیتا انجینیری از Udacity است.
کاربرد:
این مجموعه به عنوان نمونه‌کار عملی از مهارت‌های یک مهندس داده، از جمله طراحی Data Pipeline، کار با ETL، استفاده از AWS، Spark و Redshift به کار می‌رود.
در چه شرایطی بهتره استفاده شود؟
اگر دنبال یادگیری مهارت‌های واقعی در حوزهٔ مهندسی داده هستی یا می‌خوای نمونه‌کار قوی برای رزومه داشته باشی، این پروژه می‌تونه الگوی خوبی باشه.
چند مثال از موارد استفاده:
- یادگیری نحوهٔ ساخت یک Data Warehouse با استفاده از Star Schema
- پیاده‌سازی فرآیند ETL با Python و Apache Spark
- بارگذاری داده‌ها در AWS Redshift و بهینه‌سازی آن‌ها با distkey و sortkey
- کار با داده‌های واقعی مثل Song Logs و User Activity در پلتفرم‌های دیجیتال
- ##DataEngineering
- ##ETL
- ##AWS
- ##Redshift
- ##Spark
- ##DataPipeline
- ##Udacity
- ##Python
- ##DataWarehouse
- ##BigData