کتاب مهندسی داده: جمع‌آوری و آماده‌سازی با فرمت AZW3 برای کتابخوان کیندل و فرمت EPUB

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره مهندسی داده: جمع‌آوری و آماده‌سازی

موضوع کلی: فناوری اطلاعات و علوم داده

موضوع میانی: Data Science Development Lifecycle Programs

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر مهندسی داده و نقش آن
• 2. منابع داده: انواع و ویژگی‌ها
• 3. طراحی پایگاه داده رابطه‌ای
• 4. زبان SQL: اصول و دستورات پایه
• 5. SQL: پرس و جوهای پیچیده و توابع
• 6. مفاهیم انبار داده و Data Mart
• 7. ETL: فرایند استخراج، تبدیل و بارگذاری
• 8. ابزارهای ETL متن‌باز و تجاری
• 9. پاکسازی و اعتبارسنجی داده‌ها
• 10. استانداردسازی و نرمال‌سازی داده‌ها
• 11. مدل‌سازی ابعاد: شمای ستاره‌ای و دانه‌ای
• 12. Data Profiling و تحلیل کیفیت داده
• 13. کار با داده‌های نیمه‌ساختار یافته (JSON, XML)
• 14. مقدمه‌ای بر NoSQL و انواع پایگاه داده NoSQL
• 15. پایگاه داده‌های کلید-مقدار
• 16. پایگاه داده‌های Document-Oriented
• 17. پایگاه داده‌های Column-Family
• 18. پایگاه داده‌های Graph
• 19. Apache Hadoop: معماری و اجزا
• 20. Hadoop Distributed File System (HDFS)
• 21. MapReduce: الگوریتم پردازش داده‌های توزیع‌شده
• 22. Apache Spark: معرفی و مزایا
• 23. Spark SQL: پردازش داده با SQL در Spark
• 24. Apache Kafka: مدیریت جریان داده
• 25. Apache Airflow: مدیریت گردش کار داده
• 26. Data Lake: معماری و کاربردها
• 27. Cloud Data Warehousing: Amazon Redshift, Google BigQuery, Azure Synapse
• 28. امنیت داده در فرآیند مهندسی داده
• 29. Data Governance و مدیریت متادیتا
• 30. Data Catalog: کشف و درک داده‌ها
• 31. Data Lineage: ردیابی جریان داده
• 32. Data Masking و Anonymization
• 33. مفاهیم DataOps و CI/CD برای داده
• 34. بهینه‌سازی عملکرد ETL
• 35. مانیتورینگ و Logging در فرآیند مهندسی داده
• 36. کار با داده‌های بزرگ حجیم (Big Data)
• 37. پردازش Real-time و Stream Processing
• 38. مقدمه‌ای بر یادگیری ماشین و نقش مهندسی داده
• 39. انتخاب ابزار مناسب برای مهندسی داده
• 40. مطالعه موردی: پیاده‌سازی یک خط لوله داده
• 41. آینده مهندسی داده و فناوری‌های نوظهور
• 42. روش‌های مستندسازی فرآیند مهندسی داده
• 43. تست و اطمینان از کیفیت داده در ETL
• 44. مقایسه ابزارهای ETL: Talend, Informatica, Pentaho