اپلیکیشن اندرویدی فلش‌کارت آموزشی بهینه‌سازی کوئری‌های داده‌های کلان

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره بهینه‌سازی کوئری‌های داده‌های کلان

موضوع کلی: رایانش ابری و تحلیل داده‌های کلان

موضوع میانی: مقیاس‌پذیری داده‌های کلان

📋 سرفصل‌های دوره

• 1. بهینه‌سازی کوئری‌های داده‌های کلان
• 2. مقدمه‌ای بر داده‌های کلان
• 3. آشنایی با زیرساخت‌های داده‌های کلان
• 4. پردازش توزیع‌شده داده‌های کلان
• 5. مدل‌های ذخیره‌سازی داده‌های کلان: Hadoop و Spark
• 6. فرمت‌های فایل داده‌های کلان: Avro، Parquet، ORC
• 7. مفاهیم اصلی Spark SQL
• 8. نوشتن کوئری‌های Spark SQL
• 9. بهینه‌سازی کوئری‌های Spark SQL: پارتیشن‌بندی
• 10. بهینه‌سازی کوئری‌های Spark SQL: فیلتر کردن داده‌ها
• 11. بهینه‌سازی کوئری‌های Spark SQL: تبدیل داده‌ها
• 12. بهینه‌سازی کوئری‌های Spark SQL: جمع‌آوری داده‌ها
• 13. استفاده از broadcast برای بهبود عملکرد کوئری‌ها
• 14. بهینه‌سازی کوئری‌های Spark SQL: حافظه
• 15. بهینه‌سازی کوئری‌های Spark SQL: تنظیم پیکربندی
• 16. استفاده از Hive برای مدیریت داده‌های کلان
• 17. نوشتن کوئری‌های HiveQL
• 18. بهینه‌سازی کوئری‌های HiveQL: پارتیشن‌بندی
• 19. بهینه‌سازی کوئری‌های HiveQL: فیلتر کردن داده‌ها
• 20. بهینه‌سازی کوئری‌های HiveQL: تبدیل داده‌ها
• 21. بهینه‌سازی کوئری‌های HiveQL: جمع‌آوری داده‌ها
• 22. استفاده از materialized view در Hive
• 23. استفاده از cost-based optimization در Hive
• 24. مقدمه‌ای بر Impala
• 25. نوشتن کوئری‌های Impala SQL
• 26. بهینه‌سازی کوئری‌های Impala SQL: پارتیشن‌بندی
• 27. بهینه‌سازی کوئری‌های Impala SQL: فیلتر کردن داده‌ها
• 28. بهینه‌سازی کوئری‌های Impala SQL: تبدیل داده‌ها
• 29. بهینه‌سازی کوئری‌های Impala SQL: جمع‌آوری داده‌ها
• 30. استفاده از caching در Impala
• 31. نوشتن توابع تعریف‌شده توسط کاربر (UDF) در Spark SQL
• 32. نوشتن توابع تعریف‌شده توسط کاربر (UDF) در HiveQL
• 33. نوشتن توابع تعریف‌شده توسط کاربر (UDF) در Impala SQL
• 34. استفاده از vectorized execution در Spark SQL
• 35. بهینه‌سازی کوئری‌های داده‌های کلان با استفاده از Apache Arrow
• 36. استفاده از Apache Kafka برای جریان داده‌های کلان
• 37. تحلیل داده‌های جریان با استفاده از Spark Streaming
• 38. تحلیل داده‌های جریان با استفاده از Flink
• 39. نظارت بر عملکرد کوئری‌های داده‌های کلان
• 40. عیب‌یابی کوئری‌های داده‌های کلان
• 41. استفاده از ابزارهای پروفایلینگ کوئری‌ها
• 42. بهینه‌سازی کوئری‌های داده‌های کلان در محیط ابری