فلش‌کارت‌های آموزشی مهندسی داده برای ذخیره‌سازی داده‌های سیستمی در مقیاس بزرگ

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره مهندسی داده برای ذخیره‌سازی داده‌های سیستمی در مقیاس بزرگ

موضوع کلی: آموزش پایگاه داده

موضوع میانی: پایگاه داده و داده‌های مربوط به سیستم (System Data)

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر داده‌های سیستمی و چالش‌های ذخیره‌سازی مقیاس‌پذیر
• 2. معماری کلی سیستم‌های تولید داده سیستمی
• 3. شناخت انواع داده‌های سیستمی: لاگ‌ها، متریک‌ها، رویدادها و تله‌متری
• 4. انتخاب پایگاه داده مناسب برای داده‌های سیستمی: معیارهای کلیدی
• 5. پایگاه‌داده‌های سری زمانی (Time-Series Databases): معرفی و کاربردها
• 6. InFluxDB: نصب، پیکربندی و مفاهیم پایه
• 7. Prometheus: معماری، جمع‌آوری و ذخیره‌سازی داده‌ها
• 8. Grafana: تجسم داده‌های سری زمانی و داشبوردهای پویا
• 9. Apache Kafka: انتقال داده‌های جریانی (Streaming)
• 10. Apache Flume: جمع‌آوری، تجمیع و انتقال لاگ‌ها
• 11. Apache NiFi: مدیریت جریان داده و اتوماسیون
• 12. Hadoop و HDFS: ذخیره‌سازی و پردازش داده‌های حجیم
• 13. Apache Spark: پردازش توزیع‌شده داده‌های سیستمی
• 14. ClickHouse: پایگاه داده ستونی برای تحلیل داده‌های بلادرنگ
• 15. Elasticsearch: جستجو و تحلیل لاگ‌ها و داده‌های متنی
• 16. Logstash: جمع‌آوری، پردازش و ارسال لاگ‌ها به Elasticsearch
• 17. Kibana: تجسم داده‌ها در Elasticsearch
• 18. مدل‌سازی داده‌های سیستمی: طراحی Schema بهینه
• 19. بهینه‌سازی کوئری‌ها برای داده‌های سیستمی
• 20. مقیاس‌پذیری افقی و عمودی در پایگاه‌داده‌های سیستمی
• 21. مانیتورینگ و هشداردهی در سیستم‌های ذخیره‌سازی داده سیستمی
• 22. امنیت داده‌های سیستمی: احراز هویت، مجوزها و رمزنگاری
• 23. Data Lifecycle Management در سیستم‌های داده سیستمی
• 24. استفاده از Cloud Services برای ذخیره‌سازی داده‌های سیستمی (AWS, Azure, GCP)
• 25. پیاده‌سازی Data Lake برای داده‌های سیستمی
• 26. Data Governance و Quality در داده‌های سیستمی
• 27. استفاده از Kubernetes برای مدیریت و مقیاس‌بندی سیستم‌های داده سیستمی
• 28. Data compression تکنیک‌های فشرده‌سازی داده‌های سیستمی
• 29. Data partitioning و sharding در پایگاه‌داده‌های سیستمی
• 30. محاسبه‌ی SLO، SLI و SLA برای داده‌های سیستمی
• 31. آشنایی با OpenTelemetry برای جمع‌آوری تله‌متری