کتاب صوتی جمع‌آوری و پردازش لاگ با Kafka

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره جمع‌آوری و پردازش لاگ با Kafka

موضوع کلی: توسعه نرم‌افزار و مهندسی سیستم‌های تحت شبکه

موضوع میانی: مانیتورینگ و لاگینگ سیستم‌های توزیع شده

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر سیستم‌های توزیع‌شده
• 2. آشنایی با معماری رویدادمحور
• 3. Kafka: بررسی اجمالی و مفاهیم کلیدی
• 4. نصب و راه‌اندازی Kafka
• 5. مفاهیم Topic و Partition در Kafka
• 6. تولیدکنندگان (Producers) در Kafka: پیکربندی و استفاده
• 7. مشتریان (Consumers) در Kafka: گروه‌ها و آفست‌ها
• 8. مدیریت آفست در Kafka
• 9. تضمین تحویل پیام در Kafka
• 10. Kafka Connect: یکپارچه‌سازی با منابع داده
• 11. Kafka Streams: پردازش جریان داده
• 12. پایپ‌لاین‌های پردازش داده با Kafka Streams
• 13. تبدیل و فیلتر کردن داده با Kafka Streams
• 14. تحلیل پنجره‌ای (Windowing) در Kafka Streams
• 15. جوینینگ (Joining) جریان‌ها در Kafka Streams
• 16. امنیت در Kafka: احراز هویت و مجوز
• 17. مانیتورینگ و عیب‌یابی Kafka
• 18. مقیاس‌پذیری Kafka: افزایش ظرفیت
• 19. Kafka و Cloud: استقرار در محیط ابری
• 20. Kafka و Docker: کانتینری‌سازی Kafka
• 21. آشنایی با Zookeeper و نقش آن در Kafka
• 22. مدیریت Zookeeper برای Kafka
• 23. بهینه‌سازی عملکرد Kafka
• 24. پیکربندی و تنظیم پارامترهای Kafka
• 25. مدیریت منابع Kafka: CPU، حافظه و دیسک
• 26. Kafka و فرمت‌های داده: JSON، Avro، Protocol Buffers
• 27. Avro در Kafka: شماتیک و سریال‌سازی داده
• 28. Protocol Buffers در Kafka: مزایا و معایب
• 29. مفاهیم پارتیشن‌بندی داده برای عملکرد بهتر
• 30. تکنیک‌های پارتیشن‌بندی مناسب
• 31. استفاده از کلیدهای پارتیشن‌بندی
• 32. طراحی یک پارتیشن‌بندی مؤثر
• 33. بررسی سناریوهای مختلف پارتیشن‌بندی
• 34. انتخاب استراتژی پارتیشن‌بندی
• 35. بررسی و تحلیل لاگ‌های Kafka
• 36. ابزارهای مانیتورینگ Kafka
• 37. استفاده از داشبوردهای مانیتورینگ Kafka
• 38. عیب‌یابی مشکلات رایج Kafka
• 39. بهینه‌سازی مصرف‌کننده‌ها برای عملکرد بهتر
• 40. بهینه‌سازی تولیدکننده‌ها برای عملکرد بهتر
• 41. استفاده از فشرده‌سازی داده در Kafka
• 42. تست و ارزیابی عملکرد Kafka
• 43. سناریوهای کاربردی Kafka در صنعت
• 44. Kafka برای جمع‌آوری لاگ‌های وب
• 45. Kafka برای سیستم‌های توصیه گر