کتاب صوتی مقدمه‌ای بر یادگیری تقویتی چندعامله در شبکه‌های هوشمند

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره مقدمه‌ای بر یادگیری تقویتی چندعامله در شبکه‌های هوشمند

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای بهینه‌سازی سیستم‌های مدیریت انرژی در شبکه‌های توزیع هوشمند با قابلیت مدیریت منابع پراکنده

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چندعامله
• 2. مفاهیم پایه یادگیری تقویتی
• 3. عناصر اصلی محیط یادگیری تقویتی
• 4. فضای حالت و فضای عمل
• 5. تابع پاداش و تابع ارزش
• 6. مدل‌های مارکوف تصمیم‌گیری (MDP)
• 7. تعریف فرایندهای تصمیم‌گیری مارکوف
• 8. معادلات بلِمان
• 9. روش‌های مبتنی بر ارزش
• 10. یادگیری Q
• 11. یادگیری SARSA
• 12. روش‌های مبتنی بر سیاست
• 13. سیاست‌های گرادیان
• 14. روش‌های ترکیبی (Actor-Critic)
• 15. یادگیری تقویتی عمیق (Deep RL)
• 16. شبکه‌های عصبی عمیق در RL
• 17. یادگیری Q عمیق (DQN)
• 18. شبکه‌های عصبی کانولوشنال در RL
• 19. شبکه‌های عصبی بازگشتی در RL
• 20. یادگیری تقویتی چندعامله (MARL)
• 21. مفاهیم پایه MARL
• 22. تعاریف عوامل و محیط مشترک
• 23. فضای حالت مشترک و فضای عمل مشترک
• 24. چالش‌های MARL
• 25. عدم ایستایی محیطی
• 26. عدم قطعیت در تعاملات
• 27. ظهور رفتارهای هماهنگ
• 28. مدل‌های مفهومی MARL
• 29. مدل‌های متمرکز
• 30. مدل‌های غیرمتمرکز
• 31. مدل‌های ترکیبی
• 32. رویکردهای یادگیری در MARL
• 33. یادگیری مستقل
• 34. یادگیری همکارانه
• 35. یادگیری رقابتی
• 36. یادگیری ترکیبی
• 37. الگوریتم‌های MARL
• 38. مروری بر الگوریتم‌های کلاسیک MARL
• 39. الگوریتم‌های مبتنی بر ارزش در MARL
• 40. الگوریتم‌های مبتنی بر سیاست در MARL
• 41. الگوریتم‌های Actor-Critic در MARL
• 42. یادگیری Q تیمی (QMIX)
• 43. اتصال شبکه‌های عصبی در QMIX
• 44. یادگیری تقویتی مبتنی بر عامل (MADDPG)
• 45. بهینه‌سازی سیاست در محیط‌های چندعامله
• 46. یادگیری تقویتی مبتنی بر عامل در شبکه‌های هوشمند
• 47. کاربرد MARL در شبکه‌های توزیع‌شده
• 48. کاربرد MARL در مدیریت منابع انرژی
• 49. کاربرد MARL در کنترل ترافیک هوشمند
• 50. کاربرد MARL در سیستم‌های رباتیک
• 51. کاربرد MARL در شبکه‌های مخابراتی
• 52. کاربرد MARL در سیستم‌های توصیه‌گر
• 53. کاربرد MARL در بهینه‌سازی شبکه‌های حسگر بی‌سیم
• 54. کاربرد MARL در مدیریت داده در شبکه‌های هوشمند
• 55. کاربرد MARL در تشخیص ناهنجاری در شبکه‌های هوشمند
• 56. کاربرد MARL در شبکه‌های برق هوشمند
• 57. کاربرد MARL در بهینه‌سازی مصرف انرژی
• 58. کاربرد MARL در پیش‌بینی بار شبکه
• 59. کاربرد MARL در مدیریت ذخیره‌سازی انرژی
• 60. کاربرد MARL در پاسخگویی سمت تقاضا
• 61. کاربرد MARL در شبکه‌های حمل‌ونقل هوشمند
• 62. کاربرد MARL در بهینه‌سازی جریان ترافیک
• 63. کاربرد MARL در هماهنگی وسایل نقلیه خودران
• 64. کاربرد MARL در مدیریت پارکینگ هوشمند
• 65. کاربرد MARL در بهینه‌سازی مسیر حمل‌ونقل عمومی
• 66. کاربرد MARL در شبکه‌های ارتباطی هوشمند
• 67. کاربرد MARL در تخصیص پهنای باند
• 68. کاربرد MARL در مسیریابی داده
• 69. کاربرد MARL در مدیریت کیفیت خدمات (QoS)
• 70. کاربرد MARL در امنیت شبکه‌های هوشمند
• 71. کاربرد MARL در تشخیص حملات سایبری
• 72. کاربرد MARL در دفاع تطبیقی شبکه
• 73. کاربرد MARL در مدیریت منابع محاسباتی ابری
• 74. کاربرد MARL در بهینه‌سازی استقرار سرویس
• 75. کاربرد MARL در مدیریت منابع در محاسبات لبه
• 76. کاربرد MARL در سیستم‌های روباتیک توزیع‌شده
• 77. کاربرد MARL در کنترل گروهی ربات‌ها
• 78. کاربرد MARL در ناوبری ربات‌های خودمختار
• 79. کاربرد MARL در وظایف مشترک ربات‌ها
• 80. ارزیابی عملکرد الگوریتم‌های MARL
• 81. معیارهای ارزیابی در MARL
• 82. شبیه‌سازی محیط‌های MARL
• 83. پیاده‌سازی الگوریتم‌های MARL
• 84. چالش‌های عملیاتی MARL در شبکه‌های هوشمند
• 85. مسائل اخلاقی و امنیتی در MARL
• 86. آینده پژوهش در MARL
• 87. کاربردهای پیشرفته MARL
• 88. یادگیری تقویتی با پاداش‌های اجتماعی
• 89. یادگیری تقویتی با پاداش‌های ضمنی
• 90. یادگیری تقویتی با پاداش‌های ترکیبی
• 91. یادگیری تقویتی عمیق چندعامله (Deep MARL)
• 92. یادگیری تقویتی با یادگیری از طریق مشاهده
• 93. یادگیری تقویتی با یادگیری از طریق توضیح
• 94. یادگیری تقویتی با یادگیری از طریق تقلید
• 95. یادگیری تقویتی با رویکردهای توزیع‌شده و فدرال
• 96. یادگیری تقویتی با شبکه‌های عصبی گراف (GNN) در MARL
• 97. یادگیری تقویتی با یادگیری انتقال (Transfer Learning) در MARL
• 98. یادگیری تقویتی با یادگیری تقویتی از طریق بازی (Game Theory)
• 99. یادگیری تقویتی با رویکردهای مبتنی بر عامل و عامل-محیط