کتاب صوتی مفاهیم پیشرفته تابع ارزش در الگوریتم‌های MARL

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره مفاهیم پیشرفته تابع ارزش در الگوریتم‌های MARL

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: تابع ارزش (Value Function)

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چند عامله (MARL)
• 2. مفاهیم پایه عامل و محیط در MARL
• 3. فرایندهای تصمیم‌گیری مارکوف (MDP)
• 4. محدودیت‌های MDP در سیستم‌های چند عامله
• 5. مفهوم عامل هوشمند و یادگیری
• 6. یادگیری تقویتی تک عامله: Q-Learning
• 7. یادگیری تقویتی تک عامله: SARSA
• 8. یادگیری تقویتی تک عامله: Policy Gradients
• 9. مقدمه‌ای بر بازی‌ها در تئوری بازی‌ها
• 10. بازی‌های همزمان و غیرهمزمان
• 11. تعادل نش در بازی‌های همزمان
• 12. بازی‌های مجموع صفر و غیرمجموع صفر
• 13. چالش‌های هماهنگی در MARL
• 14. چالش‌های عدم قطعیت در MARL
• 15. چالش‌های تجزیه در MARL
• 16. چالش‌های مقیاس‌پذیری در MARL
• 17. مقدمه‌ای بر تابع ارزش در MARL
• 18. تابع ارزش مشترک (Joint Value Function)
• 19. تابع ارزش فردی (Individual Value Function)
• 20. تابع ارزش در بازی‌های با مجموع صفر
• 21. تابع ارزش در بازی‌های با مجموع غیرصفر
• 22. مفهوم تابع ارزش در چارچوب بازی‌های پویا
• 23. توابع ارزش تکرارشونده
• 24. توابع ارزش در محیط‌های غیر ایستا
• 25. توابع ارزش با عدم قطعیت در حالت‌ها
• 26. توابع ارزش با عدم قطعیت در پاداش‌ها
• 27. یادگیری تابع ارزش با روش‌های مبتنی بر مدل
• 28. یادگیری تابع ارزش با روش‌های بدون مدل
• 29. کاربرد شبکه‌های عصبی در تخمین تابع ارزش
• 30. شبکه‌های عصبی عمیق برای Q-Learning در MARL
• 31. شبکه‌های عصبی عمیق برای Policy Gradients در MARL
• 32. معماری‌های شبکه عصبی برای MARL
• 33. روش‌های مبتنی بر تقلید (Imitation Learning) در MARL
• 34. یادگیری از طریق مشاهده در MARL
• 35. یادگیری تقویتی مبتنی بر مدل برای تابع ارزش
• 36. یادگیری تقویتی بدون مدل برای تابع ارزش
• 37. تکنیک‌های اکتشاف در MARL
• 38. اهمیت اکتشاف برای تخمین تابع ارزش
• 39. اکتشاف مبتنی بر آنتروپی
• 40. اکتشاف مبتنی بر عدم قطعیت
• 41. اکتشاف مبتنی بر پاداش جدید
• 42. روش‌های کاهش ابعاد در MARL
• 43. تجزیه محیط در MARL
• 44. تجزیه فضای حالت در MARL
• 45. تجزیه فضای عمل در MARL
• 46. یادگیری تقویتی با عامل‌های مستقل (Independent Learners)
• 47. چالش‌های یادگیری مستقل در تخمین تابع ارزش
• 48. توابع ارزش در مدل‌های عامل‌های مستقل
• 49. روش‌های هماهنگ‌سازی عامل‌ها
• 50. یادگیری تقویتی متمرکز-غیرمتمرکز (CTDE)
• 51. معماری‌های CTDE برای تخمین تابع ارزش
• 52. مامور متمرکز برای آموزش، عامل‌های غیرمتمرکز برای اجرا
• 53. توابع ارزش در معماری‌های CTDE
• 54. روش‌های مبتنی بر تابع پاداش مشترک
• 55. طراحی تابع پاداش سازگار با تابع ارزش
• 56. توابع ارزش با پاداش‌های پراکنده
• 57. توابع ارزش با پاداش‌های تاخیری
• 58. روش‌های تخصیص پاداش در MARL
• 59. توابع ارزش با رویکرد همکاری
• 60. توابع ارزش با رویکرد رقابت
• 61. توابع ارزش در بازی‌های با همکاری-رقابت
• 62. یادگیری تقویتی برای رباتیک در MARL
• 63. کنترل گروهی ربات‌ها با MARL
• 64. یادگیری تقویتی برای سیستم‌های حمل و نقل هوشمند
• 65. بهینه‌سازی جریان ترافیک با MARL
• 66. یادگیری تقویتی برای شبکه‌های توزیع انرژی
• 67. مدیریت منابع انرژی با MARL
• 68. یادگیری تقویتی برای بازی‌های استراتژیک
• 69. تکنیک‌های پیشرفته در بازی‌های استراتژیک
• 70. یادگیری تقویتی برای عامل‌های انسان‌نما
• 71. شبیه‌سازی رفتار انسان با MARL
• 72. تکنیک‌های تجزیه ناپذیر در MARL
• 73. توابع ارزش برای عامل‌های با ادراک محدود
• 74. یادگیری تقویتی با ارتباطات بین عامل‌ها
• 75. نقش ارتباطات در یادگیری تابع ارزش
• 76. یادگیری تقویتی با حافظه بلند مدت
• 77. توابع ارزش در مدل‌های مبتنی بر حافظه
• 78. معماری‌های توجه (Attention Mechanisms) در MARL
• 79. کاربرد توجه در تخمین تابع ارزش
• 80. یادگیری تقویتی با عامل‌های غیرقابل مشاهده
• 81. تخمین تابع ارزش در حضور عامل‌های پنهان
• 82. روش‌های تشخیص عامل در MARL
• 83. یادگیری تقویتی با عامل‌های نامتقارن
• 84. توابع ارزش در بازی‌های با عامل‌های نامتقارن
• 85. روش‌های یادگیری انتقالی در MARL
• 86. انتقال دانش تابع ارزش بین وظایف
• 87. یادگیری تقویتی با محدودیت‌های امنیتی
• 88. توابع ارزش با در نظر گرفتن تهدیدات
• 89. روش‌های مقابله با حملات متخاصم در MARL
• 90. یادگیری تقویتی برای سیستم‌های توصیه‌گر
• 91. بهینه‌سازی توصیه‌ها با MARL
• 92. یادگیری تقویتی برای پردازش زبان طبیعی
• 93. تعامل ربات-انسان با MARL
• 94. یادگیری تقویتی با داده‌های واقعی
• 95. چالش‌های انتقال از شبیه‌سازی به واقعیت
• 96. توابع ارزش در محیط‌های با عدم قطعیت پویا
• 97. روش‌های پیش‌بینی رفتار عامل‌های دیگر
• 98. اهمیت تابع ارزش در پیش‌بینی بلندمدت
• 99. تحلیل حساسیت تابع ارزش به پارامترها
• 100. توابع ارزش در سیستم‌های توزیع شده