کتاب صوتی راهنمای عملی MARL برای مهندسان رباتیک

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره راهنمای عملی MARL برای مهندسان رباتیک

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای کنترل ربات‌های صنعتی برای انجام عملیات مونتاژ قطعات با نیاز به انعطاف‌پذیری بالا

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چند عاملی (MARL)
• 2. مفاهیم پایه یادگیری تقویتی (RL)
• 3. عامل، محیط، پاداش در RL
• 4. حالات، اعمال، سیاست‌ها در RL
• 5. تابع ارزش و تابع Q
• 6. یادگیری آفلاین و آنلاین
• 7. یادگیری مبتنی بر مدل و بدون مدل
• 8. الگوریتم‌های پایه RL: Q-Learning
• 9. الگوریتم‌های پایه RL: SARSA
• 10. الگوریتم‌های پایه RL: Policy Gradients
• 11. معرفی محیط‌های چند عاملی
• 12. چالش‌های اصلی در MARL
• 13. عدم قطعیت در محیط‌های چند عاملی
• 14. تعامل بین عامل‌ها
• 15. استانداردهای بازی‌های ساده چند عاملی (مانند PPO, MADDPG)
• 16. محیط‌های شبیه‌سازی شده برای MARL
• 17. فریم‌ورک‌های پیاده‌سازی MARL (مانند PettingZoo)
• 18. مفاهیم همکاری و رقابت در MARL
• 19. بازی‌های مجموع صفر و مجموع غیرصفر
• 20. مدل‌سازی عامل‌های دیگر
• 21. یادگیری هماهنگ در MARL
• 22. یادگیری از طریق مشاهده (Imitation Learning) در MARL
• 23. یادگیری تقویتی عمیق (Deep RL)
• 24. شبکه‌های عصبی کانولوشنی (CNN) در RL
• 25. شبکه‌های عصبی بازگشتی (RNN) در RL
• 26. معماری‌های Actor-Critic
• 27. الگوریتم Deep Q-Network (DQN)
• 28. الگوریتم Double DQN
• 29. الگوریتم Dueling DQN
• 30. الگوریتم Proximal Policy Optimization (PPO)
• 31. الگوریتم Asynchronous Advantage Actor-Critic (A3C)
• 32. الگوریتم Multi-Agent Deep Deterministic Policy Gradient (MADDPG)
• 33. الگوریتم Counterfactual Multi-Agent Policy Gradients (COMA)
• 34. یادگیری تقویتی در رباتیک
• 35. کنترل ربات با استفاده از MARL
• 36. ناوبری ربات در محیط‌های پویا
• 37. تشکیل گروه ربات‌ها (Robot Swarming)
• 38. هماهنگی ربات‌ها برای وظایف مشترک
• 39. یادگیری رفتار ربات از طریق تعامل
• 40. کاربرد MARL در ربات‌های صنعتی
• 41. کاربرد MARL در ربات‌های خودمختار
• 42. کاربرد MARL در ربات‌های پرنده (پهپادها)
• 43. کاربرد MARL در ربات‌های زیرآبی
• 44. کاربرد MARL در ربات‌های خانگی
• 45. یادگیری تقویتی برای کنترل کیفیت در تولید
• 46. مدیریت منابع در سیستم‌های رباتیک با MARL
• 47. بهینه‌سازی مسیر ربات‌ها با استفاده از MARL
• 48. یادگیری استراتژی‌های همکاری بین ربات‌ها
• 49. یادگیری استراتژی‌های رقابتی بین ربات‌ها
• 50. ارزیابی عملکرد عامل‌های MARL
• 51. معیارهای ارزیابی در MARL
• 52. شبیه‌سازی و آزمایش میدانی ربات‌ها
• 53. روش‌های گردآوری داده در MARL
• 54. بررسی حساسیت پارامترها در مدل‌های MARL
• 55. تفسیرپذیری مدل‌های MARL
• 56. اخلاق در کاربرد MARL برای رباتیک
• 57. مسئولیت‌پذیری در سیستم‌های خودمختار
• 58. حفظ حریم خصوصی در سیستم‌های رباتیک
• 59. امنیت در سیستم‌های رباتیک مبتنی بر MARL
• 60. تطبیق‌پذیری عامل‌ها با تغییرات محیطی
• 61. یادگیری مستمر (Continual Learning) در MARL
• 62. انتقال یادگیری (Transfer Learning) در MARL
• 63. یادگیری تقویتی با پاداش‌های پراکنده
• 64. یادگیری تقویتی با پاداش‌های ضمنی
• 65. یادگیری تقویتی با یادگیری مشاهده‌ای
• 66. یادگیری تقویتی با یادگیری از طریق بازخورد انسانی
• 67. مدل‌سازی عدم قطعیت در عامل‌های دیگر
• 68. استراتژی‌های مقابله با پایداری (Robustness) در MARL
• 69. استراتژی‌های مقابله با ناپایداری (Instability) در MARL
• 70. کاربرد MARL در سیستم‌های توزیع شده
• 71. یادگیری تقویتی برای مدیریت ترافیک رباتیک
• 72. یادگیری تقویتی برای بهینه‌سازی مصرف انرژی ربات‌ها
• 73. یادگیری تقویتی برای تشخیص عیب در ربات‌ها
• 74. یادگیری تقویتی برای تعمیر و نگهداری ربات‌ها
• 75. یادگیری تقویتی در محیط‌های شبیه‌سازی شده پیشرفته
• 76. یادگیری تقویتی در محیط‌های واقعی و فیزیکی
• 77. چالش‌های پیاده‌سازی MARL در مقیاس بزرگ
• 78. روش‌های مقیاس‌پذیری در MARL
• 79. یادگیری تقویتی برای هماهنگی ربات‌ها در انبارها
• 80. یادگیری تقویتی برای ربات‌های امدادگر
• 81. یادگیری تقویتی برای ربات‌های اکتشافی
• 82. یادگیری تقویتی برای ربات‌های کشاورزی
• 83. یادگیری تقویتی برای ربات‌های خدماتی
• 84. یادگیری تقویتی برای ربات‌های جراح
• 85. یادگیری تقویتی برای ربات‌های آموزشی
• 86. یادگیری تقویتی برای ربات‌های سرگرمی
• 87. یادگیری تقویتی برای بهینه‌سازی عملکرد سیستم‌های رباتیک
• 88. یادگیری تقویتی برای پیش‌بینی رفتار ربات‌ها
• 89. یادگیری تقویتی برای کنترل رفتار ربات‌ها
• 90. یادگیری تقویتی برای تعامل ربات با انسان
• 91. یادگیری تقویتی برای ایجاد ربات‌های سازگار
• 92. یادگیری تقویتی برای بهبود قابلیت اطمینان ربات‌ها
• 93. یادگیری تقویتی برای بهینه‌سازی همکاری ربات‌ها
• 94. یادگیری تقویتی برای حل مسائل پیچیده رباتیک
• 95. یادگیری تقویتی برای نوآوری در رباتیک
• 96. یادگیری تقویتی برای آینده رباتیک
• 97. مفاهیم پیشرفته در MARL
• 98. تحلیل نظری MARL
• 99. کاربرد MARL در مسائل اقتصادی و اجتماعی
• 100. آخرین پیشرفت‌ها در MARL