کتاب صوتی یادگیری تقویتی چندعامله: چشم‌اندازهای آینده در رباتیک صنعتی

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره یادگیری تقویتی چندعامله: چشم‌اندازهای آینده در رباتیک صنعتی

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای کنترل ربات‌های صنعتی برای انجام وظایف نگهداری و تعمیر

📋 سرفصل‌های دوره

• 1. مبانی یادگیری تقویتی و تفاوت آن با یادگیری نظارت‌شده
• 2. معرفی یادگیری تقویتی چندعامله و چالش‌های آن
• 3. مفاهیم پایه: عامل، محیط، حالت، عمل و پاداش
• 4. فرایند تصمیم‌گیری مارکوف و تعمیم آن به چندعامله
• 5. فرایند تصمیم‌گیری مارکوف چندعامله (MMDP)
• 6. بازی‌های مارکوفی و مدل‌سازی تعامل عامل‌ها
• 7. انواع همکاری و رقابت در سیستم‌های چندعامله
• 8. مشکل غیرایستایی محیط در یادگیری چندعامله
• 9. مشکل تخصیص اعتبار در سیستم‌های چندعامله
• 10. مشکل کاوش-بهره‌برداری در فضای چندعامله
• 11. معرفی ربات‌های صنعتی و کاربردهای نگهداری و تعمیر
• 12. معماری سیستم‌های چندرباتی در محیط صنعتی
• 13. مدل‌سازی وظایف نگهداری و تعمیر به‌صورت مسئله MARL
• 14. تعریف فضای حالت و عمل برای ربات‌های صنعتی
• 15. طراحی تابع پاداش برای وظایف نگهداری و تعمیر
• 16. پاداش‌های تنک و چالش‌های آن در MARL
• 17. شکل‌دهی پاداش و راهکارهای عملی
• 18. روش‌های مستقل: IQL و تفاوت آن با روش‌های متمرکز
• 19. روش‌های متمرکز آموزش و غیرمتمرکز اجرا (CTDE)
• 20. الگوریتم QMIX و ترکیب ارزش‌ها
• 21. الگوریتم VDN و تجزیه تابع ارزش
• 22. الگوریتم MADDPG برای محیط‌های پیوسته
• 23. الگوریتم MAPPO و یادگیری سیاست متمرکز
• 24. الگوریتم COMA و تخمینگر مزیت متمرکز
• 25. روش‌های مبتنی بر گرادیان سیاست در MARL
• 26. یادگیری تقویتی چندعامله مبتنی بر ارتباطات
• 27. ارتباطات صریح و ضمنی بین عامل‌ها
• 28. توجه و ترنسفورمرها در MARL
• 29. حافظه و بازگشت‌پذیری در عامل‌های چندگانه
• 30. تجزیه تیم و تشکیل ائتلاف در MARL
• 31. هماهنگی و هم‌زمان‌سازی وظایف چندرباتی
• 32. برنامه‌ریزی مسیر چندرباتی در محیط صنعتی
• 33. تخصیص وظایف در تیم‌های رباتیک
• 34. زمان‌بندی و بهینه‌سازی توالی وظایف نگهداری
• 35. مدیریت منابع و انرژی در ربات‌های صنعتی
• 36. یادگیری انتقالی در MARL برای رباتیک
• 37. یادگیری چندوظیفه‌ای در سیستم‌های چندرباتی
• 38. تعمیم سیاست‌ها به محیط‌های صنعتی جدید
• 39. یادگیری تقویتی چندعامله مبتنی بر مدل
• 40. مدل‌های جهانی و پیش‌بینی در MARL
• 41. یادگیری تقویتی سلسله‌مراتبی چندعامله
• 42. یادگیری تقلیدی و ترکیب آن با MARL
• 43. یادگیری خودبازی و تکامل همکاری
• 44. روش‌های تکاملی در یادگیری چندعامله
• 45. ایمنی و قابلیت اطمینان در MARL صنعتی
• 46. محدودیت‌های ایمنی و اقدامات محافظتی
• 47. تضمین‌های عملکردی در سیستم‌های چندرباتی
• 48. مقاوم‌سازی در برابر خرابی عامل‌ها
• 49. یادگیری مقاوم و تطبیق با تغییرات محیط
• 50. پایداری و همگرایی در الگوریتم‌های MARL
• 51. ارزیابی عملکرد و معیارهای سنجش MARL
• 52. محیط‌های شبیه‌سازی برای رباتیک صنعتی
• 53. شبیه‌سازی چندرباتی با Gazebo و PyBullet
• 54. انتقال از شبیه‌سازی به دنیای واقعی (Sim-to-Real)
• 55. چالش‌های شکاف واقعیت در MARL
• 56. یادگیری در محیط‌های واقعی صنعتی
• 57. یکپارچه‌سازی MARL با سیستم‌های کنترل صنعتی
• 58. تعامل MARL با انسان در محیط‌های صنعتی
• 59. یادگیری از بازخورد انسانی در MARL
• 60. اخلاق و مسئولیت در سیستم‌های خودمختار صنعتی
• 61. چشم‌اندازهای آینده MARL در رباتیک صنعتی
• 62. روندهای نوین و پژوهش‌های باز
• 63. پروژه عملی: طراحی یک سیستم MARL برای وظیفه نگهداری