کتاب صوتی یادگیری تقویتی برای کنترل جمعی ربات‌های صنعتی

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره یادگیری تقویتی برای کنترل جمعی ربات‌های صنعتی

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای کنترل ربات‌های صنعتی برای انجام وظایف تراشکاری و سوراخکاری

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چندعامله در رباتیک صنعتی
• 2. مروری بر کاربردهای MARL در کنترل ربات‌های صنعتی
• 3. مفاهیم پایه یادگیری تقویتی: پاداش، حالت، عمل
• 4. مفاهیم پایه یادگیری تقویتی: تابع ارزش و سیاست
• 5. مقدمه‌ای بر محیط‌های شبیه‌سازی رباتیک
• 6. معرفی ابزارهای شبیه‌سازی رباتیک (Gazebo, V-REP, CoppeliaSim)
• 7. معماری‌های ارتباطی ربات‌ها در MARL
• 8. چالش‌های ارتباطی در کنترل جمعی ربات‌ها
• 9. استراتژی‌های هماهنگی ربات‌ها: تمرکززدایی و تمرکز
• 10. الگوریتم‌های پایه MARL: Independent Q-Learning (IQL)
• 11. الگوریتم‌های پایه MARL: Value Decomposition Networks (VDN)
• 12. الگوریتم‌های پایه MARL: QMIX
• 13. الگوریتم‌های پایه MARL: Counterfactual Multi-Agent Policy Gradients (COMA)
• 14. الگوریتم‌های پیشرفته MARL: Multi-Agent Deep Deterministic Policy Gradient (MADDPG)
• 15. الگوریتم‌های پیشرفته MARL: Centralized Training with Decentralized Execution (CTDE)
• 16. پیاده‌سازی MARL برای وظیفه تراشکاری: تعریف فضاها و پاداش‌ها
• 17. پیاده‌سازی MARL برای وظیفه سوراخکاری: تعریف فضاها و پاداش‌ها
• 18. طراحی پاداش‌های مناسب برای هماهنگی ربات‌ها در تراشکاری
• 19. طراحی پاداش‌های مناسب برای هماهنگی ربات‌ها در سوراخکاری
• 20. انتخاب الگوریتم MARL مناسب برای تراشکاری و سوراخکاری
• 21. تنظیم ابرپارامترهای الگوریتم‌های MARL
• 22. ارزیابی عملکرد الگوریتم‌های MARL در شبیه‌سازی
• 23. انتقال یادگیری از شبیه‌سازی به ربات واقعی (Sim2Real)
• 24. روش‌های کاهش شکاف Sim2Real
• 25. کنترل احتیاطی در MARL برای ربات‌های صنعتی
• 26. مدیریت تصادم و اجتناب از برخورد در MARL
• 27. بهینه‌سازی مسیر در MARL برای ربات‌های صنعتی
• 28. استفاده از یادگیری انتقالی در MARL
• 29. یادگیری تقویتی سلسله مراتبی برای کنترل ربات‌های صنعتی
• 30. استفاده از شبکه‌های عصبی پیچشی (CNN) در MARL برای پردازش تصاویر
• 31. استفاده از شبکه‌های عصبی بازگشتی (RNN) در MARL برای پردازش داده‌های زمانی
• 32. بهبود پایداری یادگیری در MARL
• 33. روش‌های مقابله با پاداش‌های پراکنده (Sparse Rewards)
• 34. یادگیری اکتشافی در MARL
• 35. استفاده از حافظه در MARL برای ربات‌های صنعتی
• 36. تکنیک‌های کاهش ابعاد در MARL
• 37. یادگیری چندوظیفه‌ای در MARL
• 38. استفاده از داده‌های تاریخی برای آموزش MARL
• 39. یادگیری تقویتی آفلاین در MARL
• 40. امنیت در MARL برای ربات‌های صنعتی
• 41. یادگیری تقویتی ایمن (Safe RL)
• 42. تفسیرپذیری در MARL برای ربات‌های صنعتی
• 43. تشخیص و اصلاح رفتارهای ناخواسته در MARL
• 44. استفاده از یادگیری تقویتی برای بهینه‌سازی مصرف انرژی ربات‌ها
• 45. مقایسه MARL با روش‌های کنترل سنتی
• 46. چالش‌ها و آینده MARL در رباتیک صنعتی