کتاب صوتی یادگیری تقویتی چندعامله: از تئوری تا کاربرد در کنترل پهپاد

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره یادگیری تقویتی چندعامله: از تئوری تا کاربرد در کنترل پهپاد

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای کنترل پهپادهای گروهی

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر یادگیری تقویتی چندعامله
• 2. مفاهیم پایه عامل و محیط در یادگیری تقویتی
• 3. مدل‌های عامل-محیط: MDP و POMDP
• 4. تابع پاداش و هدف یادگیری
• 5. الگوریتم‌های یادگیری تقویتی تک‌عامله: Q-learning
• 6. الگوریتم‌های یادگیری تقویتی تک‌عامله: SARSA
• 7. نشانه‌گذاری و یادگیری عمیق در یادگیری تقویتی
• 8. شبکه‌های عصبی کانولوشنال برای پردازش ورودی‌های تصویری
• 9. شبکه‌های عصبی بازگشتی برای پردازش توالی‌ها
• 10. معماری‌های یادگیرنده عمیق: DQN
• 11. توسعه DQN: Double DQN, Dueling DQN
• 12. الگوریتم‌های Actor-Critic: A2C, A3C
• 13. الگوریتم‌های Actor-Critic: DDPG
• 14. الگوریتم‌های Actor-Critic: TD3
• 15. الگوریتم‌های Actor-Critic: SAC
• 16. مقدمه‌ای بر سیستم‌های چندعامله (MAS)
• 17. تعاملات بین عامل‌ها: همکاری، رقابت، مختلط
• 18. بازی‌های دومتنی و چندتنی
• 19. راهبردهای بهینه در بازی‌های دومتنی
• 20. مقدمه‌ای بر یادگیری تقویتی چندعامله (MARL)
• 21. چالش‌های MARL: فضای حالت و عمل بزرگ
• 22. چالش‌های MARL: مشاهده‌پذیری جزئی
• 23. چالش‌های MARL: عدم ایستایی محیط
• 24. چالش‌های MARL: عدم قطعیت تعاملات
• 25. چالش‌های MARL: همگرایی الگوریتم‌ها
• 26. روش‌های مبتنی بر عامل مرکزی (Centralized Training)
• 27. روش‌های مبتنی بر عامل مرکزی: MADDPG
• 28. روش‌های مبتنی بر عامل مرکزی: COMA
• 29. روش‌های مبتنی بر عامل مجزا (Decentralized Execution)
• 30. روش‌های مبتنی بر عامل مجزا: VDN
• 31. روش‌های مبتنی بر عامل مجزا: QMIX
• 32. روش‌های مبتنی بر عامل مجزا: QTRAN
• 33. ترکیب روش‌های مرکزی و مجزا
• 34. آموزش مشترک عامل‌ها
• 35. یادگیری از طریق مشاهده (Learning from Observation)
• 36. یادگیری از طریق تقلید (Imitation Learning)
• 37. انتقال یادگیری (Transfer Learning) در MARL
• 38. انطباق‌پذیری عامل‌ها در محیط‌های پویا
• 39. استراتژی‌های ارتباطی بین عامل‌ها
• 40. یادگیری ارتباطات ضمنی
• 41. یادگیری ارتباطات صریح
• 42. مدل‌سازی عامل‌های دیگر (Opponent Modeling)
• 43. تئوری بازی‌های تکاملی (Evolutionary Game Theory)
• 44. کاربرد MARL در کنترل ترافیک پهپادها
• 45. تنظیم مسیر و جلوگیری از برخورد پهپادها
• 46. بهینه‌سازی مأموریت‌های گروهی پهپادها
• 47. حفاظت از مرزها با پهپادهای خودمختار
• 48. نظارت هوایی با استفاده از شبکه‌های پهپادی
• 49. جستجو و نجات با پهپادهای خودمختار
• 50. توزیع بار با استفاده از پهپادها
• 51. کشاورزی دقیق با پهپادهای هوشمند
• 52. بازرسی زیرساخت‌ها با پهپادهای خودمختار
• 53. مدیریت حوادث با پهپادهای هماهنگ
• 54. مقدمه‌ای بر کنترل پهپاد
• 55. سیستم‌های کنترلی پهپاد
• 56. مکانیک پروازی پهپاد
• 57. موتورها و سیستم‌های پیشرانش پهپاد
• 58. سنسورها و ناوبری در پهپادها
• 59. ارتباطات بی‌سیم در پهپادها
• 60. پردازش سیگنال در سیستم‌های پهپادی
• 61. ملاحظات امنیتی در سیستم‌های پهپادی
• 62. استانداردهای فنی پهپادها
• 63. قوانین و مقررات پرواز پهپادها در ایران
• 64. مجوزهای لازم برای عملیات پهپادی
• 65. اصول اخلاقی در استفاده از پهپادها
• 66. مدیریت داده‌های جمع‌آوری شده توسط پهپادها
• 67. پردازش تصویر و ویدئو از پهپادها
• 68. تشخیص اشیاء در تصاویر پهپادی
• 69. طبقه‌بندی عوارض جغرافیایی با پهپادها
• 70. نقشه‌برداری هوایی با استفاده از پهپادها
• 71. مدل‌سازی سه‌بعدی محیط با پهپادها
• 72. کاربرد MARL در بهینه‌سازی مصرف انرژی پهپادها
• 73. بهبود استقامت پروازی پهپادها
• 74. تخصیص وظایف بهینه در گروه‌های پهپادی
• 75. مدیریت منابع در عملیات پهپادی
• 76. پیاده‌سازی الگوریتم‌های MARL بر روی سخت‌افزار پهپاد
• 77. شبیه‌سازهای یادگیری تقویتی چندعامله
• 78. ارزیابی عملکرد سیستم‌های MARL برای پهپادها
• 79. معیارهای سنجش موفقیت در کنترل پهپاد
• 80. تحلیل حساسیت پارامترها در MARL
• 81. مدل‌سازی عدم قطعیت در محیط پرواز پهپاد
• 82. تأثیر عوامل محیطی بر عملکرد عامل‌ها
• 83. تکنیک‌های کاهش ابعاد در MARL
• 84. یادگیری عمیق تقویتی برای کنترل پهپادهای مانورپذیر
• 85. کاربرد MARL در رباتیک پروازی
• 86. آینده پژوهش در یادگیری تقویتی چندعامله
• 87. چشم‌انداز کاربردهای پهپادهای خودمختار
• 88. ملاحظات حقوقی و اجتماعی پهپادهای هوشمند
• 89. همکاری پهپادها با سیستم‌های زمینی
• 90. امنیت سایبری در شبکه‌های پهپادی
• 91. روش‌های اعتبارسنجی مدل‌های MARL
• 92. بهینه‌سازی زمان‌بندی پرواز پهپادها
• 93. مدیریت ریسک در عملیات پهپادی
• 94. نقش هوش مصنوعی در آینده پروازهای خودمختار
• 95. اصول طراحی سیستم‌های خودمختار ایمن
• 96. آموزش عامل‌ها برای موقعیت‌های اضطراری
• 97. توسعه چارچوب‌های استاندارد برای MARL
• 98. اهمیت داده‌های واقعی در آموزش عامل‌ها
• 99. ملاحظات زیست‌محیطی در استفاده از پهپادها
• 100. کاربرد MARL در ناوبری ازدحام پهپادی