کتاب صوتی مباحث پیشرفته در یادگیری تقویتی چندعامله برای سیستم‌های توزیع انرژی

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره مباحث پیشرفته در یادگیری تقویتی چندعامله برای سیستم‌های توزیع انرژی

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای طراحی سیستم‌های توزیع انرژی

📋 سرفصل‌های دوره

• 1. مبانی نظری فرایندهای تصمیم‌گیری مارکوف چندعامله (MAMDP) در شبکه‌های توزیع انرژی
• 2. مدل‌سازی پویایی‌های غیرایستای (Non-Stationarity) محیط در سیستم‌های انرژی چندعامل‌محور
• 3. معماری‌های آموزش متمرکز و اجرای غیرمتمرکز (CTDE) در شبکه‌های هوشمند توزیع
• 4. الگوریتم‌های پیشرفته Actor-Critic چندعامله (MADDPG و MAPPO) برای مدیریت توان اکتیو و راکتیو
• 5. روش‌های ارزش‌گذاری غیرمتمرکز و اعتبارسنجی جمعی (Credit Assignment) با QMIX و VDN
• 6. پروتکل‌های ارتباطی و مکانیسم‌های تبادل پیام بین عامل‌ها مبتنی بر شبکه عصبی گراف (GNN)
• 7. یادگیری تقویتی چندعامله فدرال (Federated MARL) جهت حفظ حریم خصوصی مشترکین و ریزشبکه‌ها
• 8. کنترل اتوماتیک و غیرمتمرکز ولتاژ و فرکانس در شبکه‌های توزیع با نفوذ بالای منابع تجدیدپذیر
• 9. طراحی ابزارها و مکانیسم‌های بازاریابی انرژی همتا-به-همتا (P2P Energy Trading) با MARL
• 10. استراتژی‌های هماهنگی چندعامله برای مدیریت شارژ و دشارژ ناوگان خودروهای الکتریکی (EVs)
• 11. مدیریت پاسخگویی بار (Demand Response) و کنترل بار یکپارچه با الگوریتم‌های MARL
• 12. بهینه‌سازی کارکرد سیستم‌های ذخیره‌ساز انرژی توزیع‌شده (BESS) در شرایط عدم قطعیت
• 13. الگوریتم‌های MARL مقاوم (Robust MARL) در برابر خطاهای حسگری و اختلالات مخابراتی
• 14. طراحی سیستم‌های خودترمیم‌کننده (Self-Healing) و بازیابی شبکه توزیع پس از وقوع خطا
• 15. حفظ ایمنی و اعمال محدودیت‌های سخت‌افزاری شبکه (Safe MARL) با استفاده از تابع پتانسیل و کانوولوشن گرافی
• 16. مدل‌سازی رفتار متخاصم و امنیت سایبری-فیزیکی در سیستم‌های توزیع با یادگیری تقویتی بازی‌محور
• 17. ارزیابی مقیاس‌پذیری الگوریتم‌های MARL در شبکه‌های توزیع با مقیاس بزرگ و گره‌های متعدد
• 18. شبیه‌سازی و نگاشت سیستم‌های توزیع در محیط‌های OpenAI Gym و PyMARL با یکپارچه‌سازی OpenDSS
• 19. پیاده‌سازی پروسه انتقال یادگیری (Transfer Learning) جهت شتاب‌دهی همگرایی عامل‌ها در شرایط تغیر توپولوژی
• 20. تست و استقرار مدل‌های MARL بر روی سخت‌افزارهای در-حلقه (HIL) و سیستم‌های کنترل واقعی