کتاب صوتی شبکه‌های توزیع هوشمند: یادگیری تقویتی چندعامله برای تصمیم‌گیری‌های پویا

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره شبکه‌های توزیع هوشمند: یادگیری تقویتی چندعامله برای تصمیم‌گیری‌های پویا

موضوع کلی: یادگیری تقویتی چندعامله (MARL)

موضوع میانی: یادگیری تقویتی چندعامله برای بهینه‌سازی سیستم‌های مدیریت انرژی در شبکه‌های توزیع هوشمند با بار پویا

📋 سرفصل‌های دوره

• 1. شبکه‌های توزیع هوشمند و ضرورت تصمیم‌گیری پویا
• 2. ساختار شبکه‌های توزیع با منابع تولید پراکنده
• 3. بار پویا و رفتار مصرف‌کنندگان فعال
• 4. منابع تجدیدپذیر پراکنده و نوسان تولید
• 5. واحدهای ذخیره‌سازی انرژی و محدودیت‌های آن
• 6. خودروهای برقی به‌عنوان بار انعطاف‌پذیر و ذخیره‌ساز
• 7. ریزشبکه‌ها و نقطه‌های اتصال مشترک
• 8. هدف‌های متعارض مدیریت انرژی در شبکه توزیع
• 9. محدودیت‌های ولتاژ، جریان، ترانسفورماتور و خطوط
• 10. پیکربندی شبکه و عملیات سوئیچینگ
• 11. داده‌های حسگر، AMI و سامانه مدیریت توزیع
• 12. پیش‌بینی بار و تولید پراکنده
• 13. مدل‌سازی عدم قطعیت در بار و منابع تجدیدپذیر
• 14. بهینه‌سازی تصادفی کلاسیک به‌عنوان خط مبنای MARL
• 15. فرایند تصمیم‌گیری مارکوف در شبکه توزیع
• 16. نمای حالت برای سیستم توزیع هوشمند
• 17. فضای اقدام برای منابع و بارهای انعطاف‌پذیر
• 18. تابع پاداش برای مدیریت انرژی شبکه
• 19. مدل گذار و دینامیک ذخیره‌ساز و شبکه
• 20. افق تصمیم‌گیری و هزینه‌های تجمیعی
• 21. یادگیری تقویتی تک‌عامله به‌عنوان پایه
• 22. تقدیر ارزش و ارزیابی سیاست
• 23. یادگیری تقویتی مبتنی بر گرادیان سیاست
• 24. یادگیری تقویتی مبتنی بر مدل
• 25. تعادل بهره‌برداری و اکتشاف
• 26. یادگیری با سیاست‌های نامرتبط
• 27. مفاهیم پایه یادگیری تقویتی چندعامله
• 28. بازی‌های مارکوفی و دینامیک چندعامله
• 29. همکاری، تعارض و منافع مختلط در شبکه توزیع
• 30. آموزش مرکزی و اجرای غیرمتمرکز
• 31. تصمیم‌گیری کاملاً غیرمتمرکز
• 32. محدودیت‌های ارتباطی میان عامل‌ها
• 33. سازوکارهای هماهنگی بین عامل‌ها
• 34. معماری سلسله‌مراتبی و تجزیه سیستم
• 35. بازی‌های پتانسیل در هماهنگی منابع پراکنده
• 36. غیرایستایی محیط در آموزش چندعامله
• 37. تخصیص اعتبار میان عامل‌های شبکه
• 38. تجزیه ارزش در یادگیری تقویتی چندعامله
• 39. عامل‌کریتیک چندعامله برای اقدامات پیوسته
• 40. بهینه‌سازی سیاست چندعامله برای تصمیم‌های پیوسته
• 41. یادگیری تقویتی چندعامله مبتنی بر مدل
• 42. شکل‌دهی پاداش برای اهداف فنی و اقتصادی
• 43. یادگیری تقویتی چندعامله محدودبه‌شروط
• 44. ایمنی‌سازی تصمیم‌های عملیاتی شبکه
• 45. تاب‌آوری در برابر عدم قطعیت‌های چندمنبعی
• 46. سازگاری با تغییر توزیع داده‌های عملیاتی
• 47. طراحی محیط شبیه‌سازی برای MARL
• 48. ادغام مدل شبکه توزیع در حلقه یادگیری
• 49. جریان توان خطی‌شده برای تصمیم‌گیری سریع
• 50. مدل‌سازی عامل‌های منابع تولید پراکنده
• 51. مدل‌سازی بارهای انعطاف‌پذیر
• 52. مدل‌سازی عامل ذخیره‌سازی انرژی
• 53. مدل‌سازی شارژ و دشارژ خودروهای برقی
• 54. مدل‌سازی عامل ریزشبکه
• 55. توپولوژی ارتباطی میان عامل‌های شبکه
• 56. مشاهده‌پذیری و محدودیت‌های سنسورها
• 57. نمونه‌های استاندارد و مجموعه‌داده‌های شبکه توزیع
• 58. پیش‌پردازش داده‌های عملیاتی برای آموزش MARL
• 59. شبیه‌سازی اختلال، خطا و شرایط اضطراری
• 60. کنترل ولتاژ و توان راکتیو با MARL
• 61. تخصیص بهینه انرژی ذخیره‌سازی
• 62. بهینه‌سازی شارژ و مدیریت خودروهای برقی
• 63. پاسخ‌خواهی تقاضا با تصمیم‌گیری چندعامله
• 64. کاهش تلفات شبکه با همکاری عامل‌ها
• 65. مدیریت اشباع ترانسفورماتورهای توزیع
• 66. بازپیکربندی پویای فیدرها
• 67. مدیریت انرژی ریزشبکه‌ها
• 68. عملیات ریزشبکه در حالت اتصال‌ن‌شده
• 69. مدیریت انرژی سلسله‌مراتبی شبکه و ریزشبکه
• 70. حریم خصوصی و آموزش توزیع‌شده امن
• 71. تفسیرپذیری تصمیم‌های عامل‌های MARL
• 72. اجرای بلادرنگ و مدیریت تأخیر ارتباطی
• 73. به‌کارگیری دوگانه دیجیتال برای اعتبارسنجی
• 74. طراحی و اجرای یک مطالعه موردی یکپارچه
• 75. ارزیابی محدودیت‌ها و جهت‌های آینده MARL در شبکه توزیع