فلش‌کارت‌های آموزشی طراحی سیاست‌های بهینه و مقاوم در شرایط عدم قطعیت: رویکردی نوین با مدل حساسیت حاشیه‌ای

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره طراحی سیاست‌های بهینه و مقاوم در شرایط عدم قطعیت: رویکردی نوین با مدل حساسیت حاشیه‌ای

موضوع کلی: یادگیری تقویتی و سیاست‌گذاری مبتنی بر داده‌های مشاهده‌ای

موضوع میانی: یادگیری سیاست مقاوم در برابر اثرات مخدوش‌کننده پنهان

📋 سرفصل‌های دوره

• 1. مقدمه‌ای بر سیاست‌گذاری مبتنی بر داده‌های مشاهده‌ای
• 2. چالش‌های سیاست‌گذاری در دنیای واقعی
• 3. تفاوت بین داده‌های تجربی و مشاهده‌ای
• 4. مفهوم عدم قطعیت در تصمیم‌گیری
• 5. نقش یادگیری تقویتی در سیاست‌گذاری
• 6. کاربرد یادگیری تقویتی در تحلیل داده‌های مشاهده‌ای
• 7. مقدمه‌ای بر اثرات مخدوش‌کننده (Confounding)
• 8. مخدوش‌کننده‌های مشاهده‌پذیر و مشاهده‌ناپذیر
• 9. چالش اثرات مخدوش‌کننده پنهان در سیاست‌گذاری
• 10. اهمیت سیاست‌های مقاوم (Robust Policies)
• 11. تعریف سیاست مقاوم
• 12. مزایای سیاست مقاوم در عمل
• 13. معرفی مقاله "Policy Learning under Unobserved Confounding"
• 14. اهداف اصلی مقاله
• 15. رویکردهای موجود برای مقابله با مخدوش‌کننده‌های پنهان
• 16. شکاف‌های موجود در تحقیقات پیشین
• 17. مفاهیم اساسی یادگیری تقویتی (RL)
• 18. فرایند تصمیم‌گیری مارکوف (MDP)
• 19. حالت، عمل، پاداش، انتقال
• 20. تابع ارزش (Value Function)
• 21. تابع سیاست (Policy Function)
• 22. الگوریتم‌های یادگیری تقویتی کلاسیک
• 23. یادگیری Q (Q-Learning)
• 24. یادگیری سیاست گران (Policy Gradient)
• 25. یادگیری آفلاین (Offline Reinforcement Learning)
• 26. محدودیت‌های یادگیری آفلاین
• 27. اهمیت داده‌های آفلاین در سیاست‌گذاری
• 28. یادگیری سیاست از داده‌های مشاهده‌ای
• 29. چالش تطبیق توزیع (Distribution Shift)
• 30. پیامد یادگیری سیاست نامناسب
• 31. مفهوم تورش (Bias) و واریانس (Variance) در یادگیری ماشین
• 32. تورش و واریانس در تخمین سیاست
• 33. تأثیر مخدوش‌کننده‌ها بر تورش
• 34. مفهوم هم‌ارزی علّی (Causal Equivalence)
• 35. استفاده از مدل‌های علّی در سیاست‌گذاری
• 36. مدل‌های گراف علّی (Causal Graphical Models)
• 37. مقدمه‌ای بر استنتاج علّی (Causal Inference)
• 38. تشخیص اثرات مخدوش‌کننده
• 39. روش‌های کنترل مخدوش‌کننده‌های مشاهده‌پذیر
• 40. تطبیق (Matching)
• 41. وزن‌دهی با معکوس احتمال درمان (IPTW)
• 42. ضرورت پرداختن به مخدوش‌کننده‌های مشاهده‌ناپذیر
• 43. مفهوم سیاست‌گذاری مقاوم در برابر عدم قطعیت
• 44. چگونه عدم قطعیت بر تصمیم‌گیری تأثیر می‌گذارد؟
• 45. مدل‌سازی عدم قطعیت در سیاست‌گذاری
• 46. مقدمه‌ای بر رویکرد مدل حساسیت حاشیه‌ای (Marginal Sensitivity Model)
• 47. ایده اصلی مدل حساسیت حاشیه‌ای
• 48. پارامترهای مدل حساسیت حاشیه‌ای
• 49. نحوه استخراج پارامترهای مدل حساسیت حاشیه‌ای
• 50. آموزش سیاست مقاوم با استفاده از مدل حساسیت حاشیه‌ای
• 51. تعریف "مقاوم" در چارچوب مقاله
• 52. چگونه مدل حساسیت حاشیه‌ای به مقاومت کمک می‌کند؟
• 53. الگوریتم اصلی مقاله: شرح گام به گام
• 54. فاز تخمین پارامتر مدل حساسیت
• 55. فاز بهینه‌سازی سیاست مقاوم
• 56. پیاده‌سازی عملی الگوریتم
• 57. نیازهای محاسباتی الگوریتم
• 58. ملاحظات داده‌ای برای پیاده‌سازی
• 59. ارزیابی سیاست‌های مقاوم
• 60. معیارهای ارزیابی سیاست‌های مقاوم
• 61. مقایسه با سیاست‌های غیرمقاوم
• 62. مطالعات شبیه‌سازی (Simulation Studies)
• 63. نتایج شبیه‌سازی در مقاله
• 64. تحلیل نتایج شبیه‌سازی
• 65. کاربرد در دنیای واقعی: مثال‌ها
• 66. سیاست‌گذاری در بهداشت و درمان
• 67. سیاست‌گذاری در بازاریابی
• 68. سیاست‌گذاری در امور مالی
• 69. مثال‌های عملی و سناریوهای واقعی
• 70. مراحل طراحی یک سیاست مقاوم
• 71. نکات عملی برای پیاده‌سازی
• 72. چالش‌های پیاده‌سازی در مقیاس بزرگ
• 73. داده‌های مورد نیاز برای پیاده‌سازی
• 74. اعتبارسنجی مدل حساسیت حاشیه‌ای
• 75. تأثیر کیفیت داده‌ها بر عملکرد سیاست
• 76. تأثیر تغییرات پارامتر مدل حساسیت
• 77. استراتژی‌های بهبود کارایی الگوریتم
• 78. کاهش پیچیدگی محاسباتی
• 79. افزایش سرعت همگرایی
• 80. ملاحظات نظری رویکرد
• 81. اثبات‌های تئوریک پشت الگوریتم
• 82. شرایط همگرایی الگوریتم
• 83. تحلیل حدود خطا (Error Bounds)
• 84. کاربرد رویکرد در انواع مختلف MDP
• 85. MDP با فضای حالت پیوسته
• 86. MDP با فضای عمل پیوسته
• 87. MDP با پاداش‌های نامعلوم
• 88. مقایسه با سایر رویکردهای مقاوم
• 89. روش‌های مقاوم‌سازی سنتی
• 90. روش‌های مبتنی بر عدم قطعیت آماری
• 91. مقایسه مزایا و معایب
• 92. پیوندهای رویکرد با روش‌های دیگر یادگیری تقویتی
• 93. یادگیری تقویتی چندعاملی (Multi-Agent RL)
• 94. یادگیری تقویتی با پاداش‌های نامشخص (Inverse RL)
• 95. امتدادهای رویکرد مقاله
• 96. سیاست‌گذاری با مخدوش‌کننده‌های متغیر با زمان
• 97. سیاست‌گذاری با اثرات علّی پیچیده
• 98. مقیاس‌پذیری رویکرد
• 99. مسائل اخلاقی در سیاست‌گذاری مبتنی بر داده
• 100. سوگیری در داده‌ها و پیامدهای آن