فلش‌کارت‌های آموزشی راهنمای جامع شبکه‌های عصبی ترنسفورمر

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره راهنمای جامع شبکه‌های عصبی ترنسفورمر

موضوع کلی: هوش مصنوعی و مدل‌های زبانی بزرگ

موضوع میانی: شبکه‌های عصبی ترنسفورمر (Transformer Networks)

📋 سرفصل‌های دوره

• 1. مبانی شبکه‌های عصبی و یادگیری عمیق
• 2. معرفی معماری ترنسفورمر
• 3. ساختار اصلی ترنسفورمر: رمزگذار و رمزگشا
• 4. مکانیزم توجه (Attention Mechanism)
• 5. توجه چند سر (Multi-Head Attention)
• 6. تعبیه‌های موقعیتی (Positional Embeddings)
• 7. لایه‌های پیشخور (Feed-Forward Layers)
• 8. نرمال‌سازی لایه‌ای (Layer Normalization)
• 9. اتصالات باقی‌مانده (Residual Connections)
• 10. تابع فعال‌سازی ReLU و جایگزین‌ها
• 11. تابع هزینه (Loss Function) در ترنسفورمرها
• 12. بهینه‌سازها (Optimizers) در شبکه‌های عصبی
• 13. گرادیان کاهشی تصادفی (SGD)
• 14. آدام (Adam Optimizer)
• 15. آموزش ترنسفورمر: تنظیمات اولیه
• 16. تنظیم نرخ یادگیری (Learning Rate Scheduling)
• 17. روش‌های منظم‌سازی (Regularization Techniques)
• 18. کاهش نرخ یادگیری (Learning Rate Decay)
• 19. تنظیم اندازه دسته‌ها (Batch Size Tuning)
• 20. ارزیابی مدل ترنسفورمر
• 21. معیارهای ارزیابی: دقت، صحت، فراخوانی
• 22. متریک BLEU برای ترجمه ماشینی
• 23. متریک ROUGE برای خلاصه‌سازی متن
• 24. پوشش دقت (Coverage) در ترجمه
• 25. مدل‌های زبانی بزرگ (Large Language Models - LLMs)
• 26. معماری GPT (Generative Pre-trained Transformer)
• 27. مدل‌های BERT (Bidirectional Encoder Representations from Transformers)
• 28. کاربرد ترنسفورمرها در پردازش زبان طبیعی (NLP)
• 29. ترجمه ماشینی با ترنسفورمر
• 30. خلاصه‌سازی متن با ترنسفورمر
• 31. پاسخ به سوالات با ترنسفورمر
• 32. تحلیل احساسات با ترنسفورمر
• 33. شناسایی موجودیت‌های نام‌دار (NER)
• 34. طبقه‌بندی متن با ترنسفورمر
• 35. تولید متن با ترنسفورمر
• 36. مدل‌های ترنسفورمر برای درک مطلب
• 37. معماری‌های مشتق شده از ترنسفورمر
• 38. ترنسفورمرهای فقط رمزگذار (Encoder-only Transformers)
• 39. ترنسفورمرهای فقط رمزگشا (Decoder-only Transformers)
• 40. ترنسفورمرهای رمزگذار-رمزگشا (Encoder-Decoder Transformers)
• 41. شبکه‌های مولد تخاصمی (GANs) و ترنسفورمرها
• 42. شبکه‌های عصبی گراف (GNNs) و ترنسفورمرها
• 43. کاربرد ترنسفورمر در بینایی ماشین
• 44. طبقه‌بندی تصویر با ترنسفورمر
• 45. تشخیص اشیاء با ترنسفورمر
• 46. تقسیم‌بندی تصویر با ترنسفورمر
• 47. تولید تصویر با ترنسفورمر
• 48. مدل‌های ترنسفورمر برای پردازش سری‌های زمانی
• 49. کاربرد ترنسفورمر در حوزه‌های دیگر
• 50. تنظیم دقیق (Fine-tuning) مدل‌های ترنسفورمر
• 51. انتقال یادگیری (Transfer Learning) با ترنسفورمرها
• 52. آموزش از ابتدا (Training from Scratch)
• 53. کاهش ابعاد (Dimensionality Reduction) برای ترنسفورمرها
• 54. تکثیر داده (Data Augmentation) برای ترنسفورمرها
• 55. مدیریت حافظه در ترنسفورمرهای بزرگ
• 56. بهینه‌سازی محاسباتی ترنسفورمرها
• 57. استفاده از سخت‌افزار تخصصی (GPU, TPU)
• 58. توزیع آموزش (Distributed Training)
• 59. روش‌های کوانتیزاسیون (Quantization)
• 60. هرس کردن (Pruning) مدل‌های ترنسفورمر
• 61. کارایی مدل‌های ترنسفورمر
• 62. کاهش مصرف انرژی ترنسفورمرها
• 63. ملاحظات اخلاقی در مدل‌های ترنسفورمر
• 64. سوگیری (Bias) در مدل‌های ترنسفورمر
• 65. شفافیت و قابلیت تفسیر (Interpretability)
• 66. امنیت مدل‌های ترنسفورمر
• 67. حریم خصوصی داده‌ها در ترنسفورمرها
• 68. مسئولیت‌پذیری در توسعه هوش مصنوعی
• 69. چارچوب‌های قانونی و شرعی در توسعه هوش مصنوعی
• 70. مقررات مربوط به داده‌ها و حریم خصوصی
• 71. استانداردهای اخلاقی در هوش مصنوعی
• 72. نقش نهادهای نظارتی در هوش مصنوعی
• 73. اصول طراحی مدل‌های هوش مصنوعی اخلاقی
• 74. مدیریت ریسک در پروژه‌های هوش مصنوعی
• 75. کاربرد هوش مصنوعی در نظام بانکی اسلامی
• 76. موازین شرعی در اقتصاد دیجیتال
• 77. چارچوب‌های فقهی در قراردادهای هوشمند
• 78. اصول حاکم بر کسب‌وکارهای نوین
• 79. ملاحظات حقوقی در استفاده از داده‌ها
• 80. قوانین حمایت از مصرف‌کننده در فضای دیجیتال
• 81. نظام حقوقی حاکم بر رمزارزها (مطابق مقررات)
• 82. اصول حفاظت از زیرساخت‌های اطلاعاتی
• 83. قوانین جرائم رایانه‌ای و سایبری
• 84. مبانی حقوقی و شرعی تولید محتوای دیجیتال
• 85. آیین‌نامه ساماندهی محتوای دیجیتال
• 86. مصوبات شورای عالی انقلاب فرهنگی مرتبط
• 87. حدود شرعی در فضای مجازی
• 88. ضوابط پوشش و حجاب در فضای آموزشی
• 89. موازین اخلاقی در روابط اجتماعی مجازی
• 90. ممنوعیت ترویج گروه‌های انحرافی
• 91. قوانین مقابله با پولشویی و فرار مالیاتی
• 92. مقابله با جرائم مالی سازمان‌یافته
• 93. چارچوب‌های نظارتی بر فعالیت‌های اقتصادی
• 94. مقررات بانک مرکزی در حوزه رمزارزها
• 95. اصول پیشگیری از خودکشی و خودآزاری
• 96. موازین طب رسمی و جایگزین‌های مجاز
• 97. حفظ سلامت روان و پیشگیری از آسیب‌ها
• 98. مبانی خانواده ایرانی-اسلامی در روانشناسی
• 99. موازین اخلاقی در روابط خانوادگی
• 100. چارچوب‌های تاریخی و فرهنگی ایران