کتاب صوتی کار با سیستم‌های مدیریت منابع (Resource Managers) مانند Slurm

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: کار با سیستم‌های مدیریت منابع (Resource Managers) مانند Slurm

موضوع کلی: برنامه نویسی

موضوع میانی: محاسبات سطح بالا (High-Performance Computing)

📋 سرفصل‌های دوره (100 موضوع)

• 1. مقدمه‌ای بر محاسبات سطح بالا (HPC)
• 2. مقدمه‌ای بر سیستم‌های مدیریت منابع (RMS)
• 3. نیاز به RMS در محیط‌های HPC
• 4. معرفی Slurm: یک RMS قدرتمند
• 5. معماری Slurm: اجزاء اصلی
• 6. نحوه نصب و پیکربندی Slurm (مرور کلی)
• 7. مفاهیم کلیدی در Slurm: Job, Partition, Node, CPU, Memory, Time
• 8. نحوه ثبت نام در سیستم (User Account)
• 9. اولین Job در Slurm: درخواست ساده
• 10. دستور `sbatch`: ارسال Job
• 11. بررسی وضعیت Job با `squeue`
• 12. درک خروجی `squeue`
• 13. لغو Job با `scancel`
• 14. دریافت اطلاعات Job با `sinfo`
• 15. مفاهیم Partition و کاربرد آن
• 16. تعریف و مدیریت Partitions (برای ادمین)
• 17. نحوه تخصیص منابع: CPU
• 18. نحوه تخصیص منابع: Memory (RAM)
• 19. نحوه تخصیص منابع: زمان (Walltime)
• 20. درخواست Job های موازی (Parallel Jobs)
• 21. مفهوم MPI (Message Passing Interface)
• 22. اجرای Job های MPI با Slurm
• 23. ابزارهای مانیتورینگ Job ها در Slurm
• 24. مانیتورینگ استفاده از منابع (CPU, Memory)
• 25. مانیتورینگ استفاده از GPU
• 26. Job Dependencies: زنجیره سازی Job ها
• 27. مفهوم Job Arrays
• 28. کاربرد Job Arrays در محاسبات
• 29. ارسال Job Arrays با `sbatch`
• 30. مدیریت Job Arrays
• 31. ارسال Job های تعاملی (Interactive Jobs)
• 32. دستور `srun`: اجرای فرمان در داخل Job
• 33. نحوه استفاده از `srun` برای اجرای موازی
• 34. مفاهیم Priority و Fairshare در Slurm
• 35. تنظیم اولویت Job ها
• 36. مدیریت Fairshare برای کاربران
• 37. نوشتن اسکریپت های Job (Job Scripts)
• 38. متغیرهای محیطی Slurm
• 39. استفاده از صفات (Attributes) در Job Scripts
• 40. سفارشی سازی Partitions
• 41. تعریف Node Features
• 42. درخواست منابع با Node Features
• 43. تنظیمات پیشرفته Partitions
• 44. مدیریت صفات (Properties) نودها
• 45. تنظیمات پیشرفته Job Submission
• 46. استفاده از `scontrol` برای مدیریت سیستم
• 47. مشاهده وضعیت Partitions با `scontrol`
• 48. مشاهده وضعیت Nodes با `scontrol`
• 49. مشاهده وضعیت Jobs با `scontrol`
• 50. مدیریت کاربران و گروه‌ها در Slurm
• 51. تنظیمات کاربران و محدودیت‌ها
• 52. تنظیمات گروه‌ها و تخصیص منابع
• 53. مفهوم Accounting در Slurm
• 54. تنظیمات Accounting
• 55. استخراج گزارشات Accounting
• 56. مانیتورینگ کلی سیستم Slurm
• 57. استفاده از ابزارهای گرافیکی برای مانیتورینگ (اگر وجود داشته باشد)
• 58. امنیت در Slurm
• 59. تنظیمات احراز هویت (Authentication)
• 60. کنترل دسترسی (Access Control)
• 61. مدیریت خطا در Job ها
• 62. نحوه دیباگ کردن Job های ناموفق
• 63. مطالعه لاگ فایل ها
• 64. بهینه‌سازی Job Scripts
• 65. تکنیک‌های پیش از اجرا (Pre-execution)
• 66. تکنیک‌های پس از اجرا (Post-execution)
• 67. بررسی وابستگی‌ها در Job Scripts
• 68. استفاده از Job Arrays برای پارامترهای متغیر
• 69. بهینه‌سازی استفاده از CPU
• 70. بهینه‌سازی استفاده از Memory
• 71. بهینه‌سازی زمان اجرا (Walltime)
• 72. کاهش سربار (Overhead) در Job ها
• 73. استفاده از Job Queues سفارشی
• 74. مفهوم Preemption و Suspend
• 75. تنظیمات Preemption
• 76. تعلیق و از سرگیری Job ها
• 77. مدیریت Job های با اولویت بالا
• 78. مفهوم Gang Scheduling
• 79. کاربرد Gang Scheduling
• 80. معماری محاسبات توزیع شده (Distributed Computing)
• 81. مقدمه ای بر کانتینرسازی (Containerization)
• 82. کاربرد Docker و Singularity در HPC
• 83. استفاده از Singularity در Slurm
• 84. ساخت ایمیج های Singularity
• 85. اجرای Job ها با Singularity در Slurm
• 86. نحوه مدیریت منابع GPU
• 87. تنظیمات GPU در Slurm
• 88. درخواست GPU ها
• 89. مانیتورینگ استفاده از GPU
• 90. کاربرد GPU در یادگیری عمیق (Deep Learning)
• 91. اجرای Workflows پیچیده
• 92. مفهوم Workflow Orchestration
• 93. معرفی ابزارهای Workflow Orchestration
• 94. یکپارچه‌سازی Workflow Orchestration با Slurm
• 95. نکات پیشرفته در Job Submission
• 96. استفاده از `--array` با پارامترهای پیچیده
• 97. مدیریت متغیرهای محیطی پیشرفته
• 98. استفاده از Job Templates
• 99. نوشتن Job Scripts قابل استفاده مجدد
• 100. مدیریت Cluster بزرگ

🚀 دوره جامع کار با Slurm: قدرت محاسبات سطح بالا را در دستان خود بگیرید!

آیا به دنبال ارتقای مهارت‌های برنامه‌نویسی خود و ورود به دنیای هیجان‌انگیز محاسبات سطح بالا (HPC) هستید؟ آیا می‌خواهید از قدرت پردازشی سیستم‌های بزرگ و خوشه‌ای (cluster) برای حل مسائل پیچیده استفاده کنید؟ در این دوره آموزشی فوق‌العاده، ما شما را به دنیای سیستم‌های مدیریت منابع (Resource Managers) مانند Slurm، قدرتمندترین ابزار برای مدیریت و زمان‌بندی Job ها در محیط‌های HPC، می‌بریم. با این دوره، شما به یک متخصص Slurm تبدیل خواهید شد و می‌توانید از منابع سخت‌افزاری به بهترین نحو استفاده کنید و پروژه‌های خود را با سرعت و کارایی بی‌نظیر اجرا کنید.

این دوره برای شما یک تجربه یادگیری تعاملی و عملی را فراهم می‌کند. از مبانی Slurm گرفته تا تکنیک‌های پیشرفته، تمام آنچه برای تسلط بر این ابزار نیاز دارید را به شما آموزش می‌دهیم. با استفاده از مثال‌های عملی، تمرین‌های جذاب و پشتیبانی حرفه‌ای، شما به سرعت دانش و مهارت‌های لازم را کسب خواهید کرد و آماده خواهید بود تا در پروژه‌های واقعی HPC موفق شوید. همین امروز به جمع متخصصان Slurm بپیوندید!

📖 درباره دوره

این دوره، یک راهنمای جامع برای کار با سیستم مدیریت منابع Slurm است. شما در این دوره، با مفاهیم پایه‌ای HPC، نقش Slurm در مدیریت Job ها و منابع سخت‌افزاری، نحوه نوشتن و ارسال Job Script ها، مانیتورینگ Job ها، و بهینه‌سازی عملکرد سیستم آشنا می‌شوید. این دوره برای تمام سطوح دانشجو از مبتدی تا پیشرفته طراحی شده است. ما شما را قدم به قدم در این مسیر همراهی می‌کنیم تا به یک متخصص Slurm تبدیل شوید.

💡 موضوعات کلیدی دوره

• آشنایی با مفاهیم پایه محاسبات سطح بالا (HPC)
• نقش سیستم‌های مدیریت منابع (Resource Managers) در HPC
• معرفی Slurm و مزایای آن
• نصب و راه‌اندازی Slurm
• مدیریت Job ها با Slurm: sbatch, squeue, scancel
• نوشتن و ارسال Job Script های موثر
• مدیریت منابع: CPU, RAM, GPU, و ...
• مانیتورینگ و عیب‌یابی Job ها
• صف‌ها (Queues) و سیاست‌های زمان‌بندی
• مدیریت دسترسی و امنیت در Slurm
• بهینه‌سازی عملکرد و افزایش کارایی
• تکنیک‌های پیشرفته: Array Jobs, Dependencies و ...
• پشتیبانی از نرم‌افزارهای موازی (Parallel Programs)
• کاربرد Slurm در محیط‌های مختلف
• و بسیاری موضوعات دیگر!

👤 مخاطبان دوره

این دوره برای افراد زیر مناسب است:

• دانشجویان و محققان رشته‌های مهندسی، علوم کامپیوتر، فیزیک، شیمی و سایر رشته‌های مرتبط که با محاسبات سنگین سر و کار دارند.
• برنامه‌نویسان و متخصصان فناوری اطلاعات که می‌خواهند مهارت‌های خود را در زمینه HPC توسعه دهند.
• مدیران سیستم‌ها و متخصصان شبکه که مسئولیت مدیریت و نگهداری سیستم‌های HPC را بر عهده دارند.
• هر کسی که به دنبال یادگیری نحوه استفاده از Slurm و مدیریت منابع محاسباتی است.

🌟 چرا این دوره را بگذرانیم؟

با شرکت در این دوره، شما:

• یک مهارت بسیار ارزشمند و پرتقاضا در بازار کار به دست می‌آورید.
• قادر خواهید بود از منابع محاسباتی به صورت موثرتری استفاده کنید.
• سرعت اجرای پروژه‌های خود را به طور چشمگیری افزایش می‌دهید.
• به دنیای جذاب محاسبات سطح بالا وارد می‌شوید و با تکنولوژی‌های نوین آشنا می‌شوید.
• از پشتیبانی حرفه‌ای مدرسان و جامعه‌ی فعال فراگیران بهره‌مند می‌شوید.
• فرصت‌های شغلی و تحقیقاتی خود را به طور قابل توجهی افزایش می‌دهید.

📚 سرفصل‌های دوره (100+ سرفصل جامع!)

این دوره شامل بیش از ۱۰۰ سرفصل آموزشی جامع و عملی است که شما را از مبتدی تا پیشرفته در زمینه Slurm همراهی می‌کند. در ادامه، تنها تعدادی از سرفصل‌های اصلی را مشاهده می‌کنید:

• مقدمه‌ای بر محاسبات سطح بالا و نیاز به مدیریت منابع

• آشنایی با معماری سیستم‌های خوشه‌ای (Cluster)

• مقایسه سیستم‌های مدیریت منابع: Slurm, PBS, Grid Engine

• نصب و پیکربندی Slurm در محیط‌های مختلف (CentOS, Ubuntu)

• آشنایی با فایل‌های پیکربندی Slurm: slurm.conf, ctl.conf

• مدیریت کاربران و گروه‌ها در Slurm

• دستورات پایه Slurm: sinfo, sbatch, squeue, scancel

• نوشتن Job Script های ساده و پیشرفته

• مدیریت درخواست‌های منابع: CPU, RAM, GPU, زمان اجرا

• استفاده از پارتیشن‌ها (Partitions) و صف‌ها (Queues)

• مدیریت حافظه اشتراکی (Shared Memory) و فایل‌های موقت

• مانیتورینگ Job ها: sstat, sacct, sview

• عیب‌یابی Job ها و رفع مشکلات رایج

• استفاده از Slurm برای اجرای نرم‌افزارهای موازی (MPI, OpenMP)

• مدیریت آرایه‌های Job ها (Array Jobs)

• مدیریت وابستگی‌های Job ها (Job Dependencies)

• استفاده از Slurm برای برنامه‌های GPU-based

• تنظیم اولویت‌ها و سیاست‌های زمان‌بندی

• مدیریت دسترسی و امنیت در Slurm: ACL, Roles

• ادغام Slurm با سیستم‌های فایل توزیع‌شده (NFS, Lustre)

• بهینه‌سازی عملکرد و افزایش کارایی Slurm

• ایجاد گزارش‌ها و تجزیه و تحلیل استفاده از منابع

• مباحث پیشرفته: Fairshare, QoS, Accounting

• به‌روزرسانی و نگهداری Slurm

• کاربرد Slurm در محیط‌های مختلف: تحقیقاتی، صنعتی، دانشگاهی

• حل تمرین‌ها و پروژه‌های عملی

• و ده‌ها سرفصل کاربردی دیگر برای تسلط کامل بر Slurm!

همین امروز ثبت‌نام کنید و قدمی بزرگ در جهت پیشرفت شغلی و تحصیلی خود بردارید!

📦 مجموعه شامل:

• ✅ ویدیوهای فارسی
• ✅ پادکست های صوتی فارسی
• ✅ کتاب PDF فارسی
• ✅ کتاب ۱۰۰۰ نکته فارسی خودمونی
• ✅ کتاب ۱۰۰۰ نکته رسمی فارسی
• ✅ کتاب ۱۰۰۰ پرسش و پاسخ ۴ گزینه ای فارسی