به دنیای مهندسی داده با دوره جامع Azure Data Factory ما خوش آمدید! این دوره، که بر روی یک فلش مموری 32 گیگابایتی ارائه می‌شود، طراحی شده است تا شما را به یک مهندس داده ماهر تبدیل کند. با تمرکز بر پروژه عملی کووید-۱۹، شما با چالش‌های واقعی دنیای داده روبرو خواهید شد و مهارت‌های لازم برای حل آن‌ها را کسب خواهید کرد.

Azure Data Factory (ADF) یک سرویس یکپارچه‌سازی داده مبتنی بر ابر است که به شما امکان می‌دهد گردش‌های کاری داده محور (Data-driven workflows) ایجاد کنید تا داده‌ها را از منابع مختلف جمع‌آوری، آماده‌سازی و تبدیل کرده و به مخزن‌های داده مورد نظر منتقل کنید. ADF ابزاری قدرتمند برای ساخت خطوط انتقال داده (Data Pipelines) است که به شما کمک می‌کند تا داده‌ها را به طور موثر مدیریت و پردازش کنید.

• یکپارچه‌سازی داده‌ها: ادغام داده‌ها از منابع مختلف (بانک‌های اطلاعاتی، فایل‌ها، سرویس‌های ابری و غیره).
• تبدیل داده‌ها: پاکسازی، تغییر شکل و غنی‌سازی داده‌ها برای تحلیل و گزارش‌گیری.
• اتوماسیون گردش کار: خودکارسازی فرآیندهای انتقال و پردازش داده‌ها.
• مقیاس‌پذیری: مدیریت حجم بالای داده‌ها و پردازش آن‌ها به صورت موازی.

این دوره به گونه‌ای طراحی شده است که هم برای افراد مبتدی و هم برای مهندسان داده با تجربه مفید باشد. شما با مفاهیم اساسی ADF شروع می‌کنید و به تدریج به موضوعات پیشرفته‌تر می‌پردازید. تمرکز اصلی دوره بر روی پروژه عملی کووید-۱۹ است که به شما امکان می‌دهد دانش خود را در یک محیط واقعی به کار ببرید.

• مقدمه‌ای بر Azure Data Factory: آشنایی با مفاهیم پایه و معماری ADF.
• ایجاد و پیکربندی Data Factories: نحوه ایجاد و مدیریت ADF در پورتال Azure.
• اتصالات (Connections) و مجموعه داده‌ها (Datasets): نحوه اتصال به منابع داده مختلف و تعریف مجموعه داده‌ها.
• فعالیت‌ها (Activities) و خطوط انتقال داده (Pipelines): نحوه ایجاد خطوط انتقال داده با استفاده از فعالیت‌های مختلف.
• جریان‌های داده (Data Flows): استفاده از Data Flows برای تبدیل داده‌ها به صورت بصری.
• فعال‌سازی و نظارت (Triggering and Monitoring): نحوه فعال‌سازی خطوط انتقال داده و نظارت بر اجرای آن‌ها.
• ادغام با سایر سرویس‌های Azure: استفاده از ADF با سرویس‌های دیگری مانند Azure Blob Storage، Azure SQL Database، Azure Databricks و Azure Synapse Analytics.
• پروژه عملی کووید-۱۹: جمع‌آوری، پردازش و تحلیل داده‌های مربوط به کووید-۱۹ با استفاده از ADF.

پروژه اصلی این دوره، تحلیل داده‌های کووید-۱۹ است. شما یاد خواهید گرفت که چگونه:

• داده‌ها را از منابع مختلف (مانند وب‌سایت‌ها، APIها، و فایل‌های CSV) جمع‌آوری کنید.
• داده‌ها را پاکسازی و تبدیل کنید تا برای تحلیل آماده شوند.
• داده‌ها را به یک مخزن داده مرکزی (مانند Azure SQL Database یا Azure Data Lake Storage) منتقل کنید.
• گزارش‌ها و داشبوردهای تحلیلی را بر اساس داده‌های کووید-۱۹ ایجاد کنید.

این پروژه به شما کمک می‌کند تا مهارت‌های خود را در یک سناریوی واقعی به کار ببرید و با چالش‌های مربوط به مدیریت داده‌های حجیم و متنوع آشنا شوید. به عنوان مثال، شما ممکن است داده‌های مربوط به تعداد مبتلایان، مرگ و میر، واکسیناسیون و محدودیت‌های اعمال شده را از منابع مختلف جمع‌آوری کرده و با استفاده از ADF آن‌ها را با یکدیگر ادغام کنید. سپس، می‌توانید از این داده‌ها برای تحلیل روند شیوع بیماری و ارزیابی اثربخشی سیاست‌های بهداشتی استفاده کنید.

با انجام این پروژه، شما نه تنها مهارت‌های فنی خود را تقویت می‌کنید، بلکه درک عمیق‌تری از کاربردهای عملی مهندسی داده در دنیای واقعی پیدا خواهید کرد.

با شرکت در این دوره، شما از مزایای زیر بهره‌مند خواهید شد:

• یادگیری عملی: تمرکز بر پروژه عملی کووید-۱۹ به شما امکان می‌دهد تا دانش خود را در یک محیط واقعی به کار ببرید.
• مهارت‌های مورد نیاز صنعت: ADF یکی از پرکاربردترین ابزارها در صنعت مهندسی داده است. با یادگیری این ابزار، شما فرصت‌های شغلی بیشتری خواهید داشت.
• مربیان مجرب: دوره توسط متخصصان باتجربه در زمینه مهندسی داده تدریس می‌شود.
• دسترسی آفلاین: ارائه دوره بر روی فلش مموری 32 گیگابایتی به شما امکان می‌دهد تا در هر زمان و مکانی به محتوای دوره دسترسی داشته باشید.
• پشتیبانی: در طول دوره، شما از پشتیبانی فنی برخوردار خواهید بود و می‌توانید سوالات خود را از مربیان بپرسید.

برای شرکت در این دوره، آشنایی اولیه با مفاهیم زیر توصیه می‌شود:

• مفاهیم پایه پایگاه داده (مانند SQL).
• مفاهیم پایه ابر (مانند Azure).
• آشنایی با زبان برنامه‌نویسی (اختیاری، اما مفید).

اگر با هیچ‌کدام از این مفاهیم آشنایی ندارید، نگران نباشید! دوره به گونه‌ای طراحی شده است که شما را از سطح مبتدی به سطح پیشرفته برساند. اما داشتن پیش‌زمینه اولیه به شما کمک می‌کند تا مطالب را بهتر درک کنید.

• بخش اول: مقدمه‌ای بر Azure Data Factory و مفاهیم پایه.
• بخش دوم: ایجاد و پیکربندی Data Factories، اتصالات و مجموعه داده‌ها.
• بخش سوم: فعالیت‌ها، خطوط انتقال داده و جریان‌های داده.
• بخش چهارم: فعال‌سازی، نظارت و ادغام با سایر سرویس‌های Azure.
• بخش پنجم: پروژه عملی کووید-۱۹ (جمع‌آوری، پردازش، تحلیل و گزارش‌گیری داده‌ها).
• بخش ششم: نکات و ترفندهای پیشرفته در ADF و بهترین شیوه‌ها.

دوره Azure Data Factory برای مهندسان داده، فرصتی بی‌نظیر برای یادگیری مهارت‌های مورد نیاز صنعت و تبدیل شدن به یک متخصص در زمینه مهندسی داده است. با تمرکز بر پروژه عملی کووید-۱۹، شما نه تنها با ابزار قدرتمند ADF آشنا می‌شوید، بلکه مهارت‌های لازم برای حل چالش‌های واقعی دنیای داده را نیز کسب خواهید کرد. این دوره، که بر روی فلش مموری 32 گیگابایتی ارائه می‌شود، به شما امکان می‌دهد تا در هر زمان و مکانی به محتوای دوره دسترسی داشته باشید و با اطمینان به سمت آینده‌ای روشن‌تر در زمینه مهندسی داده قدم بردارید.