این دوره جامع، شما را در یک سفر عملی و گام‌به‌گام برای ساخت و پیاده‌سازی یک پروژه کامل Azure Databricks با استفاده از Unity Catalog و رویکرد CICD (Continuous Integration and Continuous Delivery) هدایت می‌کند. این دوره به طور ویژه برای متخصصان داده، مهندسان داده، و توسعه‌دهندگانی طراحی شده است که می‌خواهند مهارت‌های خود را در Azure Databricks ارتقا داده و پروژه‌های مقیاس‌پذیر و قابل‌اعتماد را با استفاده از بهترین شیوه‌های مهندسی نرم‌افزار ایجاد کنند.

دوره به صورت فیزیکی بر روی یک فلش مموری ۳۲ گیگابایتی ارائه می‌شود، که به شما امکان دسترسی آسان و همیشگی به محتوای دوره را بدون نیاز به دانلود فراهم می‌کند. این امر به ویژه برای افرادی که دسترسی به اینترنت پرسرعت ندارند یا ترجیح می‌دهند محتوای آموزشی را به صورت آفلاین در اختیار داشته باشند، بسیار مناسب است.

در این دوره، شما با موارد زیر آشنا خواهید شد:

• مقدمه‌ای بر Azure Databricks: مروری بر معماری، قابلیت‌ها و مزایای استفاده از Azure Databricks برای پردازش داده‌های بزرگ.
• Unity Catalog: یادگیری نحوه استفاده از Unity Catalog برای مدیریت متادیتا، حاکمیت داده و کنترل دسترسی در سراسر فضای کاری Azure Databricks.
• CICD با Azure DevOps: پیاده‌سازی خطوط لوله CICD برای خودکارسازی فرآیند ساخت، آزمایش و استقرار پروژه‌های Databricks.
• بهترین شیوه‌های مهندسی داده: آشنایی با الگوها و تکنیک‌های طراحی برای ایجاد راه‌حل‌های داده‌های بزرگ مقیاس‌پذیر، قابل‌اعتماد و با کارایی بالا.
• مثال‌های عملی و پروژه‌های کاربردی: کار بر روی پروژه‌های واقعی که چالش‌ها و فرصت‌های رایج در دنیای مهندسی داده را شبیه‌سازی می‌کنند.

به طور خاص، شما خواهید آموخت که چگونه:

• یک فضای کاری Azure Databricks راه‌اندازی و پیکربندی کنید.
• Unity Catalog را فعال و پیکربندی کنید تا داده‌ها را به طور مرکزی مدیریت کنید.
• جداول و نماها را در Unity Catalog ایجاد و مدیریت کنید.
• سیاست‌های حاکمیت داده را با استفاده از Unity Catalog اعمال کنید.
• یک خط لوله CICD را در Azure DevOps برای پروژه‌های Databricks ایجاد کنید.
• کد Databricks را به طور خودکار آزمایش و مستقر کنید.
• راه‌حل‌های داده‌های بزرگ را با استفاده از Spark و Delta Lake بسازید.
• داده‌ها را از منابع مختلف بارگیری، تبدیل و بارگذاری کنید.
• عملکرد برنامه‌های Spark را بهینه‌سازی کنید.
• داده‌ها را با استفاده از ابزارهای تجسم داده، تجسم کنید.

با شرکت در این دوره، شما:

• مهارت‌های عملی و قابل استفاده در زمینه Azure Databricks، Unity Catalog و CICD به دست خواهید آورد.
• توانایی ساخت و استقرار پروژه‌های داده‌های بزرگ مقیاس‌پذیر و قابل‌اعتماد را پیدا خواهید کرد.
• آشنایی عمیقی با بهترین شیوه‌های مهندسی داده خواهید داشت.
• فرصت‌های شغلی خود را در زمینه مهندسی داده و علم داده افزایش خواهید داد.
• از یک شبکه پشتیبانی از متخصصان و همکاران بهره‌مند خواهید شد.

این دوره به شما کمک می‌کند تا:

• زمان و هزینه توسعه و استقرار پروژه‌های داده را کاهش دهید.
• کیفیت و قابلیت اطمینان راه‌حل‌های داده خود را بهبود بخشید.
• حاکمیت داده و امنیت را در سازمان خود افزایش دهید.
• نوآوری و سرعت را در فرآیندهای تصمیم‌گیری مبتنی بر داده افزایش دهید.

برای شرکت در این دوره، توصیه می‌شود که:

• آشنایی اولیه با مفاهیم ابر داشته باشید.
• تجربه کار با زبان‌های برنامه‌نویسی مانند Python یا Scala داشته باشید.
• درک پایه‌ای از مفاهیم داده‌های بزرگ و پردازش داده داشته باشید.
• آشنایی با Azure DevOps یک مزیت محسوب می‌شود، اما ضروری نیست.

اگر با هیچ‌کدام از این پیش‌نیازها آشنا نیستید، نگران نباشید! این دوره به گونه‌ای طراحی شده است که مفاهیم اساسی را به طور خلاصه پوشش دهد و شما را برای یادگیری مفاهیم پیشرفته آماده کند.

این دوره به بخش‌های مختلفی تقسیم شده است که هر بخش به یک موضوع خاص اختصاص دارد. در هر بخش، شما با مفاهیم نظری آشنا خواهید شد و سپس با انجام تمرین‌ها و پروژه‌های عملی، این مفاهیم را در عمل به کار خواهید برد.

به عنوان مثال، در بخش مربوط به Unity Catalog، شما یاد خواهید گرفت که چگونه:

1. Unity Catalog را فعال و پیکربندی کنید.
2. متااستورها، کاتالوگ‌ها و طرحواره‌ها را ایجاد کنید.
3. جداول و نماها را ایجاد و مدیریت کنید.
4. مجوزها را به کاربران و گروه‌ها اختصاص دهید.
5. خط مشی‌های داده را اعمال کنید.

سپس، شما با انجام یک پروژه عملی، این مهارت‌ها را در یک سناریوی واقعی به کار خواهید برد. این پروژه ممکن است شامل موارد زیر باشد:

• ایجاد یک کاتالوگ داده برای یک شرکت خرده‌فروشی.
• مدیریت دسترسی به داده‌های فروش و مشتریان.
• اجرای خط مشی‌های داده برای محافظت از اطلاعات حساس.

به طور مشابه، در بخش مربوط به CICD، شما یاد خواهید گرفت که چگونه:

1. یک پروژه Azure DevOps ایجاد کنید.
2. یک مخزن Git راه‌اندازی کنید.
3. یک خط لوله ساخت ایجاد کنید.
4. یک خط لوله استقرار ایجاد کنید.
5. کد Databricks را به طور خودکار آزمایش کنید.
6. کد Databricks را به طور خودکار در محیط‌های مختلف مستقر کنید.

و سپس، شما با انجام یک پروژه عملی، این مهارت‌ها را در یک سناریوی واقعی به کار خواهید برد. این پروژه ممکن است شامل موارد زیر باشد:

• ایجاد یک خط لوله CICD برای یک پروژه پردازش داده‌های بزرگ.
• خودکارسازی فرآیند ساخت، آزمایش و استقرار برنامه‌های Spark.
• ادغام ابزارهای نظارت و هشداردهی در خط لوله CICD.

این رویکرد عملی و گام‌به‌گام، به شما کمک می‌کند تا مفاهیم را به طور عمیق درک کرده و مهارت‌های لازم برای موفقیت در پروژه‌های واقعی را کسب کنید.

این دوره جامع Azure Databricks با Unity Catalog و CICD، یک فرصت بی‌نظیر برای ارتقای مهارت‌های شما در زمینه مهندسی داده و ساخت راه‌حل‌های داده‌های بزرگ مقیاس‌پذیر و قابل‌اعتماد است. ارائه دوره بر روی فلش مموری ۳۲ گیگابایتی، دسترسی آسان و همیشگی به محتوای آموزشی را تضمین می‌کند. با شرکت در این دوره، شما نه تنها مهارت‌های فنی خود را بهبود می‌بخشید، بلکه فرصت‌های شغلی خود را نیز افزایش می‌دهید و به یک متخصص مورد تقاضا در صنعت داده تبدیل می‌شوید.