فلش‌کارت‌های آموزشی آموزش کاربردی مدیریت و تحلیل داده‌ها در BigQuery با استفاده از خط فرمان (CLI)

🎓 دوره آموزشی جامع

📚 اطلاعات دوره

عنوان دوره: دوره آموزش کاربردی مدیریت و تحلیل داده‌ها در BigQuery با استفاده از خط فرمان (CLI)

موضوع کلی: علوم داده و تحلیل کلان‌داده (Big Data Analytics)

موضوع میانی: کار با پلتفرم‌های ابری تحلیل داده و مدیریت پایگاه‌داده

📋 سرفصل‌های دوره

• 1. مبانی رایانش ابری و نقش پلتفرم گوگل در تحلیل کلان‌داده
• 2. معرفی سرویس BigQuery و ساختار انبار داده‌های ابری
• 3. نصب و پیکربندی ابزار خط فرمان gcloud در محیط‌های عملیاتی
• 4. احراز هویت و مدیریت دسترسی‌ها در پروژه GCP
• 5. ساختار پروژه‌ها و مجموعه داده‌ها در فضای ابری
• 6. ایجاد و مدیریت مجموعه داده‌ها (Datasets) با استفاده از دستورات CLI
• 7. طراحی جداول و تعریف اسکیما در محیط BigQuery
• 8. وارد کردن داده‌ها از فایل‌های محلی به جداول ابری
• 9. مدیریت فرمت‌های داده‌ای CSV و JSON در محیط خط فرمان
• 10. اجرای پرس‌وجوهای SQL پایه از طریق رابط خط فرمان
• 11. کار با دستورات bq برای مشاهده جزئیات جداول
• 12. فیلتر کردن و محدودسازی نتایج پرس‌وجوها در محیط CLI
• 13. مدیریت جداول پارتیشن‌بندی شده برای بهینه‌سازی عملکرد
• 14. استفاده از جداول موقت برای پردازش‌های میانی
• 15. نحوه خروجی گرفتن از نتایج پرس‌وجو به فایل‌های محلی
• 16. مدیریت مجوزهای دسترسی و نقش‌های IAM در سطح مجموعه داده
• 17. بهینه‌سازی پرس‌وجوها برای کاهش هزینه‌های پردازش ابری
• 18. استفاده از دستورات bq برای کپی کردن و انتقال داده‌ها
• 19. نظارت بر وضعیت اجرای کوئری‌ها و مدیریت خطاها
• 20. اتصال BigQuery به سرویس‌های ذخیره‌سازی ابری (Cloud Storage)
• 21. تجزیه و تحلیل لاگ‌های سیستم با استفاده از ابزارهای خط فرمان
• 22. بررسی کوتای مصرف و مدیریت هزینه‌های پردازش داده
• 23. کار با جداول خارجی (External Tables) در BigQuery
• 24. پیاده‌سازی فرآیندهای خودکارسازی تحلیل داده با اسکریپت‌های شل
• 25. امنیت داده‌ها و رمزنگاری در محیط BigQuery
• 26. مستندسازی و گزارش‌گیری از وضعیت پایگاه داده با CLI
• 27. تکنیک‌های پیشرفته در مدیریت کوئری‌های بزرگ
• 28. یکپارچه‌سازی BigQuery با ابزارهای تحلیل داده‌های محلی
• 29. پایش عملکرد و عیب‌یابی پرس‌وجوهای پیچیده
• 30. ارائه جمع‌بندی و راهکارهای عملیاتی برای مدیریت پایگاه‌های داده ابری