اکنون به آپاچی Airflow 2.7 به‌روزرسانی شده است - تحویل داده‌ها بر اساس برنامه زمانی می‌تواند یک فرآیند دستی باشد. شما اسکریپت می نویسید، وظایف پیچیده cron را اضافه می کنید، و راه های مختلفی را برای برآورده کردن مجموعه ای از الزامات در حال تغییر امتحان می کنید - و مدیریت همه چیز هنگام کار با هم تیمی ها دشوارتر است. Apache Airflow می‌تواند این سردرد را با اضافه کردن زمان‌بندی، مدیریت خطا و گزارش‌دهی به گردش‌های کاری شما برطرف کند. در این دوره، شما بر اصول اولیه Apache Airflow مسلط خواهید شد و نحوه پیاده سازی خطوط لوله مهندسی داده پیچیده در تولید را یاد خواهید گرفت. همچنین یاد خواهید گرفت که چگونه از نمودارهای غیر چرخه ای جهت دار (DAGs) استفاده کنید، گردش کار مهندسی داده را خودکار کنید، و وظایف مهندسی داده را به روشی آسان و قابل تکرار اجرا کنید - به شما کمک می کند تا سلامت عقل خود را حفظ کنید.

در مقدمه‌ای بر Snowflake، پیمایش Snowflake، اجرای پرس‌وجوهای SQL در Snowsight، و مدیریت جذب و ادغام داده‌ها را خواهید آموخت. این دوره کنترل دسترسی مبتنی بر نقش، نظارت بر پرس و جو و بهینه سازی عملکرد را پوشش می دهد. برای مهندسان داده، تحلیلگران و متخصصان BI که به دنبال افزایش مهارت های انبارداری داده خود هستند ایده آل است. در پایان، در تکنیک‌های Snowflake SQL، داده‌ها، مدیریت، امنیت و بهینه‌سازی مهارت کسب خواهید کرد.

Great Expectations یک کتابخانه قدرتمند پایتون برای نظارت بر کیفیت داده ها در جریان کار علم داده و مهندسی است. یاد بگیرید که مجموعه داده های دنیای واقعی را به هم متصل کنید، Expectations را اعمال کنید، ویرایش کنید و حذف کنید، و خطوط لوله ایجاد کنید تا مجموعه داده های جدید در تولید را تأیید کنید. انتظارات برای ستون‌های عددی و رشته‌ای را بررسی می‌کنید و اعتبارسنجی‌ها را در ستون‌ها می‌نویسید. در پایان، مطمئن خواهید شد که داده‌هایتان با استانداردهای کیفیت مطابقت دارند.

با Snowflake به دنیای پویا مدل سازی داده ها قدم بگذارید! در حین استفاده از تئوری در تجربه عملی، بر اصول اصلی تسلط خواهید داشت و جنگل های داده را به باغ های روشنگر تبدیل می کنید. شما اسرار عادی سازی داده ها را کشف خواهید کرد و تکنیک هایی مانند رابطه موجودیت، مدل سازی ابعادی و خزانه داده را برای ایجاد انبارهای داده ابری کارآمد کشف خواهید کرد. معماری Snowflake قدرت پردازش موازی عظیم و قابلیت‌های بهینه‌سازی آن را در حین پیشرفت نشان می‌دهد. انتقال از یک یادگیرنده به یک دارایی استراتژیک، آماده برای تصمیم گیری های داده محور. ماجراجویی مدل سازی داده شما در انتظار است!

آیا شنیده‌اید که مردم در مورد مهندسان داده صحبت می‌کنند و تعجب می‌کنید که آنها چه کار می‌کنند؟ آیا می دانید مهندسان داده چه کار می کنند اما مطمئن نیستید که چگونه خودتان یکی شوید؟ این دوره مقدمه کاملی است. همه چیزهایی را که برای ساده‌سازی پردازش داده‌های خود باید بدانید، مورد بررسی قرار می‌دهد. این دوره مقدماتی زمینه کافی برای شروع کاوش در دنیای مهندسی داده را در اختیار شما قرار می دهد. برای افرادی که در شرکتی با چندین منبع داده کار می کنند و ایده روشنی در مورد نحوه استفاده از همه این منابع داده به روشی مقیاس پذیر ندارند، عالی است. اولین کسی باشید که این تکنیک ها را به شرکت خود معرفی می کند و کارمند ستاره شرکت شوید.