العودة إلى الدورات
متوسط
علوم البيانات والتحليلات
en
إدارة خطوط أنابيب هندسة البيانات باستخدام Apache Airflow
لينكد إن ليرنينج
منصة
· California, USA
عن هذه الدورة
انطلق في رحلة شاملة إلى إدارة خطوط أنابيب هندسة البيانات باستخدام Apache Airflow. تعلّم كيفية التعامل مع التحكم في الوصول القائم على الأدوار لضمان تشغيل آمن وفعّال لخطوط أنابيب البيانات. استعرض تفاصيل مهلات التنفيذ وإدارة المواعيد النهائية للحفاظ على سير العمل بكفاءة وفي الوقت المناسب. اكتشف كيفية جدولة الرسوم البيانية الموجهة غير الدورية (DAGs) بناءً على تحديثات أصول البيانات لتعظيم استجابة خط الأنابيب. تعرّف على كيفية الاستفادة من إضافات Airflow لتخصيص وتحسين واجهة المستخدم لزيادة الإنتاجية. شاهد كيفية إدارة التوازي في المهام باستخدام المجموعات (pools)، وتعلّم كيفية توسيع Airflow باستخدام منفّذ Celery للمعالجة الموزعة. تستهدف هذه الدورة محترفي هندسة البيانات الذين يسعون لاكتساب المعرفة والمهارات في إدارة خطوط الأنابيب. بنهاية الدورة ستكون أكثر قدرة على تنظيم وتوسيع سير عمل البيانات المعقدة بدقة وثقة.
المهارات المطلوبة مسبقاً
المهارات التي يُفضّل امتلاكها قبل الالتحاق بهذه الدورة
بايثون
إس كيو إل
مفاهيم أساسية في هندسة البيانات
المهارات المكتسبة
المهارات التي ستكتسبها عند إتمام هذه الدورة
خطوط معالجة البيانات
أباتشي إيرفلو (Apache Airflow)
التحكم في الوصول المعتمد على الأدوار (RBAC)
هندسة البيانات
إدارة سير العمل
المعالجة الموزعة
جدولة المهام
منفّذ Celery