Start a conversation ↗

الوصف

ETL: جمع البيانات وتحويلها وتنسيق تدفقات الأعمال

ابنِ مسارات بيانات (Data Pipelines) موثوقة وقابلة للتكرار وخاضعة للمراقبة يومًا بعد يوم

  • 1 يوم — 7 ساعة
  • حضوري أو عن بُعد
  • متقدم
  • حتى 6 مشاركين

تُبنى تدفقات البيانات في كثير من الأحيان بالتراكم: نص برمجي للاستخراج هنا، وحدة ماكرو لإعادة المعالجة هناك، وملف يُرفع يدويًا كل صباح اثنين. وما لم يتعطل شيء، تبقى السلسلة قائمة. لكن في اليوم الذي يتغير فيه تنسيق أحد المصادر أو تفشل فيه إحدى المهام في الثالثة فجرًا، لا يعرف أحد أي البيانات يجب إعادة تشغيلها.

يتناول هذا البرنامج المكثف على مدى يوم واحد تصميم مسار ETL كامل: تحديد إطار المصادر، والتحويلات الموثَّقة، وضوابط الجودة، ثم التنسيق (Orchestration) مع معالجة حالات الفشل والاستعادة. يبني المشاركون تدفقًا متكاملًا من المصدر إلى المخرجات على مجموعة بيانات واقعية.

أهداف التعلّم

  • تحديد إطار احتياجات تدفق البيانات من خلال تعيين المصادر والوتيرة والأحجام
  • تصميم عملية استخراج البيانات وفقًا لنوع المصدر والمنهج التزايدي (Incremental)
  • هيكلة التحويلات في خطوات موثَّقة وقابلة لإعادة التشغيل
  • تطبيق ضوابط الجودة وقواعد رفض البيانات غير الصحيحة
  • تنسيق تسلسل المهام مع إدارة التبعيات وحالات الفشل
  • متابعة تشغيل المهام وتنظيم الاستعادة بعد وقوع حادث تقني

ما الذي يميّز هذا البرنامج

مسار بيانات كامل يُبنى خلال الجلسة من المصدر إلى جدول التقارير
حقن حالات فشل مقصودة لاختبار الاستعادة وخاصية عدم التأثر بالتكرار (Idempotence) في خطوات المعالجة
أعراف تسمية وتوثيق لمهام البيانات تُسلَّم للمشاركين

البرنامج

1تحديد الإطار والاستخراج

فهم المصادر قبل كتابة أول مهمة

  • جرد المصادر: قواعد البيانات والملفات وواجهات التطبيقات (APIs)
  • الاختيار بين الاستخراج الكامل والاستخراج التزايدي
  • التعامل مع التنسيقات وترميز المحارف والمناطق الزمنية
  • أحجام البيانات ونوافذ المعالجة وقيود الأنظمة المصدرية
  • رصد التغيرات الهيكلية على جانب المصدر

2التحويل والجودة

جعل البيانات قابلة للاستخدام والتحقق

  • تقسيم التحويلات إلى خطوات واضحة وقابلة للاختبار
  • توحيد البيانات المرجعية وإدارة المفاتيح
  • معالجة التكرارات والقيم الناقصة والسجلات التاريخية
  • قواعد الجودة وحدود الرفض ومنطقة الحجر (Quarantine)
  • توثيق قواعد العمل المطبَّقة

3التنسيق والتشغيل

تشغيل المسار دون إشراف مستمر

  • تسلسل المهام وإدارة التبعيات
  • جدولة تشغيل المهام وإدارة نوافذ المعالجة
  • الاستعادة بعد الحوادث وعدم التأثر بالتكرار وإعادة التشغيل الجزئي
  • السجلات (Logs) والتنبيهات ومؤشرات المراقبة
  • الانتقال إلى بيئة الإنتاج وإدارة الإصدارات

لمن هذا البرنامج

المطورون ومحللو البيانات والمسؤولون عن إعداد التقارير ومديرو قواعد البيانات ومديرو مشاريع ذكاء الأعمال (Business Intelligence).

المتطلبات المسبقة

معرفة عملية بلغة SQL والقدرة على كتابة نص برمجي بسيط للأتمتة.

المواعيد والمواقع

36 موعدًا مجدولًا بين نوفمبر 2026 وديسمبر 2027. تُؤكَّد المقاعد حسب ترتيب ورود الطلبات.

نوفمبر 2026

ديسمبر 2026

يناير 2027

فبراير 2027

مارس 2027

أبريل 2027

مايو 2027

يونيو 2027

سبتمبر 2027

أكتوبر 2027

نوفمبر 2027

ديسمبر 2027

لا يناسبكم أيٌّ من هذه المواعيد؟ نفتح دورات إضافية عند الطلب، ويمكن تنفيذ أي برنامج بشكل خاص لفريقكم.

التفاصيل العملية

قبل البرنامج
استبيان تحديد المستوى عبر الإنترنت. تُرسَل أهداف التطوير الخاصة بك إلى المدرب الذي يكيّف الحالات التطبيقية بما يتناسب مع بيئة عملك.
أساليب التدريب
مفاهيم نظرية وورش عمل وحالات تطبيقية. تُقدَّم مواد تدريبية رقمية وبطاقات منهجية.
التقييم
أسئلة اختيار من متعدد وتمارين محاكاة واقعية. تقييم المكتسبات في بداية البرنامج ونهايته، مع تقييم فوري وآخر بعد 60 يومًا.
بعد البرنامج
سنة كاملة من الوصول إلى منصة التعلم الإلكتروني. تقييم ذاتي للمهارات المكتسبة وجلسة متابعة بعد 30 يومًا مع المدرب.
طريقة التسجيل
التسجيل إلكترونيًا أو بناءً على عرض سعر.
مهلة الالتحاق
11 يوم عمل بعد تأكيد التسجيل.
إمكانية الوصول
البرنامج متاح لأصحاب الهمم (أصحاب الاحتياجات الخاصة). يُرجى التواصل مع مسؤول الدعم والتهيئة لدينا لتصميم حل مناسب لاحتياجاتكم: contact@mpf-academy.ae
مواعيد البدء
التحاق مستمر: إضافةً إلى الدورات المجدولة، يمكن بدء هذا البرنامج عند الطلب.