هندسة البيانات (Professional) — دليل الدراسة

دليل دراسة مرئي ومتوافق مع الامتحان لشهادة هندسة البيانات (Professional). تغطي ست وحدات أسس خطوط الأنابيب والتنسيق، والاستيعاب وCDC، والمعالجة الموزعة باستخدام Spark، والمستودعات البعدية وSCDs، وبحيرة البيانات وبيت البحيرة، وجودة البيانات والحوكمة وDataOps — مع رسوم Mermaid البيانية، وجداول المقارنة، والأمثلة العملية، وكتل الأكواد، والملخصات الرئيسية، والاختبارات الذاتية.

Key facts

• Course price: $195 (one-time payment)
• Field: Data Engineering & Analytics
• Prepares for: هندسة البيانات — المستوى الاحترافي
• 6 modules · 18 lessons · about 4 hours of lessons
• Self-paced, online, illustrated lessons

Course outline

1. خطوط الأنابيب والتنسيق — ETL مقابل ELT، الدفعي مقابل التدفقي، وتنسيق DAGs ذات القوة الذاتية والقابلة لإعادة التعبئة.
   • ETL مقابل ELT
   • معالجة الدفعات مقابل التدفق
   • التنسيق باستخدام DAGs
2. استيعاب البيانات — الملفات، APIs، الموصلات، والتقاط تغيير البيانات — إدخال البيانات بشكل موثوق.
   • أنماط الاستيعاب: الملفات وواجهات برمجة التطبيقات والموصلات
   • التقاط تغيير البيانات (CDC)
   • التحميلات التدريجية والمتكررة
3. المعالجة الموزعة و Spark — MapReduce، RDDs مقابل DataFrames، التقييم الكسول، التبديل والتقسيم.
   • من MapReduce إلى Spark
   • RDDs، DataFrames، التقييم الكسول
   • الخلطات، التقسيم والانضمامات
4. مستودع البيانات البعدي — حقائق وأبعاد Kimball، مخططات النجمة، أنواع SCD، و OLTP مقابل OLAP.
   • الحقائق، الأبعاد ونمط النجمة
   • الأبعاد متغيرة ببطء (SCD)
   • OLTP مقابل OLAP
5. بحيرات البيانات و Lakehouse — التخزين الكائني، Parquet/ORC، Delta/Iceberg، تطور المخطط، وهندسة الميدالية.
   • بحيرات البيانات وتنسيقات الملفات
   • بحيرة البيانات المنزلية: Delta وIceberg
   • هندسة الميدالية
6. الجودة، الحوكمة، و DataOps — اختبار جودة البيانات، المراقبة، النسب، الحوكمة، وضبط التكلفة/الأداء.
   • جودة البيانات، الاختبار والمراقبة
   • الحوكمة، تتبع النسب واتفاقيات البيانات
   • عمليات البيانات، التكلفة والأداء