مصمم بيانات - Azure Databricks (الهندسة المعمارية للوسام)

Rackspace Technology

بصفتك مصمم بيانات، ستقوم بتصميم وتسليم نماذج بيانات منطقية وبدنية جاهزة للتنفيذ ضمن Azure Databricks (Delta Lake) وفقًا لالهندسة المعمارية للوسام (برونز، فضة، ذهب).

تضمن هذه الوظيفة أن يتمكن مهندسو البيانات من البدء في التطوير على الفور مع تعريفات مخطط واضحة، وهياكل SQL، وبدون أي غموض.

المسؤوليات الرئيسية

نمذجة البيانات والتصميم

• تطوير نماذج بيانات مفاهيمية ومنطقية وبدنية.
• تحديد المخططات، والكيانات، والسمات، والعلاقات، والمفاتيح، والقيود، وأنواع البيانات.
• توفير تعريفات SQL جاهزة لـ DDL للتنفيذ.
• تحديد بوضوح حبة جدول الحقائق وهياكل الأبعاد.

نمذجة الوسام في Azure Databricks

• تصميم نماذج هيكلية عبر:
• طبقة البرونز: الإدخال الخام، التحكم في المخطط.
• طبقة الفضة: بيانات نظيفة، متوافقة، موحدة.
• طبقة الذهب: نماذج أبعاد جاهزة للأعمال.
• تحديد منطق التحويل عبر الطبقات (برونز، فضة، ذهب).
• دمج أفضل ممارسات Delta Lake (التقسيم، الأداء، القابلية للتوسع).

تقنيات النمذجة المتقدمة

يتطلب خبرة عملية قوية في:

• الشكل الثالث الطبيعي (3NF)
• مخطط النجمة
• مخطط الثلج
• خزان البيانات (المحاور، الروابط، الأقمار الصناعية)

يجب أن يحدد بوضوح:

• حبة الحقائق
• استراتيجية المفتاح البديل
• الأبعاد المتغيرة ببطء (النوع 1 & 2)
• الأبعاد المتوافقة
• استراتيجية التجميع

الهندسة والتوافق مع الحوكمة

• ضمان استعداد النماذج للبناء لفرق هندسة البيانات.
• مراجعة التوافق بين التنفيذ والتصميم.
• الحفاظ على مخططات ER، وقاموس البيانات، ومستندات التوصيف.
• فرض معايير التسمية المؤسسية وأفضل ممارسات النمذجة.

المهارات والخبرة المطلوبة

• 5+ سنوات من الخبرة العملية في نمذجة البيانات.
• SQL قوية (DDL، التقسيم، مفاهيم الأداء).
• خبرة مثبتة في Azure Databricks و Delta Lake البيئات.
• فهم عميق للهندسة المعمارية للوسام.
• خبرة في مشاريع مستودع البيانات المؤسسي أو منصات البيانات الحديثة.
• إجادة أدوات نمذجة البيانات (ERwin، ER Studio، PowerDesigner، Lucidchart، أو ما شابه).