مهندس البيانات في داتابريكس ونمذجة بحيرة البيانات

First Abu Dhabi Bank

نظرة عامة على الوظيفة
يبحث بنك أبوظبي الأول عن مهندس بيانات ذو خبرة لقيادة مبادرات نمذجة البيانات وهندسة بحيرات البيانات على مستوى المؤسسة في أبوظبي. هذه الوظيفة مثالية لأخصائي بيانات يتمتع بخبرة عميقة في Databricks وUnity Catalog ونمذجة الأبعاد ضمن مجال البنوك. ستكون مسؤولاً عن بناء هياكل طبقة الذهب القوية، وإدارة البيانات الوصفية والحوكمة، وتحسين بنية البيانات للأداء والامتثال.

تفاصيل الوظيفة
الموقع: الإمارات العربية المتحدة
الموقع: أبوظبي
الصناعة: تكنولوجيا المعلومات (IT)
الوظيفة: هندسة البرمجيات / التطوير
الجنس: أي
جنسية المرشح: أي
الموقع المفضل للمرشح: أي
نوع الوظيفة: دوام كامل

المهام الأساسية

* تصميم وتنفيذ نماذج بيانات من فئة الذهب على نطاق المؤسسات باستخدام بنية بحيرة Databricks
* قيادة مبادرات نمذجة الأبعاد بما في ذلك تصميمات الحقائق / الأبعاد والأبعاد المتوافقة
* إدارة Unity Catalog: المخططات، ضوابط الوصول، وسم الأصول، وتتبع التدقيق
* تحسين أداء Delta Lake (مثل: ترتيب z، التخزين المؤقت، التقسيم، حجم الملفات)
* تطوير وفرض تعريفات البيانات، ومعايير البيانات الوصفية، والتناسق الدلالي
* إنشاء وصيانة المعجم التجاري وأصول القاموس البياني
* تنفيذ أطر العمليات والتتبع باستخدام Unity Catalog أو أدوات طرف ثالث
* كتابة استعلامات SQL وPySpark عالية الأداء لاستراتيجيات تنفيذ الدفعات واسترجاع البيانات
* ضمان الامتثال التنظيمي بما في ذلك الاحتفاظ بالسجلات، وتعتيم PII، وإدارة الوصول إلى البيانات

متطلبات المرشح

* 10+ سنوات من الخبرة كمهندس بيانات، نمذجة بيانات، أو مهندس بيانات
* إتقان في نمذجة الأبعاد وتصميم مخطط النجمة
* خبرة في Databricks (Delta Lake، DBSQL، Spark) وإدارة Unity Catalog
* إلمام بـ Airflow أو سير العمل الأصلي لـ Databricks للتنسيق
* مهارات قوية في SQL المتقدم وPySpark المتوسط
* خبرة عملية مع أدوات تتبع مثل Collibra، Atlan، أو Unity الأصلية
* فهم لمنتجات البنوك ومقاييس دورة حياة العملاء
* معرفة بسياسات الحوكمة ومتطلبات البيانات التنظيمية في البنوك