أرسل لي وظائف مثل هذه
الخبرة
10 - 15 سنوات
موقع العمل
التعليم
بكالوريوس في التكنولوجيا/ الهندسة(أجهزة الكمبيوتر)
الجنسية
أي جنسية
جنس
غير مذكور
عدد الشواغر
1 عدد الشواغر
الوصف الوظيفي
الأدوار والمسؤوليات
إدارة وتحسين منصة بيانات Databricks.
ضمان توافر عالٍ، وأمان، وأداء نظم البيانات.
تقديم رؤى قيمة حول استخدام منصة البيانات.
تحسين الحوسبة والتخزين لمعالجة البيانات على نطاق واسع.
تصميم وصيانة مكتبات النظام (Python) المستخدمة في أنابيب ETL وحوكمة المنصة.
تحسين عمليات ETL
تحسين وضبط عمليات ETL الحالية من أجل أداء أفضل، وقابلية التوسع، والموثوقية.
المهارات
يجب أن تتوفر
حد أدنى 10 سنوات من الخبرة في تكنولوجيا المعلومات/البيانات.
حد أدنى 3 سنوات من الخبرة كمهندس منصة بيانات Databricks.
بكالوريوس في تكنولوجيا المعلومات أو مجال ذي صلة.
البنية التحتية والسحابة: Azure، AWS (خبرة في التخزين، الشبكات، الحوسبة).
البرمجة: إتقان PySpark للحوسبة الموزعة.
إتقان Python لتطوير ETL.
SQL: خبرة في كتابة وتحسين استعلامات SQL، ويفضل أن تكون مع خبرة في قواعد البيانات مثل PostgreSQL، MySQL، Oracle، أو Snowflake.
تخزين البيانات: خبرة في العمل مع مفاهيم تخزين البيانات ومنصة Databricks.
أدوات ETL: إلمام بأدوات ETL والعمليات
نمذجة البيانات: خبرة في النمذجة البُعدية، والتطبيع/عدم التطبيع، وتصميم المخططات.
تحكم الإصدار: إتقان أدوات التحكم في الإصدارات مثل Git لإدارة قواعد الشيفرات والتعاون في التطوير.
مراقبة أنابيب البيانات: إلمام بأدوات المراقبة (مثل: Prometheus، Grafana، أو نصوص المراقبة المخصصة) لتتبع أداء الأنابيب.
أدوات جودة البيانات: خبرة في تنفيذ التحقق من البيانات، والتنظيف، وإطارات الجودة، ويفضل أن تكون Monte Carlo.
من الجيد أن تتوفر
الحاويات والتنظيم: Docker، Kubernetes.
البنية التحتية كرمز (IaC): Terraform.
فهم لمجال بيانات الاستثمار (مطلوب).
الملف الشخصي المطلوب للمرشحين
نحن نبحث عن خبير يتمتع بمهارة عميقة كمهندس منصة DataBricks، يمتلك خبرة في هندسة البيانات. يجب أن يكون لدى هذا الفرد فهم شامل لكل من منصات البيانات وهندسة البرمجيات، مما يمكنه من دمج المنصة بشكل فعال ضمن نظام تكنولوجيا المعلومات.
القطاع المهني للشركة
- تكنولوجيا المعلومات - خدمات البرمجيات
المجال الوظيفي / القسم
- سوفت وير تقنية المعلومات
الكلمات الرئيسية
- مهندس/معماري منصة بيانات Databricks
تنويه: نوكري غلف هو مجرد منصة لجمع الباحثين عن عمل وأصحاب العمل معا. وينصح المتقدمون بالبحث في حسن نية صاحب العمل المحتمل بشكل مستقل. نحن لا نؤيد أي طلبات لدفع الأموال وننصح بشدة ضد تبادل المعلومات الشخصية أو المصرفية ذات الصلة. نوصي أيضا زيارة نصائح أمنية للمزيد من المعلومات. إذا كنت تشك في أي احتيال أو سوء تصرف ، راسلنا عبر البريد الإلكتروني abuse@naukrigulf.com