اختصاصي - خدمات البيانات والبنية التحتية Almosafer

نحن نبحث عن مهندس بيانات ماهر لتصميم وبناء وصيانة خطوط بيانات قابلة للتوسع ومنصات تمكن اتخاذ القرارات المعتمدة على البيانات عبر المؤسسة.

سيكون المرشح المثالي لديه خبرة قوية في هندسة البيانات الخلفية وانكشاف على أنظمة البيانات الكبيرة الحديثة والذكاء الاصطناعي.

المسؤوليات الرئيسية

• تصميم وتطوير وتحسين خطوط بيانات قابلة للتوسع باستخدام بايثون أو جافا.

• بناء وصيانة أطر ETL/ELT باستخدام Apache Spark (دفعة وتدفق).

• كتابة استعلامات SQL متقدمة لتحويل البيانات والتحقق منها وتحليلها.

• تطوير واجهات برمجة التطبيقات لمشاركة البيانات مع خدمات أخرى.

• دمج البيانات من مصادر متعددة منظمة وغير منظمة.

• التعاون مع علماء البيانات والمحللين وفرق المنتجات لدعم حالات استخدام التحليلات والتعلم الآلي.

• تنفيذ آليات التحقق من البيانات وتسجيل الأخطاء ومعالجتها.

• تحسين أداء خطوط البيانات وإدارة مجموعات البيانات واسعة النطاق.

المهارات التقنية المطلوبة

• خبرة برمجية قوية في بايثون و/أو جافا وسكالا.

• خبرة عملية مع Apache Spark (دفعة وتدفق).

• إجادة متقدمة في SQL (تحسين الاستعلام، الفهرسة، وظائف النوافذ).

• خبرة في البرمجة النصية (بايثون، باش، شل).

• مهارات تطوير واجهات برمجة التطبيقات (بايثون، جافا).

• فهم الأنظمة الموزعة وهياكل البيانات الكبيرة.

• معرفة جيدة في خدمات AWS (S3، RDS، Redshift، Glue، EMR، Athena، Lambda، إلخ).