مهندس بيانات أول

GSSTech Group

جمع وتحليل متطلبات الأعمال والتقنية لمبادرات هندسة البيانات وتحليل البيانات على مستوى المؤسسات.

أداء تحليل البيانات الاستكشافية (EDA) لتحديد أنماط البيانات، ومشاكل الجودة، ومتطلبات التحويل.

تصميم وتطوير وتحسين خطوط أنابيب البيانات القابلة للتوسع باستخدام PySpark وPython وتكنولوجيا البيانات الكبيرة.

استيعاب وتنظيف وتحويل ومعالجة مجموعات البيانات المنظمة وغير المنظمة من مصادر بيانات مؤسسية متعددة.

بناء سير عمل هندسة الميزات وخطوط أنابيب تحويل البيانات لدعم تطوير نماذج التعلم الآلي.

تطوير حلول معالجة بيانات موزعة آمنة وموثوقة وعالية الأداء.

التعاون بشكل وثيق مع قادة تقديم التحليلات، وعلماء البيانات، ومهندسي التعلم الآلي، والفرق متعددة التخصصات لتقديم حلول تعتمد على البيانات.

تحسين أحمال العمل في Spark وتنفيذ استراتيجيات تحسين الأداء للبيئات الموزعة على نطاق واسع.

ضمان جودة البيانات، والحوكمة، والقابلية للتوسع، والكفاءة التشغيلية عبر منصات البيانات.

المشاركة في مراسم Agile بما في ذلك تخطيط السبرينت، وتنظيف قائمة المهام، والاجتماعات اليومية، والجلسات الاسترجاعية.

المساهمة في مناقشات هندسة البيانات، والوثائق التقنية، وأفضل الممارسات الهندسية.

استكشاف مشاكل فشل خطوط أنابيب البيانات، وأعطال الأداء، والمشاكل الإنتاجية ضمن البيئات المؤسسية.

المهارات التقنية المطلوبة:

• خبرة قوية في تطوير Python وPySpark.
• خبرة عميقة في Apache Spark بما في ذلك تقنيات تحسين Spark وتحسين الأداء.
• خبرة قوية في تقنيات البيانات الكبيرة وأطر المعالجة الموزعة.
• خبرة عملية مع تكنولوجيا نظام Hadoop.
• إجادة قوية في SQL ومنطق تحويل البيانات المعقدة.
• خبرة في بناء وصيانة خطوط أنابيب بيانات التعلم الآلي وسير عمل هندسة الميزات.
• خبرة مع Git وأفضل ممارسات التحكم في الإصدارات.
• فهم قوي للأنظمة الموزعة، والهندسات القابلة للتوسع، وأطر معالجة البيانات.

من الجيد أن يكون لديك:

• التعرض لمنصات هندسة البيانات المعتمدة على السحابة.
• خبرة مع DevOps، CI/CD، وسير عمل النشر الآلي لمنصات البيانات.
• التعرض للبيانات المتدفقة في الوقت الحقيقي أو الهياكل المعتمدة على الأحداث.
• الإلمام بالتحليلات المؤسسية وبيئات الذكاء الاصطناعي/التعلم الآلي.

الكفاءات المطلوبة:

• مهارات تحليلية وحل مشاكل قوية.
• قدرة ممتازة على التواصل وإدارة أصحاب المصلحة.
• القدرة على العمل بشكل فعال في بيئات تسليم Agile ومتعددة الوظائف.
• عقلية ملكية قوية مع التركيز على القابلية للتوسع والجودة والتفوق في التسليم.
• القدرة على إدارة أولويات متعددة في برامج مؤسسية سريعة الخطى.
• مهارات تعاون قوية مع أصحاب المصلحة الفنيين والتجاريين.

خبرة المجال المفضلة:

• منصات بيانات مؤسسية
• الهندسة التحليلية وAI/ML
• البنوك / الخدمات المالية (مفضل)
• برامج التحول الرقمي على نطاق واسع