كبير مهندسي البيانات الضخمة

Client of Kalamntina

المسؤوليات

• تصميم، تطوير، وتحسين خطوط ETL/ELT باستخدام Informatica DE والأدوات ذات الصلة.
• بناء وصيانة حلول البث المباشر باستخدام Apache Kafka و Confluent.
• تطوير سير العمل للبيانات الكبيرة على Cloudera باستخدام Spark (Python/Scala).
• أتمتة وتنظيم خطوط البيانات باستخدام NiFi أو أدوات مشابهة.
• التعاون مع مهندسي البيانات، فرق BI، وأصحاب المصلحة في الأعمال لتقديم حلول قابلة للتوسع وموثوقة.
• ضمان جودة البيانات، والحكومة، والامتثال للأمان عبر خطوط الأنابيب.
• استكشاف مشكلات الأداء، القابلية للتوسع، والتكامل.
• توجيه المهندسين المبتدئين وتقديم المشورة الفنية.
• الحفاظ على الوثائق للتصميمات، خرائط البيانات، وإجراءات التشغيل.
• البقاء على اطلاع على بيانات كبيرة، البث، واتجاهات تكنولوجيا Informatica.

المؤهلات

• بكاليوس أو ماجستير في علوم الكمبيوتر أو نظم المعلومات أو مجال ذي صلة.
• 7+ سنوات من الخبرة العملية في هندسة البيانات مع تركيز قوي على Informatica DE.
• خبرة في تصميم ETL/ELT، نمذجة البيانات، وتخزين البيانات على نطاق واسع.
• مهارات قوية في SQL وبرمجة Python.
• خبرة مع Apache Kafka / Confluent و Apache Spark.
• خبرة عملية مع مجموعة Cloudera (HDFS، Hive، Impala).
• قدرة مثبتة في تحسين الأداء وتحسين خطوط الأنابيب.
• مهارات قوية في حل المشكلات، التعاون، والتواصل.
• شهادة Informatica تعتبر ميزة إضافية.
• مفضل: خبرة مع منصات السحابة (AWS، GCP، Azure)، DevOps (CI/CD، Git، Jenkins)، قواعد البيانات في الذاكرة، والتسليم Agile.