مهندس بيانات كلوديرا

Midis Group

Job Title
مهندس بيانات كلوديرا
Job Scope
نبحث عن مهندس بيانات كلوديرا ذو خبرة قوية في كلوديرا CDP، هادوب، سبارك، هايف، وHDFS. سيكون المرشح المثالي مسؤولاً عن بناء وصيانة خطوط بيانات كبيرة، وتحسين سير العمل بالبيانات، ودعم بيئات الإنتاج لضمان الاعتمادية والأداء.
Main Duties and Responsibilities
•
تصميم وبناء وصيانة خطوط بيانات كبيرة باستخدام مكونات كلوديرا CDP.
•
تطوير وتحسين سير عمل ETL/ELT باستخدام أنظمة سبارك، هايف، وهادوب.
•
إدارة وصيانة تخزين HDFS، وضمان توفره وأدائه العالي.
•
تنفيذ أنشطة دعم الإنتاج، بما في ذلك حل المشكلات، والمراقبة، وضبط الأداء.
•
التعاون مع علماء البيانات، والمحللين، وفرق الهندسة الأخرى لدعم المبادرات المعتمدة على البيانات.
•
ضمان حوكمة البيانات، والأمان، والامتثال عبر بيئات البيانات الكبيرة.
•
استكشاف مشكلات مستوى الكلاستر المتعلقة باستخدام الموارد، والجدولة، والتكوين.
•
المشاركة في تصميم الحلول، ومناقشات الهندسة، والوثائق الفنية.
Position Requirements
•
خبرة عملية قوية مع كلوديرا CDP.
•
إجادة في نظام هادوب: HDFS، YARN، MapReduce، هايف، إمبالا.
•
خبرة قوية في العمل مع أباتشي سبارك (يفضل PySpark أو Scala).
•
فهم قوي للأنظمة الموزعة وهندسة البيانات الكبيرة.
•
خبرة في دعم الإنتاج واستكشاف المشكلات في بيئات البيانات الكبيرة.
•
مهارات SQL قوية وخبرة في تحسين الاستعلامات على نطاق واسع.
•
إلمام بلينكس، وبرمجة الشيل، وأدوات الأتمتة.
•
الخبرة في التحكم في الإصدارات (Git) وسير عمل CI/CD تعتبر ميزة.
Education
درجة البكاليوس في علوم الحاسوب أو أي مجال ذي صلة
Experience
•
خبرة مع منصات السحابة (AWS، Azure، GCP) لأحمال البيانات الكبيرة.
•
تعرض لـ Kafka، NiFi، Oozie، أو أدوات تنسيق بيانات مشابهة.
•
معرفة بـ Docker، Kubernetes، أو بيئات الحاويات.
•
فهم لمفاهيم الأمان، والتشفير، وحوكمة البيانات.
• #LI-GA2