مهندس البيانات
AI71
نشرت قبل أكثر من 30 يومًا
أرسل لي وظائف مثل هذه
الجنسية
أي جنسية
جنس
غير مذكور
عدد الشواغر
1 عدد الشواغر
الوصف الوظيفي
الأدوار والمسؤوليات
ما ستقوم به:
- تطوير وإدارة خطوط بيانات:
- تصميم وتنفيذ وصيانة خطوط بيانات قابلة للتوسع وموثوقة لاستيعاب وتحويل وتحميل البيانات المنظمة وغير المنظمة والتغذيات الزمنية من مصادر متنوعة.
- إدارة خطوط البيانات للاستخدام التحليلي والتشغيلي، مع ضمان سلامة البيانات وموعدها ودقتها عبر الأنظمة.
- تنفيذ أدوات جودة البيانات وأطر التحقق ضمن خطوط التحويل.
- معالجة البيانات وتحسينها:
- بناء أنظمة فعالة وعالية الأداء من خلال الاستفادة من تقنيات مثل تفكيك البيانات، والتقسيم، والتخزين المؤقت، والمعالجة المتوازية.
- تطوير تطبيقات معالجة البيانات المتدفقة باستخدام Apache Kafka وتحسين الأداء لمجموعات البيانات الكبيرة.
- تمكين إثراء البيانات والترابط عبر المصادر الأساسية والثانوية والثالثة.
- هندسة السحابة والبنية التحتية والمنصة:
- تطوير ونشر سير عمل البيانات على AWS أو GCP، باستخدام خدمات مثل S3 وRedshift وPub/Sub أو BigQuery.
- تجميع مهام معالجة البيانات باستخدام Docker، وتنظيمها باستخدام Kubernetes، وضمان نشر بجودة الإنتاج.
- التعاون مع فرق المنصة لضمان قابلية التوسع والمرونة والرؤية لخطوط البيانات.
- هندسة قواعد البيانات:
- كتابة وتحسين استعلامات SQL المعقدة على قواعد البيانات العلائقية (Redshift، PostgreSQL) وNoSQL (MongoDB).
- العمل مع مجموعة ELK (Elasticsearch، Logstash، Kibana) للبحث والتسجيل والتحليلات الزمنية.
- دعم هياكل Lakehouse ونماذج تخزين البيانات الهجينة للوصول الموحد والمعالجة.
- حوكمة البيانات والإشراف:
- تنفيذ حوكمة بيانات قوية، وضوابط وصول، وسياسات إشراف متوافقة مع أفضل ممارسات الامتثال والأمان.
- إنشاء إدارة بيانات التعريف، وسلاسل البيانات، وقابلية التدقيق عبر خطوط الأنابيب والبيئات.
- تمكين التعلم الآلي والتحليلات المتقدمة:
- التعاون مع علماء البيانات لإعداد وتقديم الميزات لنماذج التعلم الآلي.
- الحفاظ على الوعي بدمج خطوط التعلم الآلي وضمان جاهزية البيانات للتجربة والنشر.
- التوثيق والتحسين المستمر:
- الحفاظ على توثيق شامل بما في ذلك المواصفات الفنية، ومخططات تدفق البيانات، وإجراءات التشغيل.
- تقييم وتحسين كومة هندسة البيانات باستمرار من خلال اعتماد تقنيات جديدة واستراتيجيات الأتمتة
الملف الشخصي المطلوب للمرشحين
ما ستجلبه:
- 8+ سنوات من الخبرة في هندسة البيانات ضمن بيئة الإنتاج.
- معرفة متقدمة بلغة Python وبرمجة shell في نظام Linux لمعالجة البيانات والأتمتة.
- خبرة قوية في قواعد بيانات SQL/NoSQL مثل PostgreSQL وMongoDB.
- خبرة في بناء أنظمة معالجة البيانات المتدفقة باستخدام Apache Kafka.
- إجادة استخدام Docker وKubernetes في نشر سير عمل البيانات المعبأة.
- فهم جيد لخدمات السحابة (AWS أو Azure).
- خبرة عملية مع مجموعة ELK (Elasticsearch، Logstash، Kibana) للبحث القابل للتوسع والتسجيل.
- إلمام نماذج الذكاء الاصطناعي التي تدعم إدارة البيانات.
- خبرة في العمل مع أنظمة Lakehouse، وتفكيك البيانات، وممارسات وضع العلامات على البيانات.
- درجة بكاليوس أو ماجستير في علوم الكمبيوتر أو الهندسة أو علوم البيانات أو مجال ذي صلة.
- نجاح مثبت في تصميم وتوسيع وتشغيل أنظمة البيانات في البيئات السحابية الأصلية والموزعة.
- قدرة مثبتة على العمل بشكل تعاوني مع الفرق متعددة التخصصات بما في ذلك مديري المنتجات، وعلماء البيانات، وDevOps.
- معرفة عملية بأدوات جودة البيانات، وتتبع السلاسل، وحلول رؤية البيانات.
- خبرة في ترابط البيانات، والإثراء من مصادر خارجية، وإدارة سلامة البيانات على نطاق واسع.
- فهم أطر حوكمة البيانات وبروتوكولات الامتثال المؤسسي.
- التعرض لخطوط CI/CD لنشر البيانات والبنية التحتية كرمز.
القطاع المهني للشركة
- تكنولوجيا المعلومات - خدمات البرمجيات
المجال الوظيفي / القسم
- سوفت وير تقنية المعلومات
الكلمات الرئيسية
- مهندس البيانات
تنويه: نوكري غلف هو مجرد منصة لجمع الباحثين عن عمل وأصحاب العمل معا. وينصح المتقدمون بالبحث في حسن نية صاحب العمل المحتمل بشكل مستقل. نحن لا نؤيد أي طلبات لدفع الأموال وننصح بشدة ضد تبادل المعلومات الشخصية أو المصرفية ذات الصلة. نوصي أيضا زيارة نصائح أمنية للمزيد من المعلومات. إذا كنت تشك في أي احتيال أو سوء تصرف ، راسلنا عبر البريد الإلكتروني abuse@naukrigulf.com
وظائف مماثلة
مهندس البيانات
Teliolabs Communication Private Limited
- 8 - 12 سنوات
- دبي - الإمارات العربية المتحدة
Data Engineer
Almoosa Specialist Hospital
- 3 - 8 سنوات
- Saudi Arabia - Saudi Arabia
Data Engineer
Devoteam International
- 4 - 9 سنوات
- Tunis - Tunisia
مهندس البيانات
Devoteam International
- 5 - 10 سنوات
- الرياض، المملكة العربية السعودية
مهندس البيانات
Dicetek LLC
- 5 - 10 سنوات
- دبي - الإمارات العربية المتحدة