مهندس بيانات تداول

Keyrock

مهندس بيانات

نظرة عامة على المنصب

مهندس البيانات مسؤول عن تصميم وتنفيذ وصيانة بنية البيانات واستراتيجيتها في المؤسسة، وضمان جمع البيانات وتخزينها ومعالجتها بكفاءة وأمان لدعم ذكاء الأعمال، وتحليل البيانات، وممارسات تشغيل التعلم الآلي (MLOps).

المسؤوليات الرئيسية

• تصميم بنية البيانات: تخطيط وتنفيذ بنية بيانات قوية وقابلة للتوسع تدمج البيانات من مصادر متعددة وتدعم الاحتياجات التحليلية المتنوعة، مع تحسين التكاليف وتلبية متطلبات الأعمال.
• تنفيذ أنابيب هندسة البيانات: تصميم وتطوير أنابيب البيانات لعمليات استخراج البيانات وتحويلها وتحميلها (ETL)، وضمان جودة البيانات وتناسقها.
• تمكين ذكاء البيانات والتحليل: بناء وصيانة مستودعات البيانات، ومتاجر البيانات، وبحيرات البيانات لدعم مبادرات ذكاء الأعمال وتحليل البيانات.
• دعم ممارسات MLOps: التعاون مع علماء البيانات ومهندسي التعلم الآلي لتصميم وتنفيذ بنية البيانات والعمليات التي تدعم تطوير ونشر وصيانة نماذج التعلم الآلي.
• ضمان أمان البيانات والامتثال: تنفيذ تدابير الأمن والسياسات والإجراءات لحماية خصوصية البيانات والامتثال للوائح ذات الصلة.
• حوكمة البيانات وإدارتها: إنشاء وتطبيق سياسات ومعايير حوكمة البيانات لضمان جودة البيانات وسلامتها وسهولة الوصول إليها.
• التعاون مع الفرق متعددة التخصصات: العمل عن كثب مع مهندسي البيانات، وعلماء البيانات، ومحللي الأعمال، وغيرهم من أصحاب المصلحة لفهم متطلبات البيانات وترجمتها إلى حلول تقنية.
• البقاء على اطلاع بالتطورات التكنولوجية: متابعة أحدث التقنيات والاتجاهات في بنية البيانات، وهندسة البيانات، وMLOps لتحديد الفرص للتحسين والابتكار.
• تحسين أداء البيانات: مراقبة وتحليل أداء معالجة البيانات، وتحديد الاختناقات، وتنفيذ تحسينات لتعزيز الكفاءة وقابلية التوسع.
• التوثيق ومشاركة المعرفة: إنشاء وصيانة وثائق شاملة لبنية البيانات والنماذج وعمليات المعالجة.
  
  

المتطلبات التقنية

• خبرة واسعة في تصميم وتنفيذ بنية البيانات.
• معرفة قوية بمبادئ وممارسات هندسة البيانات.
• خبرة في تخزين البيانات، ونمذجة البيانات، ودمج البيانات.
• خبرة في MLOps وأنابيب التعلم الآلي.
• إجادة في SQL ولغات معالجة البيانات.
• خبرة مع منصات البيانات الكبيرة (بما في ذلك Apache Arrow وApache Spark وApache Iceberg وClickhouse) والبنية التحتية السحابية على AWS.
  
  

التعليم والمؤهلات

• درجة بكاليوس أو ماجستير في علوم الكمبيوتر، أو الهندسة، أو مجال ذي صلة، أو خبرة معادلة.
• الشهادات المفضلة (اختياري):
• مهندس بيانات سحابي من AWS
• مهندس عمليات التعلم الآلي من AWS
  

القيادة والتعاون

• شغف لبناء أنظمة قابلة للتوسع وموثوقة وآمنة في بيئة سريعة.
• القدرة على ترجمة المفاهيم التقنية المعقدة إلى رؤى واضحة وقابلة للتنفيذ للفرق التقنية.
• مهارات شخصية قوية مع القدرة على العمل بفعالية عبر الفرق متعددة التخصصات.
• مهارات ممتازة في حل المشكلات والتحليل.