مهندس منصة البيانات

AVL

AVL Maroc SARL AU offers a job in Morocco (MA) as

مهندس منصة البيانات

مسؤولياتك:

• مراجعة واستقرار تنفيذات المنصة الحالية (Databricks، Foundry pipelines، Ontology schemas، تطبيقات ورشة العمل، الوظائف، دفاتر الملاحظات).

• تحديد عنق الزجاجة في الأداء، الدين الفني، وفجوات الحوكمة عبر خطوط أنابيب البيانات وطبقات التطبيقات.

• قيادة مراجعات حوكمة Ontology والتصميم، والعمل كحارس على جميع تغييرات المخطط (أنواع الكائنات، الروابط، الخصائص، الإجراءات).

• تحديد وتوثيق هياكل البيانات المستهدفة (الاستيعاب، التحويل، وطبقات الاستهلاك).

• إنشاء معايير الترميز، اتفاقيات التسمية، هياكل المستودع، وسياسات إصدار الوظائف.

• فرض مراجعات الكود والتحقق الفني قبل نشر الإنتاج من خلال فروع Foundry وعملية الاقتراح.

• تحديد وتنفيذ استراتيجية اختبار منظمة (اختبارات وحدات للوظائف، اختبارات تكامل، فحوصات جودة البيانات، توقعات خطوط الأنابيب).

• تصميم وتحسين خطوط أنابيب CI/CD وعمليات ترقية Dev/Test/Prod باستخدام Foundry Marketplace/DevOps.

• أتمتة النشر، والتراجع، وتكوينات البيئة.

• إنشاء وصيانة وثائق الهندسة المعمارية (ADRs، مخططات خط البيانات، مخططات Ontology، مخططات تدفق البيانات).

• تصميم مكتبات مكونات ورشة العمل القابلة لإعادة الاستخدام، الأدوات المخصصة، وأنماط تطبيق Slate.

• تصميم والتحقق من صحة حلول المنصة الجديدة المتوافقة مع الاستراتيجية ومتطلبات الأمان والحوكمة.

• توجيه فريق التطوير حول التفكير المعماري وأفضل الممارسات للمنصة (40% برمجة مباشرة، 60% عمارة/قيادة).

ملفك الشخصي:

• ماجستير في علوم الكمبيوتر، هندسة البيانات، أو مجال ذي صلة.

• 5+ سنوات من الخبرة في هندسة البيانات أو أدوار معمارية المنصات.

• خبرة قوية في المنصات الحديثة للبيانات (Databricks، Snowflake، AWS Glue، Azure Synapse، أو ما شابه). تجربة Foundry مفضلة بشكل كبير ولكنها ليست مطلوبة.

• مهارات متقدمة في Python (PySpark)، SQL (Spark SQL)، وTypeScript للمنطق الخلفي وتطوير التطبيقات.

• خبرة في معالجة البيانات الموزعة (بنية Spark، استراتيجيات التقسيم، تحسين الأداء).

• فهم قوي لقواعد البيانات العلائقية (PostgreSQL، Oracle، أو ما شابه).

• خبرة في سير العمل CI/CD، استراتيجيات تفرع Git، والاختبار الآلي في بيئات البيانات.

• خبرة ثابتة في عمليات ETL وتحويل البيانات من البداية إلى النهاية.

• خبرة مثبتة في تحسين الأداء وتصميم بنية قابلة للتوسع.

• خبرة في تحديد معايير التطوير، عقود الواجهة، وأفضل الممارسات الهندسية.

• >ذهنية برمجة عملية: يجب كتابة كود الإنتاج يوميًا، وليس مجرد مراجعة أو توثيق.

• >نهج منظم، تحليلي، وموجه نحو الوثائق.

• >مهارات قوية في التواصل والقيادة التقنية، مع إتقان جيد جدًا للغة الإنجليزية والفرنسية.

• >دور مع ملكية تقنية حقيقية: قرارات الهندسة، التوسع، والحوكمة التي تؤثر مباشرة على حلول الذكاء الاصطناعي في الإنتاج.

• >مشاريع معقدة تتجاوز مجرد خطوط الأنابيب تغطي معالجة البيانات الكبيرة ونشر ML/DL على نطاق واسع.

• >فرص لتعميق خبرتك في Databricks، ML السحابية، وMLOps.

• >فريق حيث تهم مدخلاتك وقراراتك التقنية حقًا.

• >حزمة تنافسية ومزايا.