مهندس البيانات

Client of Xperts4

المشاركة في دورة تطوير منتج Airflow

تنفيذ / تطوير الأدوات والوظائف اللازمة للمنصة، بما يتماشى مع مهندس البيانات والفريق من خبراء البيانات.
> المساهمة في تطوير الرسوم البيانية الموجهة غير الدائرية (DAGs) المطلوبة للتشغيل السليم لمنصات البيانات والمخزن (AWS و Snowflake).
> تقديم الدعم الفني للمستخدمين النهائيين خلال استخدامهم للمنصة.
> التعامل مع التسليمات ونشر الكود.
> ضمان وضع تشغيل المنصة

تقديم دعم الإنتاج من المستوى 2 والمشاركة في حالات الأزمات.
> المساهمة في قاعدة معارف المنتج.
> الإبلاغ إلى مدير منصة Airflow بشأن أداء تكنولوجيا المعلومات، وحالة الصحة في الوقت الحقيقي، والمخاطر التشغيلية الرئيسية للمنصة.
> المساهمة في مجتمع تنسيق البيانات

تصرف كحلقة وصل رئيسية مع الفرق التي تستخدم المنصة: BI، المشاريع التجارية، علم البيانات، DataLake، إلخ.
> المشاركة في الاجتماعات الدورية مع المستخدمين لمشاركة أفضل الممارسات في الاستخدام والتطوير.
> نقل المعرفة إلى فريق الدعم الخارجي

إنتاج الوثائق اللازمة لنقل المعرفة: الدروس، الوثائق التشغيلية، إلخ.
> إجراء وقيادة جلسات نقل المعرفة من خلال عروض المنتجات.
> دعم الفريق الخارجي في تطوراتهم الأولية.
> مساعدة فريق الدعم في حل الحوادث/المشاكل.

المخرجات:

ترميز ونشر الإنتاج لـ DAGs في Airflow.
> تقارير اختبار الوحدة لـ DAGs المنفذة.
> المساهمة في الوثائق التي تقترح تطورات المنصة.
> تخطيط تسليم / تنفيذ خارطة الطريق عبر JIRA.
> توثيق أفضل ممارسات التطوير في Confluence.
> تحديثات حوادث وتذاكر الطلبات في JIRA.
> دعم قاعدة المعرفة (في ServiceNow و Confluence).
> مواد الاجتماعات ومحاضرها.

المهارات المطلوبة:

AWS Cloud/Data Engineer
> تنسيق العمليات: Airflow
> مبادئ ETL/ELT: dbt
> منهجية Agile Scrum/Kanban
> معرفة بنظام إدارة البيانات (ملف تعريف مهندس بيانات)
> أساسيات DevOps
> أساسيات مراقبة نظام تكنولوجيا المعلومات

المهارات الناعمة:

استباقي
> مستقل
> ديناميكي
> لاعب فريق / جيد في التواصل (ميزة إضافية)
> معرفة بالأدوات التالية:

Airflow (إلزامي)
> AWS
> Python
> Snowflake
> dbt
> JIRA/Confluence
> Jenkins
> Gitlab
> Terraform
> Kubernetes/Containers
> Elasticsearch/Kibana (ميزة إضافية)