الوصف الوظيفي

الأدوار والمسؤوليات

حول الدور: نحن نبحث عن مهندس بيانات ماهر للانضمام إلى فريقنا في حيدر أباد، تيلانغانا. في هذا الدور، ستقوم بتصميم وبناء وصيانة أنابيب البيانات والهياكل القابلة للتوسع التي تدعم مبادرات التحليلات وعلوم البيانات. ستتعاون مع فرق متعددة الوظائف لضمان توفر البيانات وجودتها وأدائها عبر البيئات المحلية والسحابية. المسؤوليات: تصميم وتطوير وصيانة أنابيب ETL القابلة للتوسع لاستيراد ومعالجة وتحويل كميات كبيرة من البيانات تحسين وضبط سير العمل الخاص بالبيانات للأداء والموثوقية وكفاءة التكلفة تنفيذ وإدارة سير العمل باستخدام Apache Airflow أو أدوات التنسيق المكافئة تطوير وظائف Spark لحالات استخدام معالجة الدفع والتدفق التعاون مع علماء البيانات والمحللين وأصحاب المصلحة لفهم متطلبات البيانات وترجمتها إلى حلول تقنية ضمان جودة البيانات وسلامتها من خلال الاختبار الآلي والتحقق والمراقبة نشر وصيانة حلول البيانات على منصات السحابة (AWS، GCP)، مستفيدًا من خدمات مثل S3 وRedshift وBigQuery وDataflow توثيق نماذج البيانات وهياكل الأنابيب والعمليات التشغيلية حل المشكلات وحل الحوادث الإنتاجية، مما يضمن توفرًا وموثوقية عالية المؤهلات المطلوبة: 4+ سنوات من الخبرة العملية في دور هندسة البيانات إتقان Python لاستخراج البيانات وتحويلها وكتابة السكربتات مهارات SQL قوية وخبرة مع قواعد البيانات العلائقية خبرة مثبتة في تصميم وصيانة أنابيب ETL خبرة عملية مع Apache Spark لعمليات الدفع والتدفق خبرة مع Apache Airflow أو أطر التنسيق المماثلة فهم قوي لمبادئ وهياكل تخزين البيانات خبرة في نشر وإدارة حلول البيانات على AWS أو GCP درجة البكالوريوس في علوم الكمبيوتر أو الهندسة أو مجال ذي صلة مهارات اتصال وتعاون ممتازة المؤهلات المفضلة: خبرة في العمل مع كل من بيئات السحابة AWS وGCP شهادة احترافية في AWS أو GCP أو تقنيات البيانات الكبيرة معرفة بأدوات الحاويات وأدوات التنسيق مثل Docker وKubernetes خبرة في منصات البث المباشر (مثل Kafka) معرفة بأفضل ممارسات نمذجة البيانات وأدوات BI (مثل Looker وTableau) خبرة في تنفيذ خطوط أنابيب CI/CD لأحمال بيانات

مهندس البيانات TASC Outsourcing