مهندس بيانات أول Property Finder Group

التقارير إلى:

مدير هندسة البيانات

ملخص

نحن نبحث عن مهندس بيانات موهوب ومتحمس لتعزيز قدرات هندسة البيانات لدينا في Property Finder في دبي. في هذا الدور، ستقوم بقيادة تطوير وصيانة حلول البيانات المتطورة، وبناء خطوط البيانات في الدفعة وفي الوقت الحقيقي. بالإضافة إلى ذلك، ستساهم في بناء وصيانة البنية التحتية اللازمة لعمليات هندسة البيانات.

من خلال التعاون مع الفرق متعددة التخصصات، ستساهم في بناء طبقات بيانات للخدمة الذاتية وتقديم رؤى حاسمة لمواءمة بنية البيانات مع استراتيجيات الأعمال الأوسع. سيكون لك دور في تقديم حلول مبتكرة وضمان أعلى معايير جودة البيانات.

المسؤوليات الرئيسية:

• تصميم وتنفيذ خطوط بيانات في الوقت الحقيقي في السحابة.
• تصميم وتنفيذ حلول ETL معقدة لمجموعات البيانات الكبيرة.
• تحسين وتعديل كود SQL و/أو Python للأداء.
• تصميم وصيانة نماذج البيانات للتخزين الفعال والاسترجاع.
• استكشاف وحل المشكلات المتعلقة بأداء خطوط البيانات.
• بناء وصيانة مجموعات بيانات للخدمة الذاتية لتسريع جهود ديمقراطية البيانات.
• المساهمة في المبادرات لإدارة وتحسين البنية التحتية.
• تنفيذ أفضل الممارسات للتحكم في الإصدارات والتعاون في Terraform.

تقنية التكنولوجيا لدينا:

اللغات: Java/Scala، SQL & Python

طوابير الرسائل: Kafka، Kinesis Data Streams

مخازن البيانات: Snowflake، Redshift، Clickhouse، S3

أداة تنسيق خطوط البيانات: Dagster (Legacy: Airflow)

المنصات والخدمات: Docker، Kubernetes

PaaS: AWS (ECS/EKS، DMS، Kinesis، Glue، Athena، S3 وغيرها.)

ETL: FiveTran & DBT للتحويل

IaC: Terraform (مع Terragrunt)