محلل بيانات Informatica Data Engineer بدوام كامل في عمّان

وصف الوظيفة

تبحث شركة Systems Arabia في عمان، الأردن عن مهندس بيانات (Informatica Data Engineer) يمتلك خبرة عملية تتراوح بين 4 إلى 7 سنوات في مجال برمجيات Informatica Big Data Management (BDM) وApache Spark. سيكون مسؤولاً عن تصميم وتطوير وتحسين وصيانة حلول تكامل ومعالجة البيانات القابلة للتوسع عبر منصات البيانات المؤسسية.

المهام والمسؤوليات

• تصميم وتطوير وصيانة أنابيب البيانات (Data Pipelines) باستخدام Informatica BDM
• تطوير وتحسين سير عمل معالجة البيانات ضخمة الحجم باستخدام Apache Spark وPySpark
• بناء عمليات ETL/ELT قوية لمعالجة البيانات بالدفعات (Batch) وبالوقت القريب من الحقيقي (Near-real-time)
• تنفيذ عمليات استخراج البيانات وتحويلها وتنظيفها وتحميلها من أنظمة مصادر متعددة
• تطوير مخططات Informatica (Mappings)، وسير العمل (Workflows)، والتحويلات، والمكونات القابلة لإعادة الاستخدام
• العمل مع تقنيات منظومة Hadoop مثل HDFS وHive والمكونات ذات الصلة
• كتابة وتحسين مهام Spark لمعالجة كميات كبيرة من البيانات المهيكلة وشبه المهيكلة
• استكشاف أخطاء الأداء وجودة البيانات والبيئة الإنتاجية وإصلاحها عبر أنابيب Informatica وSpark
• تحسين أداء سير عمل ETL، ومهام Spark، واستعلامات SQL، وعمليات معالجة البيانات
• التعاون مع مهندسي معماريّة البيانات ومحللي البيانات وفرق الهندسة الأخرى لتنفيذ حلول البيانات
• تطبيق آليات التحقق من صحة البيانات، والمطابقة، ومعالجة الأخطاء، والمراقبة
• المشاركة في عمليات النشر، والدعم الفني للبيئة الإنتاجية، وإصدارات البرمجيات
• اتباع أفضل الممارسات في هندسة البيانات لضمان التوسع، والاعتمادية، والأمان، وإمكانية الصيانة
• إعداد التوثيق الفني لأنابيب البيانات والمخططات وسير العمل والعمليات التشغيلية

المتطلبات

• خبرة عملية تتراوح بين 4 إلى 7 سنوات في هندسة البيانات، وتقنيات ETL، أو تقنيات البيانات الضخمة (Big Data)
• خبرة عملية قوية في استخدام Informatica Big Data Management (BDM)
• خبرة قوية في استخدام Apache Spark، مع تفضيل كبير للخبرة في PySpark
• فهم جيد لمخططات Informatica، وسير العمل، والتحويلات، وعمليات تكامل البيانات
• مهارات قوية في SQL مع خبرة في تطوير الاستعلامات وتحسين الأداء
• خبرة في العمل مع تقنيات منظومة Hadoop مثل HDFS وHive
• خبرة في التعامل مع مجموعات البيانات الضخمة المهيكلة وغير المهيكلة
• فهم قوي لمفاهيم ETL/ELT ومبادئ مستودعات البيانات (Data Warehousing)
• خبرة في معالجة البيانات بالدفعات (Batch) والمعالجة الموزعة للبيانات
• معرفة جيدة بلغات البرمجة Python أو Scala لمعالجة البيانات والأتمتة
• خبرة في بيئات عمل Linux/Unix وكتابة سكريبتات الشيل (Shell Scripting)
• مهارات قوية في استكشاف الأخطاء وإصلاحها وتحسين الأداء (Performance Tuning)
• فهم ممارسات جودة البيانات، والتحقق من صحتها، ومعالجة الأخطاء
• خبرة في استخدام أدوات إدارة الإصدارات مثل Git
• مهارات تواصل وتحليل وحل مشكلات جيدة
• القدرة على العمل بشكل مستقل وكذلك بالتعاون مع فريق متعدد التخصصات

المهارات المطلوبة

• Informatica BDM
• Apache Spark
• PySpark
• ETL / ELT
• SQL
• Hadoop
• HDFS
• Hive
• Python
• Scala
• Linux / Unix
• Shell Scripting
• Git
• Data Warehousing

التعليقات

لا توجد تعليقات منشورة حتى الآن.