Senior Data Engineer
Job Description & Requirements
Kompyuter elmləri, informasiya elmləri, mühəndislik, riyaziyyat və ya əlaqəli texniki disiplin üzrə təhsil 5+ il SQL və NoSQL texnologiyaları ilə təcrübə Oracle və PostgreSQL verilənlər bazaları ilə güclü təcrübə ETL inkişafında geniş təcrübə, Python proqramlaşdırma bacarıqları ilə bərabər PySpark ilə geniş miqyaslı paylanmış verilənləri emal etmək üçün qabaqcıl bilik Airflow-dan mürəkkəb ETL/ELT iş axınlarını planlaşdırmaq, orkestrasiya etmək və izləmək üçün istifadə edir Kafka-da hadisə axını və mesajlaşma boru kəmərləri üzrə mütəxəssis MinIO (S3 uyğun saxlanma) ilə işləmə təcrübəsi, Parquet və Iceberg formatlarında verilənlərin idarə edilməsi Lakehouse anlayışları ilə tanışlıq MPP arxitektura anlayışları barədə dərin anlayış Aşağıdakı təcrübələr üstünlük olaraq nəzərə alınacaq: Big Data üzərində interaktiv SQL sorğuları üçün Impala ilə tanışlıq Greenplum ilə təcrübə Konteynerləşdirmə (Docker, Kubernetes) ilə tanışlıq Real vaxtda verilənlərin replikasiyası üçün Debezium və Oracle GoldenGate kimi CDC alətləri ilə təcrübə Verilənlərin vizuallaşdırılması alətləri (məsələn, Tableau, PowerBI və s.) ilə təcrübə DataOps və DevOps prinsiplərini anlamaq Verilənlərin modelləşdirilməsi və verilənlər bazası dizaynı haqqında bilgi Verilənlərin mühəndisliyi ilə bağlı ən yaxşı təcrübələr, məsələn, məlumatların təhlükəsizliyi, məlumatlara giriş nəzarəti və məlumatların idarə edilməsi barədə bilgi Metrikləri izləmək üçün Grafana haqqında bilgi GitLab ilə versiya nəzarəti sahəsində bacarıqlar Junior data mühəndislərinə mentorluq etmək və qarşılıqlı komandalarla (Data Scientist-lər, Analitiklər, DevOps) əməkdaşlıq etmək üzrə təcrübə.
Job Responsibilities
Yüksək məhsuldarlıqda və istehsal keyfiyyətli verilənlər platformasında vacib qəbul və lakehouse iş axınlarını idarə etmək üçün praktiki Leading / Senior Data Engineer axtarırıq.
Apply Now
This position requires application on the employer's website.