Böyük Məlumat Mühəndisi
Job Description & Requirements
Missiya: Kompüter elmləri, informasiya elmləri, mühəndislik, riyaziyyat və ya əlaqəli texniki sahədə dərəcə. 5+ illik SQL və NoSQL texnologiyaları ilə təcrübə. Oracle və PostgreSQL bazaları ilə güclü təcrübə. ETL inkişafında geniş təcrübə, Python proqramlaşdırma bacarıqları ilə. Böyük ölçülü paylanmış məlumatların emalı üçün PySpark-da irəlilədici bilik. Kompleks ETL/ELT iş axınlarını planlaşdırmaq, orkestr etmək və izləmək üçün Airflow-da mütəxəssis. Hadisə axını və mesajlaşdırma boru xətləri üçün Kafka-da mütəxəssis. MinIO (S3 uyğun saxlama) ilə işləmə, Parquet və Iceberg formatlarında məlumatları idarə etmə. Lakehouse konsepsiyalarına aşinalıq. MPP arxitektura anlayışlarında dərin bilik. Aşağıdakı təcrübə üstünlük olaraq hesab olunacaq: Büyük Məlumat üzrə interaktiv SQL sorğuları üçün Impala ilə tanışlıq. Greenplum ilə təcrübə. Qutusallaşdırma (Docker, Kubernetes) ilə tanışlıq. Real vaxt məlumatların replikasiyası üçün CDC alətləri, məsələn, Debezium və Oracle GoldenGate ilə təcrübə. Məlumat vizuallaşdırma alətləri (məsələn, Tableau, PowerBI və s.) ilə təcrübə. DataOps və DevOps prinsiplərini başa düşmək. Məlumat modelini yaratma və məlumat bazası dizaynı biliyi. Məlumat mühəndisliyi ən yaxşı təcrübələri ilə (məlumat təhlükəsizliyi, məlumat erişim nəzarəti və məlumat idarəsi) tanışlıq. Metriği izləmək üçün Grafana biliyi. Versiya nəzarəti üçün GitLab ilə mütəxəssis. Gənc məlumat mühəndislərini mentorluq etmək və müxtəlif funksional komandalarla (Məlumat Elmiçiləri, Analitika, DevOps) əməkdaşlıq etmək.
Apply Now
This position requires application on the employer's website.