JellyLabs Tech poszukuje doświadczonego Senior Data Engineera do pracy przy długoterminowym projekcie dla klienta z branży turystycznej. Twoim głównym zadaniem będzie rozwój globalnej platformy danych opartej na ekosystemie Azure, wspierającej zaawansowaną analitykę oraz inicjatywy AI/ML.
Zakres obowiązków
- Projektowanie, rozwój i utrzymanie skalowalnych rozwiązań w ramach Azure Data Platform (Azure Synapse, Databricks, Data Lakehouse).
- Wdrażanie i optymalizacja procesów ETL/ELT oraz tworzenie rozwiązań do przetwarzania danych przy użyciu Pythona, SQL i Apache Spark.
- Budowa i utrzymanie workflowów Databricks, Delta Live Tables oraz frameworków typu metadata-driven.
- Współpraca z architektami i interesariuszami biznesowymi w celu przekładania wymagań na wydajne rozwiązania techniczne.
- Wsparcie migracji platformy, w tym wdrożenia Unity Catalog oraz dbanie o jakość, bezpieczeństwo i wydajność danych.
Wymagania
- Biegła znajomość technologii: Apache Spark, Python, SQL oraz ekosystemu Azure (Databricks, Data Factory, Data Lake, Synapse).
- Doświadczenie w pracy z Delta Live Tables, Unity Catalog oraz praktyczna znajomość architektury Lakehouse.
- Znajomość narzędzi CI/CD, Azure DevOps oraz doświadczenie w automatyzacji infrastruktury i monitoringu.
- Silne umiejętności analityczne, samodzielność oraz proaktywne podejście do rozwiązywania problemów technicznych.
- Bardzo dobra komunikacja i doświadczenie w pracy w zespołach cross-funkcyjnych.
Co oferujemy
- Pracę przy ambitnym, globalnym projekcie w nowoczesnym środowisku chmurowym.
- Możliwość wpływu na architekturę danych i promowanie standardów inżynierskich.
- Współpracę w dynamicznym zespole z dużą dozą samodzielności i odpowiedzialności za dostarczane rozwiązania.