H2B Group to dynamiczna firma konsultingowa specjalizująca się w automatyzacji procesów biznesowych przy użyciu AI oraz wspieraniu rozwoju kariery specjalistów IT. Obecnie poszukujemy doświadczonego Senior Data Engineera do pracy przy innowacyjnym, długoterminowym projekcie dla globalnego lidera branży turystyki morskiej.
Zakres obowiązków
- Projektowanie i rozwój skalowalnej platformy danych w środowisku Azure Lakehouse z wykorzystaniem Azure Databricks.
- Implementacja wydajnych potoków przetwarzania danych typu batch oraz streaming przy użyciu Pythona, SQL i Apache Spark.
- Wdrażanie rozwiązań takich jak Unity Catalog oraz Delta Live Tables w celu modernizacji architektury danych.
- Zapewnienie wysokiej jakości, spójności i bezpieczeństwa danych oraz optymalizacja kosztów infrastruktury chmurowej.
- Współpraca z zespołami architektów i analityków w ramach procesów CI/CD oraz automatyzacja infrastruktury.
Wymagania
- Bardzo dobra znajomość Apache Spark oraz architektury Lakehouse.
- Zaawansowana biegłość w programowaniu w języku Python oraz zaawansowana znajomość SQL.
- Praktyczne doświadczenie w pracy z ekosystemem Microsoft Azure, w tym Azure Databricks, ADF oraz ADLS Gen2.
- Znajomość Delta Live Tables, Unity Catalog oraz narzędzi CI/CD w środowisku Azure DevOps.
- Znajomość języka angielskiego na poziomie minimum B2+/C1 umożliwiająca swobodną pracę w międzynarodowym zespole.
Co oferujemy
- Możliwość pracy przy zaawansowanych projektach dla globalnego klienta z branży turystycznej.
- Pełną elastyczność w wyborze projektów dopasowanych do Twoich kompetencji i zainteresowań.
- Przejrzyste zasady współpracy oraz wsparcie w rozwoju zawodowym w ramach grupy Euvic.
- Długoterminową współpracę w pełni zdalnym modelu pracy.