Senior Data Engineer

Clurgo to firma stworzona przez developerów dla developerów, łącząca pełne spektrum kompetencji w realizacji różnorodnych projektów IT. Dołącz do naszego zespołu, aby rozwijać skalowalne rozwiązania danych w ekosystemie Microsoft Azure i tworzyć technologie, które mają realne znaczenie dla klientów na całym świecie.

Zakres obowiązków

• Projektowanie, rozwój i utrzymanie skalowalnych rozwiązań danych w środowisku Azure, ze szczególnym uwzględnieniem Azure Databricks oraz architektury Data Lakehouse.
• Tworzenie i optymalizacja zaawansowanych pipeline’ów ETL/ELT służących do pobierania, transformowania i udostępniania danych biznesowych.
• Budowa workflowów opartych na Delta Live Tables (DLT) oraz frameworkach metadanych, a także udział w modernizacji platform danych.
• Automatyzacja procesów wdrażania z wykorzystaniem CI/CD i Azure DevOps oraz dbanie o najwyższe standardy inżynierskie poprzez code review.
• Współpraca z architektami i interesariuszami biznesowymi w celu zapewnienia jakości, wydajności oraz bezpieczeństwa rozwiązań produkcyjnych.

Wymagania

• Minimum 5 lat doświadczenia w obszarze Data Engineering oraz biegła znajomość Apache Spark i języka Python.
• Praktyczna znajomość platformy Microsoft Azure, w tym Azure Databricks, Azure Data Factory, Azure Data Lake oraz Azure Synapse Analytics.
• Bardzo dobra znajomość SQL oraz doświadczenie w projektowaniu i optymalizacji procesów przetwarzania danych.
• Znajomość zagadnień związanych z Unity Catalog, Delta Live Tables oraz doświadczenie w pracy z Azure DevOps i CI/CD.
• Znajomość Power BI oraz biegła znajomość języka angielskiego na poziomie C1.

Co oferujemy

• Współpracę w oparciu o kontrakt B2B.
• W pełni zdalny model pracy.
• Profesjonalny proces rekrutacyjny z gwarancją otrzymania feedbacku na każdym etapie.