Lead Data Engineer / Architect (Databricks)

H2B Group to dynamiczna firma konsultingowa specjalizująca się w automatyzacji procesów biznesowych przy użyciu AI oraz wspieraniu rozwoju kariery specjalistów IT. Obecnie poszukujemy doświadczonego Lead Data Engineer / Architect, który dołączy do naszego zespołu i wesprze kluczowy projekt oparty na technologii Databricks.

Zakres obowiązków

• Przeprowadzanie audytów istniejącego kodu Databricks/ADF oraz identyfikacja luk w implementacji.
• Weryfikacja i optymalizacja architektury modelu Medallion oraz konfiguracji Unity Catalog.
• Aktywne wsparcie inżynieryjne, w tym portowanie widoków z SQL Server do Databricks SQL oraz budowa potoków ADF.
• Konfiguracja i nadzór nad procesami CI/CD w środowisku Azure DevOps.
• Tworzenie frameworków do testowania i rekonsyliacji danych między źródłami SQL Server a Lakehousem.

Wymagania

• Ekspercka wiedza w zakresie Databricks, w tym Delta Lake, Databricks SQL oraz Unity Catalog.
• Biegłość w budowie potoków Azure Data Factory, obsłudze Self-Hosted IR oraz wzorców CDC.
• Bardzo silna znajomość T-SQL oraz Pythona w kontekście inżynierii danych.
• Doświadczenie w projektowaniu schematów gwiazdy oraz struktur Fact/Dimension.
• Znajomość infrastruktury Azure, w tym ADLS Gen2 oraz podstaw sieciowych.

Co oferujemy

• Pełną elastyczność w wyborze projektów dopasowanych do Twoich umiejętności i zainteresowań.
• Przejrzyste zasady współpracy oraz pełną transparentność warunków zatrudnienia.
• Możliwość pracy przy innowacyjnych projektach w ramach grupy Euvic, co sprzyja szybkiemu rozwojowi kompetencji.
• Wsparcie w budowaniu ścieżki kariery w modelu B2B w różnorodnych branżach technologicznych.