H2B Group to firma konsultingowa specjalizująca się w automatyzacji procesów biznesowych przy użyciu AI oraz wspieraniu rozwoju kariery specjalistów IT. Obecnie poszukujemy doświadczonego Senior Data Quality Engineera do długofalowego projektu dla międzynarodowego lidera z branży telekomunikacyjnej z regionu Beneluxu.
Zakres obowiązków
- Projektowanie, wdrażanie oraz rozwój reguł i frameworków Data Quality w rozproszonych ekosystemach danych.
- Zarządzanie jakością danych, metadanymi oraz procesami Data Lineage z wykorzystaniem platformy Collibra.
- Tworzenie zapytań SQL, skryptów w języku Python oraz automatyzacji w Bash do profilowania, czyszczenia i monitorowania danych.
- Praca z wielkoskalowymi zbiorami danych przy użyciu Apache Spark.
- Identyfikacja anomalii w danych, analiza przyczyn źródłowych oraz wdrażanie prewencyjnych mechanizmów kontrolnych.
- Integracja testów jakości danych z potokami CI/CD oraz procesami orkiestracji.
Wymagania
- Minimum 8 lat doświadczenia w inżynierii danych lub zapewnianiu jakości danych.
- Biegła znajomość języka Python oraz zaawansowanego SQL.
- Praktyczne doświadczenie w przetwarzaniu danych przy użyciu Apache Spark.
- Komercyjne doświadczenie w pracy z narzędziem Collibra.
- Bardzo dobra znajomość środowiska Linux i pisania skryptów w Bash.
- Biegła znajomość języka angielskiego oraz języka francuskiego lub niderlandzkiego.
Co oferujemy
- W pełni zdalny model pracy pozwalający na wykonywanie zadań z dowolnego miejsca.
- Ciekawe projekty dopasowane do Twoich umiejętności i zainteresowań.
- Współpracę w modelu B2B bez zapisu o wyłączności.
- Możliwość pracy z najnowszymi technologiami i stały rozwój zawodowy.