Data Engineer (Kafka / Confluent Cloud)

Dołącz do zespołu Upvanta sp. z o.o. odpowiedzialnego za rozwój nowoczesnych platform danych opartych o architekturę event-driven. Poszukujemy doświadczonego Data Engineera, który będzie wspierać budowę i utrzymanie zaawansowanych rozwiązań opartych o Apache Kafka oraz Confluent Cloud, ściśle współpracując z zespołami odpowiedzialnymi za integrację danych i rozwój systemów analitycznych.

Zakres obowiązków

• Projektowanie, rozwój i utrzymanie skalowalnych rozwiązań opartych o Apache Kafka oraz Confluent Cloud.
• Tworzenie i rozwijanie zaawansowanych pipeline'ów przetwarzania danych w środowiskach rozproszonych.
• Implementacja procesów integracji danych między różnymi systemami oraz optymalizacja skryptów w języku Python.
• Pisanie, rozwijanie i optymalizacja złożonych zapytań SQL oraz procesów transformacji danych.
• Monitorowanie, diagnozowanie i rozwiązywanie problemów związanych z przepływem danych w czasie rzeczywistym.

Wymagania

• Komercyjne doświadczenie w pracy z technologią Apache Kafka.
• Praktyczna znajomość platformy Confluent Cloud.
• Bardzo dobra znajomość języka Python oraz SQL.
• Doświadczenie w projektowaniu i utrzymaniu rozwiązań do przetwarzania danych.
• Umiejętność samodzielnego rozwiązywania problemów oraz efektywnej pracy w środowisku zespołowym.

Co oferujemy

• Możliwość pracy w pełni zdalnej przy innowacyjnych projektach data-driven.
• Współpracę z architektami i zespołami developerskimi przy projektowaniu architektury opartej o zdarzenia.
• Dostęp do nowoczesnego stosu technologicznego i wsparcie w rozwoju kompetencji technicznych.