Senior Data Engineer (Azure)

Nasz Klient to międzynarodowa organizacja rozwijająca nowoczesne środowisko danych, które wspiera przetwarzanie, integrację oraz wykorzystanie informacji w różnych obszarach biznesowych. Poszukujemy doświadczonego Senior Data Engineera, który dołączy do zespołu pracującego nad skalowalną platformą danych w środowisku Azure.

Zakres obowiązków

• Projektowanie i rozwijanie skalowalnych pipeline’ów oraz procesów przetwarzania danych w chmurze Azure.
• Wykorzystywanie Azure Databricks do zaawansowanej transformacji i przetwarzania dużych zbiorów danych.
• Budowa oraz rozwój warstwy przechowywania danych w oparciu o Azure Data Lake.
• Tworzenie i utrzymywanie procesów integracji oraz orkiestracji danych przy użyciu Azure Data Factory.
• Implementacja procesów transformacji danych z wykorzystaniem języków Python oraz SQL.
• Optymalizacja zapytań i procesów przetwarzania pod kątem wydajności oraz skalowalności.

Wymagania

• Minimum 6 lat komercyjnego doświadczenia na stanowisku Data Engineer.
• Bardzo dobra, praktyczna znajomość Azure Databricks w rozwiązaniach produkcyjnych.
• Doświadczenie w projektowaniu rozwiązań z wykorzystaniem Azure Data Lake oraz Azure Data Factory.
• Biegła znajomość języka SQL oraz Python w kontekście przetwarzania danych.
• Umiejętność samodzielnego projektowania rozwiązań i podejmowania kluczowych decyzji technicznych.
• Znajomość języka angielskiego na poziomie minimum C1, umożliwiająca swobodną komunikację.

Co oferujemy

• Udział w ambitnym projekcie opartym na nowoczesnym stosie technologicznym Azure.
• Pracę nad rozwojem skalowalnej platformy przetwarzającej dane z wielu zróżnicowanych źródeł.
• Realny wpływ na podejmowane decyzje architektoniczne oraz rozwój środowiska danych.
• Możliwość pracy w pełni zdalnej w międzynarodowym środowisku projektowym.