Data Engineer with Microsoft Azure (f/m/x)

Dołącz do Centrum Kompetencyjnego Data & Analytics w Sii i twórz zaawansowane rozwiązania, które pomagają organizacjom w pełni wykorzystać potencjał danych. Jako Data Engineer będziesz pracować przy innowacyjnych projektach opartych na technologiach Microsoft Azure, mając realny wpływ na architekturę przetwarzania informacji w środowisku chmurowym.

Zakres obowiązków

• Projektowanie, budowanie i rozwijanie skalowalnych platform przetwarzania danych w architekturze Data Lake oraz Data Platform.
• Tworzenie i utrzymanie zaawansowanych pipeline’ów ETL/ELT do integracji danych z różnorodnych źródeł w środowisku Azure Databricks.
• Modelowanie danych oraz przygotowywanie struktur dostosowanych do specyficznych potrzeb analitycznych i biznesowych.
• Monitorowanie, optymalizacja oraz rozwój istniejących procesów przetwarzania danych w trybie batch oraz near real-time.
• Współpraca z zespołami BI oraz Data Science w celu zapewnienia wysokiej jakości danych dla celów analitycznych.

Wymagania

• Minimum 4 lata doświadczenia w projektach związanych z przetwarzaniem i integracją dużych wolumenów danych.
• Bardzo dobra znajomość języka SQL oraz Python.
• Praktyczne doświadczenie w pracy z frameworkami takimi jak Apache Spark lub PySpark.
• Komercyjna znajomość rozwiązań chmurowych Microsoft Azure, w tym Azure Databricks, Data Factory lub Synapse.
• Umiejętność swobodnej komunikacji w języku angielskim oraz płynna znajomość języka polskiego.

Co oferujemy

• Możliwość pracy w pełni zdalnej przy ambitnych projektach technologicznych.
• Przestrzeń do wymiany wiedzy i poszerzania kompetencji w obszarach Big Data, Data Science oraz Machine Learning.
• Wsparcie w rozwoju zawodowym oraz dostęp do najlepszych praktyk w branży.