Data Engineer – Azure Databricks

Cyclad to firma wspierająca czołowe przedsiębiorstwa w realizacji zaawansowanych projektów technologicznych. Obecnie poszukujemy doświadczonego Data Engineera, który dołączy do naszego zespołu i zajmie się rozwijaniem skalowalnych rozwiązań danych w środowisku Microsoft Azure.

Zakres obowiązków

• Budowa oraz optymalizacja wydajnych pipeline’ów danych oraz procesów ETL/ELT.
• Przetwarzanie dużych zbiorów danych przy użyciu języka Python oraz frameworka PySpark.
• Rozwijanie rozwiązań opartych na technologiach Azure Databricks, Data Factory oraz Azure Storage.
• Wdrażanie testów automatycznych, kontroli jakości danych oraz systemów monitoringu.
• Aktywny udział w procesach CI/CD oraz automatyzacji wdrożeń w środowisku DevOps.

Wymagania

• Minimum 2 lata doświadczenia w pracy z ekosystemem Microsoft Azure.
• Praktyczna znajomość Azure Databricks, Azure Data Factory oraz Azure DevOps.
• Bardzo dobra znajomość języka Python oraz PySpark.
• Dobra znajomość SQL, modelowania danych oraz procesów ETL/ELT.
• Doświadczenie w pracy w środowisku Agile/Scrum oraz bardzo dobra znajomość języka angielskiego.

Co oferujemy

• Możliwość pełnej pracy zdalnej w międzynarodowym projekcie.
• Długoterminową współpracę w oparciu o nowoczesny stos technologiczny Azure.
• Dostęp do prywatnej opieki medycznej, stomatologicznej oraz ubezpieczenia na życie.
• Elastyczny czas pracy oraz dofinansowanie do zajęć sportowych.