act digital to firma świadcząca usługi IT, która łączy potrzeby klientów z całego świata z umiejętnościami i aspiracjami swoich pracowników. Poszukujemy doświadczonego Data Engineera, który dołączy do naszego zespołu i zajmie się projektowaniem oraz utrzymaniem zaawansowanych rozwiązań do przetwarzania danych w środowisku chmurowym Azure.
Zakres obowiązków
- Projektowanie i wdrażanie skalowalnych rozwiązań do przetwarzania, transformacji oraz oczyszczania danych ustrukturyzowanych i nieustrukturyzowanych.
- Tworzenie i utrzymywanie wydajnych pipeline’ów danych integrujących informacje z baz danych, API oraz platform strumieniowych.
- Rozwój zaawansowanych procesów ETL/ELT z wykorzystaniem narzędzi Azure Data Factory oraz Databricks.
- Wdrażanie dobrych praktyk CI/CD i DevOps w procesach przetwarzania danych oraz współpraca z zespołami Data Science i architektami chmurowymi.
Wymagania
- Praktyczne doświadczenie w pracy z architekturą Data Lake oraz chmurą Azure.
- Biegła znajomość SQL, PySpark oraz języka Python w kontekście transformacji i automatyzacji danych.
- Znajomość zaawansowanych funkcjonalności Databricks, takich jak Unity Catalog, MLflow czy Pipelines.
- Zrozumienie architektury Data Lakehouse, Medallion Architecture oraz integracji API.
- Znajomość narzędzi CI/CD, Git oraz Azure DevOps, a także znajomość języka angielskiego na poziomie minimum B2.
Co oferujemy
- Udział w różnorodnych projektach międzynarodowych dla klientów z Europy.
- Wsparcie w rozwoju zawodowym poprzez dofinansowanie szkoleń, certyfikatów technicznych oraz konferencji.
- Prywatną opiekę medyczną Medicover oraz kartę Multisport.
- Długoterminową współpracę w przyjaznej atmosferze z możliwością wyboru formy zatrudnienia.