TQLO Sp. z o.o. poszukuje doświadczonego inżyniera danych do pracy przy projektach związanych z rozwojem platform danych, integracją systemów oraz przetwarzaniem dużych zbiorów informacji w środowisku chmurowym. Projekt koncentruje się na tworzeniu skalowalnych rozwiązań Data Engineering w Amazon Web Services z wykorzystaniem Pythona oraz Apache Spark.
Zakres obowiązków
- Projektowanie i rozwijanie procesów przetwarzania danych w środowisku AWS.
- Budowanie oraz optymalizacja wydajnych pipeline'ów ETL/ELT.
- Implementacja procesów przetwarzania danych przy użyciu języka Python.
- Tworzenie rozwiązań do obsługi dużych zbiorów danych w Apache Spark.
- Integracja danych pochodzących z różnych źródeł i systemów informatycznych.
Wymagania
- Minimum 2–3 lata komercyjnego doświadczenia na stanowisku Data Engineer.
- Bardzo dobra znajomość języka Python oraz praktyczna wiedza o Apache Spark/PySpark.
- Doświadczenie w realizacji projektów w chmurze AWS oraz znajomość usług związanych z danymi.
- Dobra znajomość języka SQL oraz doświadczenie w projektowaniu procesów ETL/ELT.
- Znajomość języka angielskiego na poziomie umożliwiającym swobodną komunikację projektową.
Co oferujemy
- Realizację zaawansowanych projektów Data Engineering w środowisku AWS.
- Możliwość praktycznego wykorzystania Pythona i Apache Spark w codziennej pracy.
- Udział w rozwoju nowoczesnych, skalowalnych platform danych.
- Szansę na ciągły rozwój kompetencji w obszarach Big Data oraz Cloud.
- Współpracę z doświadczonym zespołem specjalistów technologicznych.