Big Data

Lumicode, jako część Grupy Pentacomp, to doświadczony producent rozwiązań informatycznych, który od blisko 30 lat dostarcza zaawansowane usługi IT dla sektora publicznego oraz dużych przedsiębiorstw. Poszukujemy eksperta w obszarze Big Data, który dołączy do naszego zespołu i wesprze nas w tworzeniu innowacyjnych systemów przetwarzania danych w pełni zdalnym modelu pracy.

Zakres obowiązków

• Tworzenie i optymalizacja zaawansowanych rozwiązań bazujących na języku Python.
• Praca w środowisku Kubernetes z wykorzystaniem narzędzi takich jak Spark Operator, Jupyter oraz Airflow.
• Projektowanie i wdrażanie rozwiązań Big Data przy użyciu Apache Spark oraz PySpark.
• Wsparcie techniczne w procesach testów jednostkowych, integracyjnych oraz UAT.
• Przygotowywanie dokumentacji technicznej kodu oraz przepływu danych w systemach.

Wymagania

• Minimum 5 lat praktycznego doświadczenia w programowaniu w językach Scala, Python lub Java.
• Komercyjna znajomość systemów rozproszonych oraz rozwiązań klasy Big Data, w szczególności Apache Spark i Apache Iceberg.
• Doświadczenie w optymalizacji przetwarzania dużych zbiorów danych oraz integracji systemów na dużą skalę.
• Bardzo dobra znajomość języka SQL oraz relacyjnych baz danych (RDBMS).
• Praktyczna znajomość środowiska Linux, konteneryzacji (Dockerfile) oraz podstaw Kubernetes.

Co oferujemy

• W pełni zdalny model współpracy.
• Możliwość korzystania z karty sportowej oraz prywatnej opieki medycznej.
• Szybki i sprawny proces rekrutacyjny.