B2Bnetwork poszukuje doświadczonego Architekta Hurtowni Danych, który odegra kluczową rolę w projektowaniu nowoczesnej platformy danych oraz wsparciu transformacji technologicznej obecnego środowiska. Osoba na tym stanowisku będzie odpowiedzialna za ocenę obecnej architektury, opracowanie dokumentacji High Level Design oraz przygotowanie rekomendacji technologicznych i organizacyjnych.
Zakres obowiązków
- Analiza i ocena obecnej architektury hurtowni danych oraz opracowanie docelowej wizji nowoczesnej platformy.
- Przygotowanie dokumentacji High-Level Design oraz roadmapy transformacji technologicznej.
- Zaprojektowanie warstw transformacji i przetwarzania danych z wykorzystaniem Apache Spark.
- Opracowanie koncepcji wyeliminowania przestarzałych rozwiązań oraz wdrożenie standardów CI/CD i zarządzania jakością danych.
- Pełnienie funkcji lidera technicznego, mentoring zespołu oraz transfer wiedzy w zakresie nowoczesnych praktyk Data Engineering.
Wymagania
- Doświadczenie w projektowaniu nowoczesnych platform danych, hurtowni danych oraz architektury Data Lake i Data Lakehouse.
- Bardzo dobra znajomość Apache Spark w obszarze Data Engineering oraz praktyczna znajomość Apache Hadoop i HDFS.
- Doświadczenie w pracy z Delta Lake lub Apache Iceberg oraz projektowaniu procesów ETL/ELT.
- Umiejętność definiowania architektury przetwarzania danych na dużą skalę oraz przygotowywania dokumentacji HLD i LLD.
- Doświadczenie w prowadzeniu transformacji technologicznych zespołów Data Warehouse.
Co oferujemy
- Wpływ na kształtowanie nowoczesnej architektury danych w dużej skali.
- Możliwość pełnienia roli lidera technicznego w ambitnym programie transformacji.
- Współpracę przy projektowaniu rozwiązań opartych na najnowszych technologiach Big Data.
- Wsparcie w rozwoju kompetencji zespołu poprzez mentoring i transfer wiedzy.