Lead Data Engineer (Spark)
Addepto
Rola Lead Data Engineer w firmie konsultingowej specjalizującej się w AI i Big Data. Będziesz projektować i rozwijać skalowalne platformy danych dla globalnych klientów (np. Rolls Royce, Porsche) z użyciem Apache Spark, streamingu i batch processingu. Praca obejmuje architekturę, implementację, data governance, CI/CD oraz współpracę z zespołami Data Science. To rola zarówno techniczna (hands-on), jak i konsultingowa – wymaga bezpośredniego kontaktu z klientem.
Brakuje: brak opisu procesu rekrutacyjnego (liczba etapów, zadanie domowe, live coding), nie podano wielkości zespołu.
Rola Lead Data Engineer w firmie konsultingowej specjalizującej się w AI i Big Data. Będziesz projektować i rozwijać skalowalne platformy danych dla globalnych klientów (np. Rolls Royce, Porsche) z użyciem Apache Spark, streamingu i batch processingu. Praca obejmuje architekturę, implementację, data governance, CI/CD oraz współpracę z zespołami Data Science. To rola zarówno techniczna (hands-on), jak i konsultingowa – wymaga bezpośredniego kontaktu z klientem.
- ✓Budżet szkoleniowy i konferencyjny, partnerstwo z Databricks
- ✓Elastyczne godziny pracy
- ✓Praca z globalnymi liderami (Rolls Royce, Porsche)
- ✓Kultura dzielenia się wiedzą, blog, open source
- ✓Pakiety medyczne, sportowe, wellbeing
- !Brak informacji o wielkości zespołu i liczbie projektów jednocześnie prowadzonych
- !Nie podano, czy wiąże się z dyżurami on-call
- !Wymagany tytuł magistra/doktora – może być barierą
- •Projektowanie architektury data platformy dla strumieniowych i batchowych przetwarzań (Spark, Kafka, Iceberg)
- •Implementacja pipeline'ów ETL/ELT w Python/Spark z użyciem Airflow i DBT
- •Ustalanie zasad data governance i zarządzanie jakością danych
- •Współpraca z Data Scientistami przy analizie danych i budowie modeli ML
- •Rozwijanie CI/CD oraz procesów MLOps dla wdrożeń produkcyjnych
- •Konsultacje z klientem – zbieranie wymagań, prezentacje rozwiązań, doradztwo techniczne
- •Code review i mentoring młodszych członków zespołu
- •Praca z chmurą (preferowana AWS) – wdrażanie infra jako kod
Stanowisko liderskie — wymaga zarówno doświadczenia technicznego jak i umiejętności zarządzania.
Inżynier danych z 7-letnim stażem, który ma solidne podstawy w Spark i Python, zna podstawy data governance i chmurę, ale niekoniecznie wszystkie wymienione technologie – reszta do douczenia. Potrafi komunikować się po angielsku i pracować z klientem.
Juniorzy lub osoby bez doświadczenia w Big Data. Kandydaci szukający wyłącznie pracy technicznej bez kontaktu z klientem. Osoby bez wykształcenia wyższego w ścisłej dziedzinie (wymagane Master/PhD).
- ?Ile osób liczy zespół data engineering i jak wygląda podział ról?
- ?Jak wygląda typowy projekt – ile trwa, ilu klientów równolegle?
- ?Czy rola wiąże się z dyżurami on-call?
- ?Jak mierzona jest efektywność i sukces w projektach konsultingowych?
- ?Czy istnieje możliwość przejścia na ścieżkę Principal/Architect?
- ?Jaki jest stosunek pracy przy kliencie do wewnętrznych inicjatyw?
- ?Czy oferujecie wsparcie w uzyskaniu certyfikatów (np. Databricks, AWS)?
- −Brak opisu procesu rekrutacyjnego (liczba etapów, zadanie domowe, live coding)
- −Nie podano wielkości zespołu
- −Brak informacji o ewentualnych podróżach służbowych
- −Nie wiadomo, jak wygląda on-call w tej roli
- −Nie określono budżetu na szkolenia i konferencje (choć wspomniane ogólnie)
Zespół pasjonatów AI i Big Data, wspierający się nawzajem, z kulturą dzielenia się wiedzą i otwartością na innowacje. Praca w płaskiej strukturze, z naciskiem na rozwój i autonomię.
Na poziomie rynkowym
≈ 125,0–190,0 zł/h
Dane z aktywnych ofert zawierających technologię Spark. Pełne statystyki zarobków →