Scala/ Spark Developer
Antal
Rola w międzynarodowym zespole (150+ osób, Polska, UK, Chiny) budującym platformę Big Data do wykrywania i zapobiegania przestępstwom finansowym. Wykorzystuje się Scali, Apache Spark na GCP oraz Apache Airflow do orkiestracji. Praca w Scrumie z dwutygodniowymi sprintami. Codziennie: rozwój pipeline'ów przetwarzania danych w Scali/Sparku, automatyzacja testów, udział w ceremoniach Agile. To klasyczna rola Data Engineera w dużej korporacji, nie tylko 'developer' – główny nacisk na Big Data i dane.
Brakuje: brak informacji o wielkości zespołu, brak informacji o dyżurach on-call.
Rola w międzynarodowym zespole (150+ osób, Polska, UK, Chiny) budującym platformę Big Data do wykrywania i zapobiegania przestępstwom finansowym. Wykorzystuje się Scali, Apache Spark na GCP oraz Apache Airflow do orkiestracji. Praca w Scrumie z dwutygodniowymi sprintami. Codziennie: rozwój pipeline'ów przetwarzania danych w Scali/Sparku, automatyzacja testów, udział w ceremoniach Agile. To klasyczna rola Data Engineera w dużej korporacji, nie tylko 'developer' – główny nacisk na Big Data i dane.
- ✓Praca nad nowoczesną platformą Big Data z AI i chmurą GCP
- ✓Międzynarodowe środowisko (Polska, UK, Chiny) – kontakt z różnymi kulturami
- ✓End-to-end involvement w cyklu życia oprogramowania
- ✓Cykle release co 6 tygodni – przewidywalność
- ✓Duża skala (150+ osób) – stabilność i możliwość rozwoju
- !Rekrutacja przez agencję (Antal) – outsourcing, rzeczywisty pracodawca to inna firma
- !Brak informacji o wielkości zespołu, w którym przyjdzie pracować
- !Brak wzmianki o dyżurach on-call
- !Brak opisu procesu rekrutacyjnego (liczba etapów, zadanie domowe itp.)
- •Projektowanie i implementacja pipeline'ów przetwarzania danych w Scali i Apache Spark na GCP
- •Orkiestracja workflow'ów w Apache Airflow
- •Pisanie i utrzymywanie testów automatycznych (JUnit, TDD, BDD)
- •Udział w code review i refaktoryzacja kodu
- •Współpraca z Product Ownerem i zespołem przy planowaniu sprintów i backlogu
- •Rozwiązywanie problemów i debugowanie w środowisku Big Data
- •Deploy i release nowych wersji w cyklach 6-tygodniowych
- •Knowledge sharing i wsparcie innych członków zespołu
Oferta dla doświadczonych specjalistów (Senior).
Mid Data Engineer z co najmniej 3-letnim doświadczeniem w Scali i Sparku, który potrafi samodzielnie tworzyć pipeline'y i zna podstawy Airflow. Wymagana komunikatywność po angielsku i znajomość Jiry/Confluence.
Osoby z mniej niż 2-3 latami doświadczenia w Scali i Sparku (juniorzy) – rola wymaga samodzielności. Kandydaci szukający wyłącznie pracy zdalnej (głównie zdalnej, ale 2 dni w biurze w Krakowie są obowiązkowe).
- ?Ile osób liczy zespół, w którym będę pracować?
- ?Czy są przewidziane dyżury on-call? Jak często?
- ?Jaki jest dokładny proces rekrutacyjny (etapy, zadanie domowe, live coding)?
- ?Czy realnie pracuje się na GCP, czy inna chmura?
- ?Jak wygląda onboarding i wsparcie dla nowych osób?
- ?Czy istnieje możliwość pracy zdalnej z zagranicy?
- ?Jaka jest rotacja w zespole i ogólnie satysfakcja pracowników?
- −Brak informacji o wielkości zespołu
- −Brak informacji o dyżurach on-call
- −Brak opisu procesu rekrutacyjnego
- −Nie wiadomo, czy praca jest na konkretny projekt u klienta, czy rotacyjnie
Agile, Scrum, dwutygodniowe sprinty, współpraca międzynarodowa, kultura dzielenia się wiedzą i ciągłego doskonalenia.
Powyżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię Spark. Pełne statystyki zarobków →