Senior Data Engineer (Databricks)
Codewave
Jako Senior Data Engineer w Codewave będziesz odpowiedzialny za budowanie i rozwijanie skalowalnych pipeline’ów danych w Azure Data Factory i Databricks dla klienta z branży tytoniowej. Projektujesz i optymalizujesz data lakehouse oraz modele danych, integrujesz dane z wielu źródeł, automatyzujesz procesy i dbasz o jakość danych. Pracujesz w małym, 3-osobowym zespole Data, który działa kompleksowo na przestrzeni różnych projektów jednej dużej platformy e-Commerce. To rola mocno techniczna, z realnym wpływem na architekturę.
Brakuje: nie podano dokładnego składu zespołu (roli pozostałych dwóch osób), brak informacji o on-call lub dyżurach produkcyjnych.
Jako Senior Data Engineer w Codewave będziesz odpowiedzialny za budowanie i rozwijanie skalowalnych pipeline’ów danych w Azure Data Factory i Databricks dla klienta z branży tytoniowej. Projektujesz i optymalizujesz data lakehouse oraz modele danych, integrujesz dane z wielu źródeł, automatyzujesz procesy i dbasz o jakość danych. Pracujesz w małym, 3-osobowym zespole Data, który działa kompleksowo na przestrzeni różnych projektów jednej dużej platformy e-Commerce. To rola mocno techniczna, z realnym wpływem na architekturę.
- ✓Budżet rozwojowy, certyfikacje i szkolenia (w tym wewnętrzne i zewnętrzne)
- ✓Realny wpływ na wybór narzędzi i technologii
- ✓Możliwość pracy 'od zera' – tworzenie kodu na nowo, nie legacy
- ✓Spotkanie z CEO w procesie rekrutacyjnym – pokazuje zaangażowanie zarządu w kulturę zespołu
- ✓Transparentny, krótki proces rekrutacyjny (3 etapy) i szybka decyzja
- !Brak informacji o wymaganej liczbie dni w biurze w trybie hybrydowym
- !Niejasność co do liczby projektów – ogłoszenie mówi zarówno 'koncentrujesz się na jednym projekcie' jak i 'rozwijasz kilka projektów jednocześnie'
- !Zespół Data liczy tylko 3 osoby – może to oznaczać duże obciążenie i szeroki zakres odpowiedzialności
- •Budowanie i rozwijanie skalowalnych pipeline’ów danych w Azure Data Factory i Databricks
- •Projektowanie i optymalizacja warstwy data lakehouse oraz modeli danych z użyciem SQL/MySQL i Python
- •Integracja danych z wielu źródeł zewnętrznych i wewnętrznych
- •Monitorowanie, automatyzacja i usprawnianie procesów przetwarzania danych
- •Zapewnianie jakości i niezawodności danych poprzez testowanie i walidację
- •Współpraca z zespołami developerskimi i produktowymi w celu dostarczania stabilnych zestawów danych
- •Tworzenie i utrzymywanie dokumentacji technicznej dla pipeline’ów i modeli danych
Oferta dla doświadczonych specjalistów (Senior).
Data Engineer z co najmniej 5 latami doświadczenia, solidną znajomością Azure Databricks i Data Factory, Python/PySpark oraz SQL. Potrafi samodzielnie zaprojektować i zaimplementować pipeline danych od podstaw.
Nie dla kandydatów z mniej niż 5 latami doświadczenia w Data Engineeringu. Osoby bez praktyki w Azure Databricks i PySpark raczej nie spełnią wymagań. Również nie dla osób szukających pracy w pełni zdalnej bez hybrydowego modelu.
- ?Ile dni w tygodniu wymaganych jest w biurze w trybie hybrydowym?
- ?Czy obecny projekt dla klienta tytoniowego jest jedynym, czy będą równolegle inne projekty?
- ?Jakie są główne wyzwania techniczne w obecnym data lakehouse?
- ?Jak wygląda współpraca w 3-osobowym zespole Data – czy są dedykowani DevOps/architekci?
- ?Czy istnieje system on-call lub dyżury produkcyjne?
- −Nie podano dokładnego składu zespołu (roli pozostałych dwóch osób)
- −Brak informacji o on-call lub dyżurach produkcyjnych
- −Nie określono, czy są plany migracji/rozwoju istniejących pipeline’ów czy budowa od zera
Mały, 3-osobowy zespół Data działający w metodyce Agile/Scrum/Kanban z dużą autonomią techniczną i wsparciem merytorycznym liderów. Wymagana jest samodzielność i wpływ na architekturę.
Aplikacja przez system, Rozmowa z HR online (~30 min), Rozmowa Tech z Architectem/Data Engineer online (60 min), Team Fit – spotkanie w biurze z CEO (60 min), Decyzja.
Powyżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię Azure. Pełne statystyki zarobków →