Data Engineer / Data Architect (Azure Databricks)
Square One Resources
Rola łączy obowiązki senior Data Engineera i Data Architecta przy projekcie modernizacji platformy danych na Azure. Projekt przechodzi na architekturę Data Lakehouse z Databricks w modelu medallion (Bronze/Silver/Gold). Codzienna praca obejmuje projektowanie architektury, budowę pipeline'ów w ADF, migrację z SQL Server, implementację warstwy Gold oraz wdrażanie CI/CD. To rola consultingowa z bezpośrednim kontaktem z klientem, wymagająca zarówno umiejętności technicznych, jak i komunikacyjnych.
Brakuje: nie podano wielkości zespołu ani struktury organizacyjnej, brak informacji o liczbie źródeł danych (poza trzema sql server) i ich wolumenie.
Rola łączy obowiązki senior Data Engineera i Data Architecta przy projekcie modernizacji platformy danych na Azure. Projekt przechodzi na architekturę Data Lakehouse z Databricks w modelu medallion (Bronze/Silver/Gold). Codzienna praca obejmuje projektowanie architektury, budowę pipeline'ów w ADF, migrację z SQL Server, implementację warstwy Gold oraz wdrażanie CI/CD. To rola consultingowa z bezpośrednim kontaktem z klientem, wymagająca zarówno umiejętności technicznych, jak i komunikacyjnych.
- ✓Projekt modernizacji z budową nowej architektury (greenfield w zakresie lakehouse) – możliwość realnego wpływu
- ✓Wdrożenie CI/CD i testów – nacisk na jakość i dobre praktyki
- ✓Jasno określone zadania i oczekiwania w ogłoszeniu
- !Środowisko consultingowe – możliwe zmienne priorytety klienta
- !Wzmianka o projektach 'recovery/turnaround' sugeruje potencjalnie wysoką presję czasową
- !Nie określono wielkości zespołu ani struktury projektu
- !Brak informacji o podróżach służbowych – choć biuro w Warszawie, model zdalny, ale klient może wymagać okazjonalnych wizyt
- •Analiza istniejącego środowiska danych (Databricks, ADF, SQL Server) i identyfikacja luk
- •Projektowanie i walidacja architektury Data Lakehouse w modelu medallion (Bronze/Silver/Gold)
- •Budowa i rozwój pipeline'ów ETL w Azure Data Factory (batch ingestion, incremental loads)
- •Migracja widoków i logiki biznesowej z SQL Server do Databricks SQL
- •Implementacja warstwy Gold – modele analityczne fact/dimension
- •Konfiguracja CI/CD dla data platform w Azure DevOps (ADF + Databricks)
- •Budowa mechanizmów testów i rekonsyliacji danych
- •Udział w spotkaniach z klientem jako ekspert techniczny oraz raportowanie postępów
Oferta dla doświadczonych specjalistów (Senior).
Senior Data Engineer lub Data Architect z co najmniej 5-letnim doświadczeniem w Azure i Databricks, który ma za sobą co najmniej jeden pełny projekt modernizacji data platformy. Osoba potrafiąca samodzielnie prowadzić pipeline'y i architekturę, ale z mniejszym doświadczeniem klienckim może potrzebować wsparcia w komunikacji.
Nie dla juniorów ani mid-level bez ugruntowanej wiedzy Azure Databricks i architektury lakehouse. Osoby szukające wyłącznie pracy zdalnej bez kontaktu z klientem również nie będą odpowiednie – rola wymaga regularnych spotkań i relacji klienckich.
- ?Ile osób liczy zespół projektowy i jakie są role (np. osobny DevOps, analityk)?
- ?Czy są jakieś narzucone terminy lub kamienie milowe od klienta?
- ?Jakie jest doświadczenie klienta z Databricks – czy to pierwsza wdrożenie, czy już mieli styczność?
- ?Czy istnieje możliwość pracy zdalnej w 100%, czy są planowane spotkania onsite u klienta?
- ?Jakie narzędzia są używane do testów i rekonsyliacji danych – czy to już zdefiniowane, czy do wyboru?
- −Nie podano wielkości zespołu ani struktury organizacyjnej
- −Brak informacji o liczbie źródeł danych (poza trzema SQL Server) i ich wolumenie
- −Nie opisano procesu rekrutacyjnego
- −Brak informacji o ewentualnym on-call lub dyżurach
- −Nie wiadomo, czy projekt jest już w trakcie, czy startuje od zera
Praca w środowisku consultingowym z bezpośrednim kontaktem z klientem. Zespół prawdopodobnie niewielki, zorientowany na dostarczanie wartości w iteracjach. Kultura może być pragmatyczna, nastawiona na efekty.
Powyżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię Azure. Pełne statystyki zarobków →