Senior Data Engineer (Azure/Databricks)
DCG
Pracując jako Senior Data Engineer w modelu 100% zdalnym, będziesz odpowiedzialny za projektowanie, rozwój i utrzymanie rozwiązań data platform w chmurze Azure. Twoja codzienna praca obejmuje pracę z dużymi zbiorami danych w Azure Databricks (w tym Delta Lake, Delta Live Tables, Unity Catalog), budowę i ewolucję architektur Data Lake, Lakehouse, DWH oraz Data Martów, a także implementację pipeline'ów ETL/ELT w Azure Data Factory. Będziesz wspierać migracje z on-premise do chmury oraz dbać o bezpieczeństwo danych i zgodność z regulacjami. Praca w dynamicznym, 'low-process' środowisku wewnątrz firmy klienckiej (DCG jako agencja rekrutacyjna deleguje Cię do swojego partnera).
Brakuje: nie podano wielkości zespołu, brak opisu procesu rekrutacyjnego.
Pracując jako Senior Data Engineer w modelu 100% zdalnym, będziesz odpowiedzialny za projektowanie, rozwój i utrzymanie rozwiązań data platform w chmurze Azure. Twoja codzienna praca obejmuje pracę z dużymi zbiorami danych w Azure Databricks (w tym Delta Lake, Delta Live Tables, Unity Catalog), budowę i ewolucję architektur Data Lake, Lakehouse, DWH oraz Data Martów, a także implementację pipeline'ów ETL/ELT w Azure Data Factory. Będziesz wspierać migracje z on-premise do chmury oraz dbać o bezpieczeństwo danych i zgodność z regulacjami. Praca w dynamicznym, 'low-process' środowisku wewnątrz firmy klienckiej (DCG jako agencja rekrutacyjna deleguje Cię do swojego partnera).
- ✓100% zdalnie
- ✓Podane widełki B2B (135-150 PLN/h)
- ✓Nowoczesny stack technologiczny: Azure Databricks, Delta Lake, Unity Catalog
- ✓Możliwość pracy przy migracjach on-prem→cloud – ciekawe wyzwanie
- −Praca przez agencję rekrutacyjną – nieznany klient końcowy, co może wiązać się z niepewnością co do projektu i warunków
- !Opis środowiska jako 'low-process, rapidly changing' i 'controlled chaos' – może oznaczać brak stabilnych procesów i dokumentacji
- !Brak informacji o wielkości zespołu i strukturze projektu
- !Nieokreślony proces rekrutacyjny
- •Projektowanie i rozwój rozwiązań data platform w Azure (Data Factory, Data Lake, Databricks)
- •Implementacja pipeline'ów ETL/ELT z użyciem Azure Data Factory i Databricks
- •Praca z Delta Lake, Delta Live Tables i Unity Catalog w Azure Databricks
- •Projektowanie i modyfikacja modeli danych zgodnych z potrzebami biznesowymi
- •Wsparcie migracji danych i rozwiązań z on-premise do chmury Azure
- •Zapewnianie bezpieczeństwa danych i zgodności z najlepszymi praktykami chmurowymi
- •Współpraca z interesariuszami technicznymi i biznesowymi w międzynarodowym środowisku
- •Praca z repozytoriami kodu i procesami CI/CD (Azure DevOps, Git)
Oferta dla doświadczonych specjalistów (Senior).
Inżynier danych z minimum 3,5 roku komercyjnej pracy z danymi w chmurze Azure, znający Azure Data Factory i Databricks na poziomie produkcyjnym. Ma doświadczenie w migracjach i architekturach danych. Jest w stanie pracować w szybko zmieniającym się środowisku bez pełnej dokumentacji.
Osoby z mniej niż 3,5 roku doświadczenia w cloud data engineering (Azure) lub bez silnego backgroundu w Databricks i Azure Data Factory. Rola nie jest dla juniorów ani mid-level bez ugruntowanej wiedzy o architekturach danych w chmurze.
- ?Do jakiego klienta końcowego jest ta pozycja? Jaka jest branża i skala projektu?
- ?Ile osób liczy zespół Data Engineering, z którym będę pracować? Czy są podzieleni na mniejsze zespoły?
- ?Jaki jest model współpracy z klientem – czy jestem dedykowany do jednego projektu, czy rotacja?
- ?Czy są dyżury on-call? Jak wygląda wsparcie produkcyjne?
- ?Jakie są główne wyzwania techniczne na starcie? Czy są jakieś legacy systemy do migracji?
- ?Jaki jest proces rekrutacji – ile etapów, czy jest zadanie domowe / live coding?
- −Nie podano wielkości zespołu
- −Brak opisu procesu rekrutacyjnego
- −Nie wiadomo, czy praca jest dedykowana do jednego klienta czy rotacyjnie
- −Brak informacji o dyżurach on-call
- −Nie określono budżetu szkoleniowego ani możliwości rozwoju
Dynamiczne, 'low-process' środowisko z naciskiem na samodzielność i komunikację. Prawdopodobnie praca w międzynarodowym zespole, gdzie wymagana jest proaktywność i komfort w sytuacjach niepełnej dokumentacji.
Na poziomie rynkowym
Dane z aktywnych ofert zawierających technologię Microsoft Azure Cloud.