Senior Data Engineer
Link Group
Rola Senior Data Engineera skupia się na migracji istniejących przepływów danych z Apache Airflow do Azure Data Factory (ADF) oraz budowaniu i utrzymaniu warstwy danych dla rozwiązań raportowych. Jest to rola 'hands-on', wymagająca budowania niezawodnych potoków danych, solidnych modeli danych i zapewnienia płynnego przepływu danych od systemów źródłowych do raportów. Współpraca z deweloperami Power BI i interesariuszami biznesowymi jest kluczowa.
Brakuje: szczegóły dotyczące rodzaju i złożoności rozwiązań raportowych., konkretne narzędzia do monitorowania i alertowania, które są mile widziane..
Rola Senior Data Engineera skupia się na migracji istniejących przepływów danych z Apache Airflow do Azure Data Factory (ADF) oraz budowaniu i utrzymaniu warstwy danych dla rozwiązań raportowych. Jest to rola 'hands-on', wymagająca budowania niezawodnych potoków danych, solidnych modeli danych i zapewnienia płynnego przepływu danych od systemów źródłowych do raportów. Współpraca z deweloperami Power BI i interesariuszami biznesowymi jest kluczowa.
- ✓Wynagrodzenie podane w wysokich widełkach (30240 – 33600 PLN/mies. B2B).
- ✓Praca w 100% zdalna.
- ✓Możliwość prowadzenia migracji i wpływania na architekturę danych.
- ✓Współpraca z interesariuszami biznesowymi i deweloperami Power BI.
- ✓Skupienie na niezawodności produkcji i ciągłym doskonaleniu.
- !Chociaż oferta wspomina o 'reporting solutions', nie podano konkretnych szczegółów na temat rodzaju raportów ani ich złożoności.
- !Nie podano informacji o konkretnych narzędziach do monitorowania i alertowania, mimo że jest to wymienione jako 'nice to have'.
- •Prowadzenie migracji DAGów Airflow i przepływów danych do Azure Data Factory (ADF).
- •Budowanie i utrzymywanie potoków danych.
- •Tworzenie transformacji danych.
- •Budowanie i utrzymywanie modeli danych wspierających raportowanie i analizy.
- •Rozwiązywanie problemów i wsparcie dla kompleksowych przepływów danych (ingestion → processing → datasets → reports).
- •Ścisła współpraca z deweloperami Power BI i interesariuszami biznesowymi.
- •Zapewnienie niezawodności produkcji: monitorowanie, rozwiązywanie incydentów i ciągłe doskonalenie potoków danych.
Oferta dla doświadczonych specjalistów (Senior).
Kandydat z silnym, praktycznym doświadczeniem w data engineering (pipelines, transformations, modelling), biegły w SQL i ADF, z udokumentowanym doświadczeniem z Airflow i Pythonem. Powinien mieć dobre zrozumienie Power BI, zdolność do samodzielnego rozwiązywania problemów i dobre umiejętności komunikacyjne.
Rola nie jest dla osób bez silnego, praktycznego doświadczenia w data engineering, SQL i modelowaniu danych. Brak doświadczenia z Azure Data Factory (ADF) lub Apache Airflow będzie przeszkodą. Osoby, które nie potrafią samodzielnie rozwiązywać problemów lub mają słabe umiejętności komunikacyjne, również nie będą pasować.
- ?Jakie są główne wyzwania związane z migracją z Apache Airflow do Azure Data Factory?
- ?Jakie są konkretne systemy źródłowe, z których będą pobierane dane?
- ?Jak wygląda proces współpracy z deweloperami Power BI i interesariuszami biznesowymi?
- ?Jakie są obecne problemy z niezawodnością potoków danych i jakie są priorytety w tym obszarze?
- ?Czy istnieją już zdefiniowane standardy jakości danych lub procedury monitorowania?
- −Szczegóły dotyczące rodzaju i złożoności rozwiązań raportowych.
- −Konkretne narzędzia do monitorowania i alertowania, które są mile widziane.
Rola wymaga ścisłej współpracy z deweloperami Power BI i interesariuszami biznesowymi, co sugeruje środowisko nastawione na realizację celów biznesowych i dostarczanie wartości poprzez dane. Skupienie na niezawodności produkcji i ciągłym doskonaleniu wskazuje na dojrzałe podejście do inżynierii danych.
Nie podano szczegółów procesu rekrutacyjnego.
Powyżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię Data engineering. Pełne statystyki zarobków →