Data Engineer
Haddad Brands
Rola polega na budowie nowoczesnej platformy danych na Microsoft Fabric, integrującej dane z legacy systemów ERP (AS400/DB2). Głównym wyzwaniem jest przeniesienie raportowania z manualnych, ekspercko-zależnych procesów do architektury samoobsługowej w chmurze. To praktyczne stanowisko inżynierskie w środowisku nie-greenfield – będziesz pracować z nieidealnymi, często nieudokumentowanymi danymi ERP, wymagającymi interpretacji i czyszczenia. Celem jest stworzenie skalowalnego lakehouse z warstwami Bronze/Silver/Gold, który zasili Power BI oraz przyszłe narzędzia AI.
Brakuje: nie podano wielkości zespołu data engineering ani struktury (ile osób, role)., brak informacji o on-call lub dyżurach produkcyjnych..
Rola polega na budowie nowoczesnej platformy danych na Microsoft Fabric, integrującej dane z legacy systemów ERP (AS400/DB2). Głównym wyzwaniem jest przeniesienie raportowania z manualnych, ekspercko-zależnych procesów do architektury samoobsługowej w chmurze. To praktyczne stanowisko inżynierskie w środowisku nie-greenfield – będziesz pracować z nieidealnymi, często nieudokumentowanymi danymi ERP, wymagającymi interpretacji i czyszczenia. Celem jest stworzenie skalowalnego lakehouse z warstwami Bronze/Silver/Gold, który zasili Power BI oraz przyszłe narzędzia AI.
- ✓21 dni płatnego urlopu na B2B – rzadko spotykane i atrakcyjne.
- ✓Freedom to choose tools and technologies – realna autonomia techniczna.
- ✓Supportive, trust-based work environment – kultura oparta na zaufaniu, co jest plusem przy pracy zdalnej.
- ✓Jasna ścieżka kariery i programy szkoleniowe – inwestycja w rozwój.
- ✓Company-provided hardware and software – standard, ale zawsze mile widziane.
- −Praca z legacy systemem AS400/DB2, który może być trudny w integracji i mało udokumentowany – oferta otwarcie mówi o 'nie-greenfield' i konieczności reverse-engineeringu.
- !Wymagany angielski C1, ale rekrutacja zaczyna się od spotkania po polsku – może to oznaczać, że codzienna komunikacja jest mieszana.
- !Brak informacji o wielkości zespołu Data Engineering – czy jesteś jedynym inżynierem, czy częścią większego teamu?
- •Projektowanie i implementacja potoków ETL/ELT w Microsoft Fabric (Data Pipelines, Notebooks) do pozyskiwania danych z AS400 DB2 i MS SQL.
- •Tworzenie transformacji w Spark/PySpark do czyszczenia, standaryzacji i modelowania danych ERP (np. rekonstrukcja kluczy produktowych).
- •Modelowanie schematów Gold (gwiazda, płatek śniegu) zoptymalizowanych pod Power BI i dostęp AI.
- •Implementacja kontroli jakości danych, alertów i monitorowania pipeline'ów (monitoring błędów, retry logic).
- •Rewersyjna inżynieria legacy tabel ERP oraz dokumentacja (słowniki danych, mapowania źródło-cel).
- •Współpraca z analitykami biznesowymi w celu tłumaczenia wymagań na rozwiązania techniczne.
- •Automatyzacja wdrożeń i kontrola wersji pipeline'ów za pomocą Git i CI/CD w środowiskach Dev/Test/Prod.
- •Tuning wydajności dla dużych zbiorów danych oraz rozwiązywanie problemów z danymi.
Oferta dla doświadczonych specjalistów (Senior).
Mid-level Data Engineer z co najmniej 3-letnim doświadczeniem w SQL i ETL, który ma podstawową znajomość Microsoft Fabric i DB2/AS400. Osoba ta jest gotowa do intensywnej nauki i pracy z legacy systemami, a także potrafi komunikować się w języku angielskim na poziomie C1.
Osoby bez doświadczenia w DB2/AS400 lub Microsoft Fabric, które oczekują greenfield'owego projektu z najnowszym stackiem. Juniorzy bez udokumentowanej pracy w korporacyjnym środowisku danych nie powinni aplikować, ponieważ rola wymaga samodzielności i radzenia sobie z nieidealnymi danymi.
- ?Ile osób liczy obecny zespół Data Engineering i kto będzie moim bezpośrednim przełożonym?
- ?Czy jest już jakaś część platformy w Fabric uruchomiona, czy zaczynamy od zera?
- ?Jak wygląda proces on-call / wsparcie produkcyjne – czy są dyżury i jak często?
- ?Czy istnieją już jakieś źródła danych poza AS400/DB2, które trzeba zintegrować?
- ?Jakie są największe wyzwania techniczne, które zespół napotkał do tej pory?
- ?Czy przewidujecie migrację danych z AS400 w przyszłości, czy to stały element architektury?
- ?Jaki jest stosunek pracy z biznesem do czysto technicznej pracy?
- ?Czy CI/CD dla pipeline'ów jest już wdrożone, czy to część moich obowiązków?
- −Nie podano wielkości zespołu Data Engineering ani struktury (ile osób, role).
- −Brak informacji o on-call lub dyżurach produkcyjnych.
- −Nie wiadomo, jaki jest obecny stan zaawansowania projektu – czy istnieją już jakieś pipeline'y czy wszystko od początku.
- −Brak informacji o systemie zarządzania projektami (np. Jira, Azure DevOps) i metodyce pracy (Scrum, Kanban).
Kultura oparta na zaufaniu, autonomii i wsparciu. Zespół ceni sobie maintainability, skalowalność i traktowanie danych jako reprezentacji procesów biznesowych. Praca w środowisku remote z elastycznością wyboru narzędzi.
Spotkanie wstępne po polsku w celu poznania kandydata, następnie rozmowa techniczna w ciągu dwóch tygodni skupiająca się na architekturze danych i ETL, a na końcu krótka rozmowa po angielsku weryfikująca umiejętności komunikacyjne.
Poniżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię SQL. Pełne statystyki zarobków →