Data Engineer (Azure Databricks)
Miratech
Rola Data Engineera w zespole platformy danych w firmie IT services. Będziesz projektować i rozwijać nowoczesne pipeline'y danych oraz architektury Lakehouse w Azure, używając Databricks, Spark, Azure Data Factory, integrując z istniejącym SQL Server. Praca nad cloudową ewolucją platformy danych dla analityki i BI. To typowa rola inżyniera danych w chmurze, z naciskiem na Azure Databricks i PySpark.
Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji.
Brakuje: brak widełek wynagrodzenia, nie wiadomo, czy model pracy jest w pełni zdalny.
Rola Data Engineera w zespole platformy danych w firmie IT services. Będziesz projektować i rozwijać nowoczesne pipeline'y danych oraz architektury Lakehouse w Azure, używając Databricks, Spark, Azure Data Factory, integrując z istniejącym SQL Server. Praca nad cloudową ewolucją platformy danych dla analityki i BI. To typowa rola inżyniera danych w chmurze, z naciskiem na Azure Databricks i PySpark.
- ✓Możliwość rozwoju certyfikacji i programy mentoringowe
- ✓Globalne projekty i wpływ na transformację cyfrową
- ✓Wielokulturowe środowisko
- −Outsourcing IT – możliwy brak stabilności projektu i rotacja zespołów
- −Wspomniano o wsparciu legacy SQL Server/SSIS – może być sporo pracy z istniejącym systemem
- !Brak widełek wynagrodzenia
- !Nie opisano procesu rekrutacyjnego
- ?Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji
- •Projektowanie i implementacja pipeline'ów danych w Azure Databricks
- •Optymalizacja transformacji danych używając PySpark i Spark SQL
- •Utrzymywanie architektury Lakehouse z Delta Lake
- •Orkiestracja procesów ETL/ELT w Azure Data Factory
- •Integracja danych z różnych źródeł do platformy danych i warstw analitycznych
- •Modelowanie danych i utrzymywanie struktur data warehouse dla raportowania
- •Współpraca z zespołami BI przy wsparciu Power BI i platform raportowych
- •Wsparcie istniejących rozwiązań SQL Server i SSIS w razie potrzeby
Oferta dla doświadczonych specjalistów (Senior).
Osoba z 3 latami doświadczenia w Data Engineering, która pracowała produkcyjnie z Azure Databricks i PySpark, zna SQL Server i potrafi budować pipeline'y w Azure Data Factory.
Junior bez doświadczenia w Azure Databricks, ani osoba szukająca pracy w czysto on-premise środowisku. Również nie dla kogoś, kto nie chce dotykać legacy SQL Server/SSIS.
- ?Czy praca jest w pełni zdalna, czy wymagane są wizyty w biurze w Krakowie?
- ?Ile osób liczy zespół data platform i jaki jest podział ról?
- ?Jak wygląda proces rekrutacyjny – ile etapów, czy jest zadanie domowe?
- ?Czy są dyżury on-call lub oczekiwana praca po godzinach?
- ?Jaki jest plan modernizacji legacy SQL Server/SSIS? Czy są już projekty migracyjne?
- ?Jakie są główne źródła danych i skala przetwarzania (wolumen, częstotliwość)?
- ?Czy istnieje możliwość pracy przy projektach greenfield, czy raczej utrzymanie istniejących rozwiązań?
- −Brak widełek wynagrodzenia
- −Nie wiadomo, czy model pracy jest w pełni zdalny
- −Brak opisu procesu rekrutacyjnego
- −Nie podano wielkości zespołu
Dynamiczny, globalny zespół z nastawieniem na współpracę i rozwój. Firma promuje kulturę relokacji, mentoring i certyfikacje.