Expert Data Engineer (IT Developer)
B2Bnetwork
Rola Senior Data Engineera budującego rozproszone pipeline'y Big Data na Hadoop/Spark dla dużej korporacji. Główny nacisk na Scala i Spark, z migracją do chmury AWS. Praca w ramch SAFe z regularnymi PI Planning. To nie jest rola DEVOPSowa ani backendowa – to klasyczny Big Data Engineer.
Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji.
Brakuje: brak informacji o wielkości zespołu, brak opisu procesu rekrutacyjnego.
Rola Senior Data Engineera budującego rozproszone pipeline'y Big Data na Hadoop/Spark dla dużej korporacji. Główny nacisk na Scala i Spark, z migracją do chmury AWS. Praca w ramch SAFe z regularnymi PI Planning. To nie jest rola DEVOPSowa ani backendowa – to klasyczny Big Data Engineer.
- ✓Nowoczesny stack: Scala, Spark, AWS, Python
- ✓Udział w migracji do chmury na dużą skalę
- ✓Kontrakt B2B
- ✓Elastyczność – 1 dzień w biurze to mało
- ✓Praca dla dużej korporacji – stabilność i skala
- −Brak informacji o wielkości zespołu i systemie on-call
- !Praca w SAFe – może być restrykcyjna i biurokratyczna
- !Wielość lokalizacji biur (Trójmiasto, Warszawa, Łódź) – nie wiadomo, która jest główna
- !Brak opisu procesu rekrutacyjnego
- ?Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji
- •Projektowanie i implementacja wysokowydajnych, rozproszonych pipeline'ów Big Data w Apache Spark (Scala)
- •Przetwarzanie, transformacja i wzbogacanie dużych zbiorów danych
- •Optymalizacja jobów Spark pod kątem wydajności i kosztów
- •Praca z ekosystemem Hadoop: YARN, EMR, Sqoop, Hive, Oozie
- •Automatyzacja procesów przetwarzania danych (np. w Airflow lub podobnym)
- •Współpraca z analitykami danych i interesariuszami biznesowymi przy budowie modeli danych
- •Migracja rozwiązań on-premise do AWS
- •Uczestnictwo w PI Planning i praca w metodyce SAFe
Oferta dla doświadczonych specjalistów (Senior).
Inżynier danych z 3-4 latami doświadczenia, bardzo dobrym Scala/Spark i podstawami AWS, gotowy do nauki Hadoop i SAFe.
Juniorzy bez doświadczenia w Big Data ani Spark. Osoby unikające frameworków takich jak SAFe. Ktoś szukający pracy w czysto zdalnym modelu bez żadnych spotkań – wymagane okazjonalne PI Planning w Trójmieście.
- ?Ile osób liczy zespół data platform?
- ?Czy dyżury on-call są wymagane? Jak często?
- ?Jakie konkretnie serwisy AWS są używane (EMR, S3, Redshift, itp.)?
- ?Jakie narzędzie do orkiestracji pipeline'ów (Airflow, Oozie, coś innego)?
- ?Czy Scala jest wymagana na start, czy można się douczyć?
- ?Jak wygląda proces rekrutacyjny – ile etapów, czy jest zadanie domowe?
- ?Jaki jest model pracy – czy 1 dzień w biurze to sztywny wymóg, czy sugerowany?
- ?Czy są plany rozszerzenia stacku o streaming (Kafka, Flink)?
- −Brak informacji o wielkości zespołu
- −Brak opisu procesu rekrutacyjnego
- −Nie wiadomo, czy wymagane są dyżury on-call
- −Nie podano zakresu odpowiedzialności w zakresie architektury
Międzynarodowe środowisko pracy, metodyka SAFe z regularnymi PI Planning, kultura współpracy z analitykami i biznesem.