Senior Big Data Engineer (Scala + Spark)
Grid Dynamics
Rola polega na projektowaniu i utrzymaniu wydajnych potoków danych na platformie Big Data obsługującej petabajty. Praca w zespole Grid Dynamics, który świadczy usługi dla jednej z największych firm technologicznych z Doliny Krzemowej. Na co dzień kodowanie w Scali i Sparku, orkiestracja Airflow, praca z HDFS oraz Kubernetessem. To rola dla doświadczonego inżyniera danych, nie dla juniora.
Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji.
Brakuje: brak widełek wynagrodzenia, brak opisu procesu rekrutacyjnego.
Rola polega na projektowaniu i utrzymaniu wydajnych potoków danych na platformie Big Data obsługującej petabajty. Praca w zespole Grid Dynamics, który świadczy usługi dla jednej z największych firm technologicznych z Doliny Krzemowej. Na co dzień kodowanie w Scali i Sparku, orkiestracja Airflow, praca z HDFS oraz Kubernetessem. To rola dla doświadczonego inżyniera danych, nie dla juniora.
- ✓Praca nad najnowszymi technologiami Big Data na dużą skalę
- ✓Elastyczne godziny pracy
- ✓Rozwój zawodowy i szkolenia
- ✓Znana firma konsultingowa z notowaniem na NASDAQ
- −Brak widełek wynagrodzenia
- −Brak szczegółów procesu rekrutacyjnego
- !Rola w outsourcingu – konieczność dopasowania do klienta i potencjalne zmiany projektu
- !Ogłoszenie nie precyzuje zakresu obowiązków on-call ani dyżurów
- !Duża liczba technologii – możliwe, że część jest wymagana tylko w teorii
- ?Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji
- •Projektowanie i rozwijanie potoków danych w Scali i Sparku na klastrze Hadoop
- •Implementacja przepływów pracy w Airflow do ingestion i przetwarzania danych
- •Utrzymywanie i optymalizacja raportów ciągłych oraz dashboardów
- •Debugowanie i rozwiązywanie problemów z przetwarzaniem danych w produkcji
- •Współpraca z zespołami produktowymi w celu określenia wymagań danych
- •Tuning wydajnościowy jobów Spark i zapytań HDFS
- •Uczestnictwo w code review i utrzymanie standardów jakości kodu
- •Wdrożenia i monitorowanie pipeline'ów z użyciem Gradle i Kubernetes
Oferta dla doświadczonych specjalistów (Senior).
Mid-level data engineer z minimum 3 latami pracy z Sparkiem i Scala, znający Airflow i podstawy HDFS, potrafiący samodzielnie implementować potoki danych.
Juniorzy bez komercyjnego doświadczenia w Big Data; osoby szukające pracy w pełni zdalnej (tryb hybrydowy); osoby niechętne do pracy z legacy Hadoopem.
- ?Ile osób liczy zespół projektowy i jak wygląda podział obowiązków?
- ?Jaki jest konkretnie model hybrydowy – ile dni w biurze tygodniowo?
- ?Czy istnieje możliwość pracy zdalnej z zagranicy?
- ?Jak wygląda proces rekrutacji (ile etapów, czy jest zadanie domowe)?
- ?Czy na projekcie używa się Flinka (technologia wymieniona w zestawieniu)?
- ?Jakie są najbliższe plany rozwoju platformy – czy są migracje do chmury?
- ?Czy jest wsparcie dla kontynuacji edukacji (certyfikaty, konferencje)?
- −Brak widełek wynagrodzenia
- −Brak opisu procesu rekrutacyjnego
- −Nie podano liczby dni hybrydowych
- −Brak informacji o budżecie szkoleniowym
- −Nie wiadomo czy istnieje system on-call
Zespół jest opisywany jako wysoko zmotywowany i oddany, z dobrze wyposażonym biurem i wydarzeniami integracyjnymi.