Senior Big Data Engineer
Grid Dynamics
Rola Senior Big Data Engineera skupia się na budowaniu i optymalizacji potoków danych na dużą skalę oraz infrastruktury do ich przetwarzania. Kandydat będzie projektował, kodował i weryfikował skalowalne zadania przetwarzania danych w języku Scala i Spark, dbając o dokładność metryk dla kluczowych decyzji biznesowych. Praca odbywa się w międzynarodowym, rozproszonym zespole, z naciskiem na własność logiki danych i infrastruktury.
Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji.
Brakuje: brak informacji o konkretnych projektach, nad którymi będzie pracował kandydat., nie podano szczegółów dotyczących kultury organizacyjnej i metodologii pracy zespołu..
Rola Senior Big Data Engineera skupia się na budowaniu i optymalizacji potoków danych na dużą skalę oraz infrastruktury do ich przetwarzania. Kandydat będzie projektował, kodował i weryfikował skalowalne zadania przetwarzania danych w języku Scala i Spark, dbając o dokładność metryk dla kluczowych decyzji biznesowych. Praca odbywa się w międzynarodowym, rozproszonym zespole, z naciskiem na własność logiki danych i infrastruktury.
- ✓Możliwość pracy nad przełomowymi projektami.
- ✓Praca z wysoce zmotywowanym i oddanym zespołem.
- ✓Możliwości rozwoju zawodowego.
- ?Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji
- •Projektowanie, rozwijanie i optymalizacja skalowalnych potoków przetwarzania Big Data z wykorzystaniem Scala i Apache Spark.
- •Implementacja i weryfikacja złożonych zadań przetwarzania danych, aby zapewnić precyzyjne metryki.
- •Praca z infrastrukturą chmurową i środowiskami, wykorzystując Kubernetes do zarządzania i optymalizacji działania Spark na klastrach Kube.
- •Orkiestracja złożonych przepływów danych i harmonogramowanie potoków z użyciem Apache Airflow.
- •Budowanie i utrzymanie architektur strumieniowania danych z wykorzystaniem Spark Streaming i Apache Kafka.
- •Współpraca w rozproszonym, międzynarodowym zespole inżynierów Big Data.
- •Projektowanie i wykonywanie zapytań do złożonych modeli danych w różnych silnikach baz danych (Oracle, Postgres, Teradata, Cassandra).
- •Integracja praktyk DevOps i CI/CD w cyklu życia danych w celu efektywnego zarządzania infrastrukturą backendową.
Oferta dla doświadczonych specjalistów (Senior).
Kandydat z solidnym doświadczeniem w Scala i Apache Spark, który posiada praktyczną wiedzę na temat Kubernetes, Airflow i przetwarzania strumieniowego, a także jest w stanie pracować w międzynarodowym środowisku.
Oferta nie jest dla osób, które nie posiadają doświadczenia w pracy ze Scala i Apache Spark, ani dla tych, którzy nie mają doświadczenia z technologiami przetwarzania rozproszonego i orkiestracji przepływów pracy.
- ?Jak wygląda struktura zespołu i z ilu osób się składa?
- ?Jakie są główne wyzwania projektowe, nad którymi zespół aktualnie pracuje?
- ?Czy istnieje możliwość wpływu na wybór technologii i narzędzi w ramach projektów?
- ?Jak wygląda proces wdrażania nowych członków zespołu i wsparcie w początkowej fazie?
- ?Jakie są główne cele i KPI dla tej roli w perspektywie roku?
- ?Czy istnieją możliwości rozwoju w kierunku architektury danych lub zarządzania zespołem?
- −Brak informacji o konkretnych projektach, nad którymi będzie pracował kandydat.
- −Nie podano szczegółów dotyczących kultury organizacyjnej i metodologii pracy zespołu.
- −Brak informacji o możliwościach rozwoju kariery poza rolą inżyniera.
Praca w międzynarodowym, rozproszonym zespole inżynierów Big Data, z naciskiem na innowacyjność i rozwiązywanie złożonych problemów technicznych.
Proces rekrutacyjny nie został opisany w ogłoszeniu.