Data Engineer
The Codest
Rola Data Engineer w zespole budującym od podstaw nową platformę do zarządzania kampaniami reklamowymi w czasie rzeczywistym (RTB) dla dużego klienta e-commerce. Główny nacisk na budowę wysoko wydajnych potoków danych o ultra-niskiej latencji (miliony QPS). Praca z Pythonem, SQL, Kafka, Spark/Flink w chmurze GCP. To rola inżynierska, wymagająca głębokiej wiedzy o Big Data i optymalizacji wydajności.
Brakuje: nie podano wielkości zespołu ani liczby data engineerów w projekcie, brak informacji o systemie on-call i jego częstotliwości.
Rola Data Engineer w zespole budującym od podstaw nową platformę do zarządzania kampaniami reklamowymi w czasie rzeczywistym (RTB) dla dużego klienta e-commerce. Główny nacisk na budowę wysoko wydajnych potoków danych o ultra-niskiej latencji (miliony QPS). Praca z Pythonem, SQL, Kafka, Spark/Flink w chmurze GCP. To rola inżynierska, wymagająca głębokiej wiedzy o Big Data i optymalizacji wydajności.
- ✓Płatne dni wolne w święta kalendarzowe na B2B
- ✓Monthly 300zł na platformie Worksmile do wykorzystania na giftcardy i usługi
- ✓Zielony projekt (nowa platforma, brak legacy) z dużym wpływem na architekturę
- −Wymagana dostępność od lipca 2027 – oferta może dotyczyć odległego projektu, co budzi wątpliwości co do terminu rekrutacji i stabilności
- !Projekt jest greenfield, ale klient to duża firma – może wiązać się z presją czasową i częstymi zmianami wymagań
- !Wspomniana analiza kodu Go, ale Go nie jest wymienione w wymaganiach – może być konieczność nauki nowego języka
- !Proces rekrutacyjny tylko 2 etapy – może być powierzchowny
- •Budowa nowych potoków danych w środowisku RTB z naciskiem na niskie opóźnienia
- •Projektowanie systemów o ultra-niskiej latencji (miliony QPS) i optymalizacja wydajności
- •Implementacja rozwiązań w Pythonie, SQL i Kafka
- •Analiza i code review kodu Go w serwisach partnerskich
- •Praca z Apache Spark i Apache Flink w ekosystemie Scala/JVM
- •Zarządzanie wdrożeniami i utrzymanie systemów w chmurze (głównie GCP)
- •Udział w kształtowaniu architektury rozwiązań danych
Oferta skierowana do developerów z doświadczeniem komercyjnym (Mid).
Inżynier danych z 3-letnim doświadczeniem komercyjnym, dobry w Pythonie i SQL, mający styczność z Big Data. Musi być dostępny od lipca 2027 i płynnie mówić po polsku.
Osoby z mniej niż 3 latami doświadczenia w Data Engineering, niezainteresowane real-time/low-latency, lub nie mogące rozpocząć projektu w lipcu 2027. Nie dla osób szukających klasycznej roli ETL/BI bez optymalizacji wydajności.
- ?Czy data rozpoczęcia projektu (lipiec 2027) jest pewna? Czy istnieje możliwość wcześniejszego zaangażowania?
- ?Ile osób liczy zespół Data Engineering przy tym projekcie?
- ?Jak wygląda system dyżurów (on-call) i czy jest dodatkowo płatny?
- ?Czy praca z Go to tylko analiza kodu, czy również pisanie w Go?
- ?Jakie są główne wyzwania techniczne w zakresie latencji (targetowany poziom)?
- ?Czy istnieje możliwość pracy na innych projektach po zakończeniu tego?
- ?Jaki jest stosunek pracy nad nową platformą do utrzymania istniejących systemów?
- −Nie podano wielkości zespołu ani liczby Data Engineerów w projekcie
- −Brak informacji o systemie on-call i jego częstotliwości
- −Nie ma wzmianki o budżecie szkoleniowym ani konferencjach
- −Nie wiadomo, czy projekt jest jedynym, czy będzie rotacja między projektami
Firma kładzie nacisk na innowacje i pomysły pracowników, ale to outsourcing do dużego klienta – kultura może być mieszanką własnej i klienckiej.
30-minutowa rozmowa z rekruterem, następnie 1-godzinna rozmowa techniczna z Tech Leaderem, potem oferta.
Poniżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię Apache Spark.