Rola skupiona na projektowaniu i utrzymaniu przepływów danych w czasie rzeczywistym z użyciem Apache NiFi i Kafka, w kontekście europejskiej instytucji publicznej z branży bezpieczeństwa. Praca polega na budowie pipeline'ów CDC, integracjach systemów i zarządzaniu metadanymi. Wymaga specjalistycznych certyfikatów Cloudera.

Plusy

✓Długoterminowy, stabilny projekt
✓Praca przy zaawansowanych rozwiązaniach Big Data
✓Prywatna opieka medyczna z dentystą (70% pokrycia) i Multisport dla osoby towarzyszącej

Na co uważać

−Wymagane certyfikaty Cloudera, które mogą być trudne do zdobycia
−Brak widełek wynagrodzenia w ogłoszeniu

!Model hybrydowy z 60% pracy w biurze (Warszawa Wola)
!Klient z sektora publicznego – potencjalnie wolniejsze procesy decyzyjne
!Brak informacji o procesie rekrutacyjnym

?Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji

Codzienna praca

•Projektowanie i implementacja przepływów danych w Apache NiFi
•Budowa i optymalizacja pipeline'ów CDC (real-time / near real-time)
•Integracje systemów za pomocą REST API, JDBC, Kafka
•Zarządzanie schematami danych Avro, metadata i lineage w Apache Atlas
•Konfiguracja polityk bezpieczeństwa w Apache Ranger
•Monitoring, troubleshooting i optymalizacja wydajności pipeline'ów
•Tworzenie dokumentacji technicznej (SOP, runbooki)
•Udział w upgrade'ach i migracjach (CDP / NiFi / Kafka)

Więcej o ofercie

Dla kogo jest ta oferta

Profil idealny

Oferta dla doświadczonych specjalistów (Senior).

Minimum sensowne

Data engineer z 6-letnim stażem, z co najmniej 2-3 latami pracy z NiFi i silną znajomością Kafka/CDC, Python, angielskim B2 oraz wymaganym certyfikatem Cloudera.

Raczej nie dla

Juniorzy i midowie bez doświadczenia z NiFi lub odpowiednich certyfikatów, a także osoby nieakceptujące hybrydy (60% onsite).

Ocena dopasowania

Junior1/5

Mid2/5

Senior5/5

Hands-on5/5

Architekt3/5

Remote1/5

Enterprise4/5

Pytania do rekrutera

?Ile osób liczy zespół Data Engineering?
?Jakie są przewidywane obowiązki on-call i jak często?
?Czy certyfikaty Cloudera są sztywno wymagane, czy istnieje możliwość ich uzyskania w trakcie?
?Jaki jest przewidywany czas trwania projektu?
?Jakie narzędzia do monitoringu są używane?

Brakujące informacje