Data Operations Engineer
DCG
To rola operacyjnego inżyniera danych, skupiona na ciągłym pobieraniu danych do Hadoop za pomocą zastrzeżonego frameworka ARC Ingestion. Codzienna praca obejmuje konfigurację, testowanie i utrzymanie procesów pozyskiwania danych, rozwiązywanie problemów oraz współpracę w zespole Agile. To nie jest rola budująca nowe pipeline'y od zera, lecz utrzymująca i rozwijająca istniejące strumienie danych. Wymagana jest dobra znajomość Linuksa, SQL i Gita, a mile widziane Hadoop i automatyzacja.
Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji.
Brakuje: nie określono liczby dni w biurze dla trybu hybrydowego, nie podano struktury zespołu ani osoby raportowania.
To rola operacyjnego inżyniera danych, skupiona na ciągłym pobieraniu danych do Hadoop za pomocą zastrzeżonego frameworka ARC Ingestion. Codzienna praca obejmuje konfigurację, testowanie i utrzymanie procesów pozyskiwania danych, rozwiązywanie problemów oraz współpracę w zespole Agile. To nie jest rola budująca nowe pipeline'y od zera, lecz utrzymująca i rozwijająca istniejące strumienie danych. Wymagana jest dobra znajomość Linuksa, SQL i Gita, a mile widziane Hadoop i automatyzacja.
- ✓Dofinansowanie karty sportowej
- ✓Możliwości szkoleniowe
- ✓Program poleceń pracowników
- ✓Stałe wsparcie dedykowanego konsultanta
- −Oferta od agencji rekrutacyjnej DCG – rzeczywisty klient i projekt nie są znane
- −Zastrzeżony framework ARC Ingestion – może wymagać nauki specyficznych narzędzi
- −Brak informacji o dyżurach lub pracy zmianowej (częste w operacjach)
- !Nie podano widełek wynagrodzenia
- !Wymaganie 'analitycznego myślenia' jest nieprecyzyjne
- !Doświadczenie w testowaniu tylko mile widziane, nie określono rodzaju testów
- ?Brak jawnych widełek — wynagrodzenie do ustalenia podczas rekrutacji
- •Pobieranie danych do Hadoop z wykorzystaniem ARC Ingestion Framework
- •Przygotowywanie i konfigurowanie ustawień ingestycyjnych dla nowych źródeł danych
- •Testowanie poprawności działania procesów pobierania danych
- •Utrzymanie i wsparcie istniejących źródeł danych działających na produkcji
- •Rozwiązywanie problemów z ingestycją i innych błędów operacyjnych
- •Praca w zespołach Agile – codzienne stand-upy, planowanie sprintów
- •Korzystanie z Gita do wersjonowania konfiguracji i skryptów
- •Pisanie zapytań SQL do walidacji i debugowania danych
Oferta skierowana do developerów z doświadczeniem komercyjnym (Mid).
Osoba z co najmniej 1-2 letnim doświadczeniem w operacjach IT lub inżynierii danych, zaznajomiona z Linux, SQL i podstawami Gita. Silne umiejętności rozwiązywania problemów i chęć nauki Hadoop oraz specyficznych frameworków.
Juniorzy bez doświadczenia w Linux/SQL oraz osoby szukające czysto developerskiej roli budującej nowe pipeline'y danych. Nie dla tych, którzy nie lubią pracy operacyjnej i utrzymaniowej.
- ?Kim jest klient końcowy (firma, w której będę pracować)?
- ?Ile osób liczy zespół danych, do którego dołączę?
- ?Czy wiąże się to z dyżurami / pracą po godzinach?
- ?Jaka wersja Hadoop jest używana (np. Cloudera, Hortonworks)?
- ?Ile źródeł danych jest obecnie w produkcji?
- ?Jak wygląda proces onboardingu nowych źródeł danych?
- ?Czy są możliwości automatyzacji poza podstawowym Pythonem?
- −Nie określono liczby dni w biurze dla trybu hybrydowego
- −Nie podano struktury zespołu ani osoby raportowania
- −Brak informacji o procesie rekrutacyjnym
- −Nie wiadomo, czy ARC Ingestion to framework własny czy zewnętrzny
- −Nie określono branży klienta