Data Engineer
apreel
Rola Data Engineera w zespole budującym nowoczesne rozwiązania data & analytics na GCP. Codzienna praca obejmuje projektowanie i rozwijanie skalowalnych pipeline'ów danych, ETL/ELT, optymalizację BigQuery, tworzenie rozwiązań serverless (Cloud Run, Cloud Functions) oraz orkiestrację workflow przy użyciu Cloud Composer (Airflow). Osoba na tym stanowisku będzie odpowiedzialna za automatyzację procesów ingestii danych, walidację jakości danych oraz współpracę z zespołami analitycznymi i developerskimi. Jest to typowa rola Data Engineera w chmurze, bez ukrytych specjalizacji.
Brakuje: nie podano wielkości zespołu ani struktury organizacyjnej, brak opisu procesu rekrutacyjnego.
Rola Data Engineera w zespole budującym nowoczesne rozwiązania data & analytics na GCP. Codzienna praca obejmuje projektowanie i rozwijanie skalowalnych pipeline'ów danych, ETL/ELT, optymalizację BigQuery, tworzenie rozwiązań serverless (Cloud Run, Cloud Functions) oraz orkiestrację workflow przy użyciu Cloud Composer (Airflow). Osoba na tym stanowisku będzie odpowiedzialna za automatyzację procesów ingestii danych, walidację jakości danych oraz współpracę z zespołami analitycznymi i developerskimi. Jest to typowa rola Data Engineera w chmurze, bez ukrytych specjalizacji.
- ✓W pełni zdalna współpraca (remote)
- ✓Nowoczesny stos technologiczny (serverless, GCP, Airflow)
- ✓Widełki wynagrodzenia podane w ogłoszeniu
- ✓B2B z wysoką stawką
- •Projektowanie i rozwój pipeline'ów danych w środowisku GCP
- •Budowa i optymalizacja procesów ETL/ELT
- •Pisanie i optymalizacja zaawansowanych zapytań SQL w BigQuery
- •Tworzenie rozwiązań serverless z wykorzystaniem Cloud Run i Cloud Functions
- •Orkiestracja workflow przy użyciu Cloud Composer (Apache Airflow)
- •Zarządzanie procesami ingestii danych i Cloud Storage
- •Monitorowanie jakości danych i walidacja procesów przetwarzania
- •Współpraca z zespołami analitycznymi, developerskimi i biznesowymi
Oferta skierowana do developerów z doświadczeniem komercyjnym (Mid).
Data Engineer ze solidną znajomością GCP (zwłaszcza BigQuery), który potrafi samodzielnie budować proste pipeline'y i optymalizować zapytania SQL. Może mieć mniejsze doświadczenie z Airflow, ale chęć nauki.
Osoby bez doświadczenia z GCP i BigQuery, juniorsi (<2 lata) oraz osoby preferujące pracę stacjonarną lub hybrydową z częstą obecnością w biurze.
- ?Jaka jest wielkość zespołu data engineering i struktura?
- ?Czy pipeline'y dotyczą konkretnego produktu/klienta, czy różnych projektów?
- ?Jaki jest oczekiwany proces rekrutacyjny (etapy, zadanie domowe)?
- ?Czy istnieje możliwość rozwoju w kierunku DataOps lub architektury?
- ?Jak wygląda kwestia on-call / dyżurów produkcyjnych?
- ?Jakie są źródła danych (systemy, API, streaming)?
- −Nie podano wielkości zespołu ani struktury organizacyjnej
- −Brak opisu procesu rekrutacyjnego
- −Nie wiadomo, czy praca dotyczy jednego projektu/klienta czy wielu
- −Brak informacji o skali danych (wolumeny, liczba pipeline'ów)
- −Nie określono, czy wymagane są dyżury on-call
Na poziomie rynkowym
Dane z aktywnych ofert zawierających technologię BigQuery. Pełne statystyki zarobków →