Data Engineer (On-Prem)
emagine Polska•Warsaw•Zdalnie
emagine Polska działa jako firma doradcza i outsourcingowa, specjalizująca się w dostarczaniu ekspertów IT do projektów międzynarodowych, głównie dla klientów z sektora skandynawskiego. Rola Data Engineera skupia się na utrzymaniu infrastruktury on-premise oraz hybrydowej, co jest obecnie rzadziej spotykaną specjalizacją w dobie migracji do chmury. Firma operuje w modelu pośrednictwa, co oznacza, że realne środowisko pracy zależy od konkretnego klienta końcowego. Brak transparentności płacowej jest standardem w ich procesach rekrutacyjnych, co utrudnia ocenę atrakcyjności finansowej na starcie. Reputacja emagine opiera się na stabilnych, długofalowych kontraktach, jednak rotacja bywa zależna od kondycji finansowej klienta, do którego delegowany jest inżynier.
📝 Opis główny / Wstęp
Summary: The core purpose of the on-prem Data Engineer role is to design, manage, and optimize scalable data pipelines while supporting the technical decision-making process in building AI-driven services for Nordic clients.
Main Responsibilities:
Build, maintain, and optimize scalable data pipelines (Kubernetes-based).
Work with distributed data processing tools (e.g., Spark).
Design and implement robust data architectures in hybrid/on-prem environments.
Work with storage technologies including Cloudera and MinIO.
Deliver end-to-end code across multiple environments.
Collaborate closely with a small, senior engineering team.
Participate in building AI-driven data products for Nordic clients.
Key Requirements:
Strong hands-on experience with on-prem data platforms.
Proficiency in designing and operating Kubernetes.
Experience managing distributed data processing frameworks (e.g., Spark).
Familiarity with Cloudera for storage and data services.
Ability to deliver end-to-end code in hybrid environments.
Nice to Have:
Hands-on experience with Airbyte.
Experience with dbt for development & data transformations.
Familiarity with ETL/ELT orchestration and modern data tooling.
Other Details:
Team Structure: Small, remote-first team with a flexible culture.
Work Environment: Offers autonomy and responsibility.