Senior Data Engineer
SNI
Rola dla doświadczonego inżyniera danych, który będzie projektował i wdrażał rozwiązania do przetwarzania strumieniowego danych przy użyciu Apache Flink i Apache Kafka. Kluczowe jest doświadczenie z Kubernetes, CI/CD oraz umiejętność optymalizacji platformy. Kandydat będzie pracował w modelu zdalnym dla prestiżowych klientów.
Brakuje: informacje o konkretnych klientach i projektach., szczegóły dotyczące struktury zespołu i współpracy z innymi inżynierami..
Rola dla doświadczonego inżyniera danych, który będzie projektował i wdrażał rozwiązania do przetwarzania strumieniowego danych przy użyciu Apache Flink i Apache Kafka. Kluczowe jest doświadczenie z Kubernetes, CI/CD oraz umiejętność optymalizacji platformy. Kandydat będzie pracował w modelu zdalnym dla prestiżowych klientów.
- ✓Praca w modelu w pełni zdalnym.
- ✓Możliwość pracy z prestiżowymi klientami.
- ✓Wykorzystanie narzędzi wspomaganych AI w całym cyklu życia oprogramowania.
- !Nie sprecyzowano, czy praca dotyczy jednego klienta, czy wielu.
- !Nie podano konkretnych narzędzi CI/CD, choć są one wymienione jako wymagane podejście.
- •Projektowanie i implementacja rozwiązań strumieniowych z użyciem Apache Flink i Apache Kafka.
- •Rozwijanie możliwości Flink SQL (filtrowanie, projekcje payloadów, łączenie tematów).
- •Wdrażanie, konfigurowanie i obsługa obciążeń Flink przy użyciu Flink Kubernetes Operator.
- •Budowanie i utrzymywanie integracji Kafka Connect oraz logiki transformacji.
- •Rozwijanie możliwości transformacji XML-to-Avro i niestandardowych wtyczek SMT Kafka Connect.
- •Współpraca z zespołami wewnętrznymi w zakresie zarządzania schematami i frameworków wdrażania self-service.
- •Wsparcie procesów wdrażania CI/CD i GitOps.
- •Dostarczanie rozwiązań z wykorzystaniem praktyk inżynierii wspomaganej AI.
Oferta dla doświadczonych specjalistów (Senior).
Kandydat z solidnym doświadczeniem w Apache Flink, Kafka i Kubernetes, który potrafi samodzielnie projektować i wdrażać rozwiązania strumieniowe, zna procesy CI/CD i jest otwarty na wykorzystanie narzędzi AI.
Nie dla osób z niewielkim doświadczeniem w obszarze przetwarzania strumieniowego danych, które nie miały styczności z Apache Flink, Kafka lub Kubernetes. Rola wymaga zaawansowanej wiedzy technicznej w tych obszarach.
- ?Jakie są główne wyzwania projektowe, z którymi kandydat będzie się mierzył?
- ?Jak wygląda proces wdrażania i testowania niestandardowych wtyczek SMT Kafka Connect?
- ?Czy istnieją jakieś konkretne wymagania dotyczące wydajności lub opóźnień dla rozwiązań strumieniowych?
- ?Jakie są oczekiwania dotyczące współpracy z zespołami klientów?
- ?Czy można podać przykłady projektów, w których wykorzystywano Flink Kubernetes Operator?
- ?Jakie są główne różnice między Flink SQL a Flink Table API w kontekście tej roli?
- ?Jak wygląda proces zarządzania schematami i ewolucji schematów w praktyce?
- −Informacje o konkretnych klientach i projektach.
- −Szczegóły dotyczące struktury zespołu i współpracy z innymi inżynierami.
- −Informacje o budżecie szkoleniowym.
- −Dokładny zakres odpowiedzialności za architekturę.
Firma działa jako partner outsourcingowy IT, dostarczając rozwiązania dla prestiżowych klientów. Nacisk kładziony jest na wysoką jakość techniczną i wykorzystanie nowoczesnych technologii.
Proces rekrutacyjny nie został opisany w ogłoszeniu.