Data Engineer (k/m)
B2B.NET
Rola Data Engineera skupiona na budowaniu, optymalizacji i utrzymaniu procesów przetwarzania danych, w szczególności z wykorzystaniem Apache Airflow i technologii kontenerowych. Kandydat będzie odpowiedzialny za automatyzację wdrożeń ETL, zarządzanie infrastrukturą w OpenShift oraz pisanie i optymalizację zapytań SQL.
Brakuje: nie podano wielkości zespołu., nie podano szczegółów dotyczących konkretnych projektów, nad którymi będzie pracował kandydat..
Rola Data Engineera skupiona na budowaniu, optymalizacji i utrzymaniu procesów przetwarzania danych, w szczególności z wykorzystaniem Apache Airflow i technologii kontenerowych. Kandydat będzie odpowiedzialny za automatyzację wdrożeń ETL, zarządzanie infrastrukturą w OpenShift oraz pisanie i optymalizację zapytań SQL.
- •Tworzenie, optymalizacja i utrzymanie DAG-ów w Apache Airflow
- •Konfiguracja Task Flow API, mechanizmów XComs oraz zarządzanie zależnościami i harmonogramowaniem zadań
- •Automatyzacja wdrożeń DAG-ów i kodu ETL na środowisku OpenShift (GitLab CI/CD, Jenkins, ArgoCD)
- •Zarządzanie obiektami OpenShift (Pods, Deployments, Routes, ConfigMaps, Secrets) oraz skalowanie aplikacji w kontenerach
- •Pisanie i optymalizacja zapytań w SQL, PL/SQL i Transact-SQL
- •Praca ze środowiskami Oracle
- •Wdrażanie rozwiązań Infrastructure as Code
- •Współpraca z zespołami analitycznymi i inżynierskimi przy projektowaniu procesów przetwarzania danych
Oferta skierowana do developerów z doświadczeniem komercyjnym (Mid).
Kandydat z praktyczną znajomością Apache Airflow, SQL i Oracle, który ma doświadczenie z OpenShift/Kubernetes oraz narzędziami CI/CD. Powinien również posiadać podstawową znajomość Pythona i narzędzi IaC.
Rola nie jest dla osób bez doświadczenia w Apache Airflow, SQL i technologiach kontenerowych jak OpenShift/Kubernetes. Kandydaci bez umiejętności automatyzacji wdrożeń i pracy z bazami danych również nie będą pasować.
- ?Jak wygląda typowy dzień pracy w tej roli?
- ?Jakie są główne wyzwania projektowe, z którymi mierzy się zespół?
- ?Czy istnieje możliwość pracy nad nowymi projektami, czy głównie utrzymanie istniejących?
- ?Jak wygląda proces wdrażania nowych funkcjonalności lub zmian w DAGach?
- ?Jakie są możliwości rozwoju technologicznego w ramach tej roli?
- −Nie podano wielkości zespołu.
- −Nie podano szczegółów dotyczących konkretnych projektów, nad którymi będzie pracował kandydat.
- −Brak informacji o możliwościach rozwoju kariery w ramach firmy.
Rozmowa techniczna, Rozmowa z klientem
Poniżej mediany rynkowej
Dane z aktywnych ofert zawierających technologię SQL. Pełne statystyki zarobków →