Senior Cloud Data Engineer (AWS)
Future Processing
To rola dla doświadczonego inżyniera danych, który będzie pracował dla irlandzkiego klienta z branży ubezpieczeniowej. Będziesz odpowiedzialny za projektowanie, budowę i optymalizację skalowalnych pipeline'ów danych w chmurze AWS, z wykorzystaniem Snowflake, PySpark, Terraform i Airflow. Praca ma charakter 100% zdalny, a zespół działa w metodykach zwinnych. Wymagana jest duża samodzielność w tworzeniu rozwiązań ETL/ELT oraz współpraca przy analizie wymagań biznesowych.
Brakuje: wielkość zespołu i struktura projektu, zakres odpowiedzialności poza techniczną stroną (np. kontakt z klientem).
To rola dla doświadczonego inżyniera danych, który będzie pracował dla irlandzkiego klienta z branży ubezpieczeniowej. Będziesz odpowiedzialny za projektowanie, budowę i optymalizację skalowalnych pipeline'ów danych w chmurze AWS, z wykorzystaniem Snowflake, PySpark, Terraform i Airflow. Praca ma charakter 100% zdalny, a zespół działa w metodykach zwinnych. Wymagana jest duża samodzielność w tworzeniu rozwiązań ETL/ELT oraz współpraca przy analizie wymagań biznesowych.
- ✓Finansowanie certyfikacji AWS, Microsoft i Databricks
- ✓Dostęp do narzędzi AI od pierwszego dnia
- ✓Społeczność ekspertów i wsparcie architektów
- ✓Merytoryczny feedback po rekrutacji
- ✓Realny wpływ na projekt i swoboda działania
- !Brak informacji o wielkości zespołu i strukturze projektu
- !Wymieniono Azure DevOps jako narzędzie, co może sugerować mieszanie stacków chmurowych
- !Opis wymagań jest bardzo obszerny i szczegółowy – może wskazywać na wysokie oczekiwania
- !Nie podano długości projektu ani możliwości przedłużenia
- •Projektowanie i wdrażanie pipeline'ów ETL/ELT w AWS (Glue, Athena, S3) z orkiestracją w Apache Airflow
- •Pisanie i optymalizacja zapytań SQL oraz skryptów PySpark do przetwarzania dużych zbiorów danych
- •Tworzenie i zarządzanie infrastrukturą jako kodem (IaC) przy użyciu Terraform
- •Implementacja CI/CD dla procesów danych (np. Azure DevOps, Git)
- •Współpraca z zespołem przy analizie wymagań klienta i proponowaniu optymalnych rozwiązań danych
- •Debugowanie i optymalizacja istniejących procesów danych pod kątem wydajności i kosztów
- •Tworzenie dokumentacji technicznej i raportowanie postępów
- •Testowanie rozwiązań danych w środowisku produkcyjnym i nieprodukcyjnym
Oferta dla doświadczonych specjalistów (Senior).
Inżynier danych z co najmniej 3.5-letnim doświadczeniem w AWS, który biegle posługuje się PySpark, Snowflake, Terraform i SQL. Może nie mieć pełnej biegłości we wszystkich wymienionych technologiach, ale musi wykazać się solidnymi projektami komercyjnymi w AWS.
Juniorzy lub osoby z mniej niż 3 latami doświadczenia w danych na AWS. Kandydaci szukający pracy w pełni stacjonarnej (oferta jest zdalna, ale lokalizacja Gliwice sugeruje możliwość biura). Osoby niekomfortowe z samodzielną pracą i odpowiedzialnością za całe rozwiązanie danych.
- ?Ile osób liczy zespół i jakie są role w projekcie?
- ?Czy projekt jest długoterminowy, czy na określony czas?
- ?Jakie są główne wyzwania techniczne w obecnym stacku?
- ?Czy oczekiwana jest dyspozycyjność on-call lub praca w godzinach irlandzkich?
- ?Jakie konkretne narzędzia AWS są używane w projekcie poza wymienionymi?
- ?Czy istnieje możliwość pracy na innych projektach po zakończeniu tego?
- ?Jak wygląda proces onboardingu w zespole?
- ?Czy są jakieś plany migracji z Airflow na inny orchestrator?
- −Wielkość zespołu i struktura projektu
- −Zakres odpowiedzialności poza techniczną stroną (np. kontakt z klientem)
- −Dokładny stos technologiczny (wersje AWS, Snowflake itp.)
- −Proces rekrutacyjny (etapy, zadania domowe, live coding)
Na poziomie rynkowym
Dane z aktywnych ofert zawierających technologię AWS. Pełne statystyki zarobków →