Senior Data Engineer
Osoba na tym stanowisku będzie odpowiedzialna za wsparcie w opracowaniu koncepcji i planu migracji z Cloudera Hadoop na Opensource Hadoop, obejmującego poszczególne środowiska Klienta, komponenty, aplikacje, dane oraz użytkowników. Do zadań kandydata będzie należeć również wsparcie w przygotowaniu oraz realizacji migracji klastra Hadoop, z naciskiem na migrację danych i użytkowników. Dodatkowo, osoba na tym stanowisku będzie zaangażowana w opracowanie planu utrzymania oraz zapewnienie ciągłości działania systemu. Konsultant będzie członkiem zespołu pracującego w metodyce Scrum.
Zakres obowiązków:
• Wsparcie w opracowaniu koncepcji i planu migracji z Cloudera Hadoop na Opensource Hadoop dla poszczególnych środowisk Klienta, komponentów/aplikacji, danych i użytkowników, a w szczególności:
- Inwentaryzacja i analiza usług opartych na klastrze Cloudera HDP (również tych planowanych do wdrożenia w okresie prowadzenia inicjatywy migracji klastra na Opensource HDP).
- Inwentaryzacja i analiza infrastruktury klastra na poszczególnych środowiskach Klienta z uwzględnieniem najoptymalniejszego użycia w procesie migracji i po migracji.
- Inwentaryzacja i analiza danych oraz użytkowników i opracowanie najoptymalniejszej strategii migracji dla nich.
- Uwzględnienie najnowszych praktyk i zaleceń ekosystemu Hadoop.
- Analiza i zaprojektowanie optymalnych rozwiązań zastępujących wybrane komponenty Cloudera Hadoop.
• Wsparcie w przygotowaniu i realizacji migracji klastra Hadoop, w szczególności:
- Udział w wykonaniu kompilacji i budowy komponentów Opensource Hadoop.
- Instalacji, poszczególnych komponentów platformy Opensource Hadoop i aplikacji podlegających migracji z wykorzystaniem środowisk on-prem Klienta.
- Doradztwa technologicznego w zakresie architektury docelowego klastra oraz jego komponentów na docelowej infrastrukturze w zakresie – pełnego landscape aplikacji/ usług/ procesów Klienta (produkcyjnie lub koncepcyjnie w ramach wdrożenia i prac zaplanowanych do wdrożenia w terminie znajdującym się w otoczeniu inicjatywy migaracji Opensource HDP).
• Wsparcie w przygotowaniu i realizacji migracji danych i użytkowników.
• Wsparcie w przygotowaniu planu utrzymania oraz zachowania ciągłości działania, w szczególności w zakresie: trouble shooting hive i spark, działania kerberos na w klastrze, radzenia sobie z błędami Java.
• Ciągły transfer wiedzy poprzez bieżące organizowanie warsztatów dla zespołu Klienta.
• Zakończenie migracji na klaster Opensource Hadoop w maju 2026 z możliwością przedłużenia współpracy na rok 2026.
Oferujemy:
• Globalne projekty w chmurze - pracujemy z klientami z całego świata w oparciu o nowoczesne technologie chmurowe
• Refundacja certyfikatów - finansujemy egzaminy, certyfikaty Microsoft, AWS, Databricks
• Czas na naukę - 60 godzin płatnych w skali roku
• Elastyczne podejście - możliwość wyboru pomiędzy pracą z domu a spotkaniami w naszych biurach
• Spersonalizowane benefity - opieka medyczna, dofinansowanie pakietów sportowych, nauki języków, bonus za polecenie nowego pracownika (nawet do 15 000 PLN) a także premia roczna oraz medialna