Expert DevOps Engineer - Cloud Data Platform

Dołączysz do Centrum Eksperckiego AI — centralnego ośrodka kompetencji AI w Banku. Wspólnie z zespołami biznesowymi, IT i Data Science będziesz tworzyć i wdrażać zaawansowane rozwiązania AI i MLOps, realnie wpływając na transformację procesów bankowych oraz rozwój innowacyjnych produktów opartych na danych.

• Bardzo dobra znajomość Google Cloud Platform, w szczególności rozwiązań do przetwarzania i orkiestracji danych (np. BigQuery, Dataflow, Dataproc, Airflow)
• Doświadczenie w projektach migracyjnych on-prem → cloud
• Mile widziana praca z Cloudera lub ekosystemem Hadoop
• Bardzo dobra znajomość Pythona (ETL, pipeline’y danych, automatyzacja)
• Dobra znajomość języka Java
• Doświadczenie w projektowaniu i utrzymaniu pipeline’ów danych w środowiskach produkcyjnych
• Umiejętność projektowania rozwiązań chmurowych z uwzględnieniem skalowalności, bezpieczeństwa oraz optymalizacji kosztowej
• Bardzo dobra znajomość języka angielskiego (C1) – codzienna komunikacja

Nice to have:

• Znajomość narzędzi i praktyk DevOps w środowisku Azure

• Odpowiadasz za techniczne przygotowanie i realizację migracji platformy danych z Cloudera (on-premises) do środowiska Google Cloud Platform
• Projektujesz, rozwijasz i utrzymujesz narzędzia oraz automatyzacje wspierające proces migracji danych, w tym skrypty, pipeline’y oraz mechanizmy transferu danych historycznych i przyrostowych
• Budujesz i utrzymujesz rozwiązania w GCP do ładowania danych (data ingestion), przetwarzania oraz orkiestracji procesów (m.in. harmonogramowanie, zarządzanie zależnościami, retry, monitoring)
• Współpracujesz z zespołami danych i architektury, dbając o zgodność rozwiązań z obowiązującymi standardami platformowymi, wymaganiami bezpieczeństwa, niezawodności i skalowalności
• Wspierasz uruchomienia, testy migracyjne oraz proces stabilizacji środowisk GCP
• Bierzesz udział w optymalizacji kosztowej i operacyjnej środowisk GCP