Data Platform Engineer

Dla naszego klienta - dużej grupy z branży medialnej - poszukujemy Data Platform Engineera, który chciałby rozwijać się na nowym stanowisku w zespole Data Governance.

• Co najmniej 4-letnie doświadczenie w roli związanej z inżynierią danych lub platformą danych
• Praktyka w budowie i utrzymaniu pipeline’ów danych w środowiskach produkcyjnych
• Bardzo dobra znajomość Pythona oraz SQL w integracjach i automatyzacjach
• Doświadczenie w pracy z chmurą (preferowany AWS) oraz narzędziami CI/CD i repozytoriami kodu
• Umiejętność implementowania mechanizmów walidacji i kontroli jakości danych
• Znajomość integracji systemów (API, REST, GraphQL lub pokrewne rozwiązania)
• Rozumienie koncepcji takich jak Data Governance, lineage, katalog danych czy zarządzanie metadanymi
• Język angielski pozwalający na swobodną komunikację

Nice to have:

• Doświadczenie z narzędziami Data Catalog/Data Quality
• Znajomość architektury event-driven
• Udział w projektach open-source

• Utrzymanie i rozwój środowiska platformowego wspierającego zarządzanie metadanymi oraz kontrolę jakości danych
• Integracja platformy z systemami analitycznymi, hurtowniami danych, lakehouse oraz aplikacjami domenowymi
• Automatyzacja procesów związanych z ingestem metadanych, śledzeniem lineage, monitoringiem jakości oraz raportowaniem
• Projektowanie i rozwijanie metamodelu oraz mechanizmów technicznych egzekwujących standardy jakości danych
• Tworzenie dokumentacji technicznej oraz wsparcie użytkowników platformy