Data Reliability Engineer

Goldenore ITC is a Polish company operating in the IT market, specializing in expert outsourcing. Using efficient, proven models and solutions, we can guarantee our clients optimal project execution, precisely tailored in resources and timing to meet their needs. For candidates, we provide opportunities for dynamic career growth, supporting them throughout the entire collaboration process.

• 3–5+ lat doświadczenia jako Data Engineer / Data Platform Engineer lub w pokrewnej roli
• Doświadczenie w budowie i utrzymaniu pipeline’ów ETL / ELT w środowiskach produkcyjnych
• Bardzo dobra znajomość Python (API, automatyzacje, integracje)
• Bardzo dobra znajomość SQL
• Doświadczenie z AWS
• Znajomość CI/CD, GitHub
• Doświadczenie w implementacji walidacji danych, testów danych lub mechanizmów kontroli jakości
• Doświadczenie w integracjach systemowych (REST API, GraphQL lub podobne)
• Rozumienie zagadnień Data Governance, Metadata Management, Data Lineage, Data Quality
• Samodzielność i dobra komunikacja w środowisku projektowym
• Angielski umożliwiający pracę w międzynarodowym środowisku

Nice to have:

• DataHub, Apache Atlas, Amundsen lub podobne narzędzia Metadata Management
• Great Expectations, Soda, Deequ lub podobne narzędzia Data Quality
• Znajomość architektury event-driven
• Doświadczenie w open source
• Background w Data Governance / Master Data Management

• Implementacja, konfiguracja i rozwój platformy do zarządzania metadanymi oraz jakości danych
• Integracja rozwiązania z lakehouse, hurtownią danych, systemami dziedzinowymi i narzędziami analitycznymi
• Automatyzacja ingestu metadanych, lineage, monitoringu jakości danych i raportowania DQ
• Rozwój metamodelu oraz mechanizmów egzekwowania reguł jakości danych
• Budowa i rozwój integracji w obszarze Metadata Management oraz Data Quality
• Monitorowanie stabilności, wydajności i bezpieczeństwa środowiska
• Współpraca z zespołami Data Engineering, Data Governance i AI
• Tworzenie dokumentacji technicznej oraz wsparcie użytkowników platformy