Inżynier / Inżynierka Danych (Data Engineer)

Stanowisko dla klienta z branży farmaceutycznej.

• Praktyczne doświadczenie w pracy z Snowflake
• Umiejętność budowania i utrzymywania pipeline’ów danych przy użyciu Pythona lub R
• Swobodne programowanie w SQL/PLSQL
• Znajomość narzędzi ETL/ELT, takich jak Talend, DBT czy Alteryx
• Rozumienie zagadnień modelowania danych, zarządzania metadanymi i jakości danych
• Doświadczenie w pracy z chmurą AWS (m.in. S3, Glue, Lambda)
• Znajomość środowisk kontenerowych i procesów CI/CD
• Znajomość różnych technologii bazodanowych i platform danych (relacyjne, MPP, NoSQL)
• Znajomość koncepcji hurtowni danych i przetwarzania rozproszonego
• Znajomość języka angielskiego na poziomie minimum B2

• Projektowanie oraz rozwijanie wydajnych i niezawodnych procesów przetwarzania danych, obejmujących integrację informacji z różnych źródeł, takich jak pliki, bazy danych czy zasoby chmurowe
• Tworzenie i optymalizacja architektury hurtowni danych, w tym modeli Data Vault, wraz z definiowaniem standardów technicznych i najlepszych praktyk DataOps
• Budowa oraz konfiguracja obiektów w środowisku Snowflake, w szczególności stage’y, formatów plików i mechanizmów ładowania danych z AWS S3
• Nadzór nad pełnym cyklem życia produktów danych oraz dbanie o ich jakość, kompletność i niezawodność
• Współpraca z zespołami biznesowymi i technicznymi, prowadzenie przeglądów kodu oraz udział w inicjatywach usprawniających środowisko data engineering