Data Engineer (K/M)

Projekt dotyczy budowy i rozwoju nowoczesnej platformy danych opartej na rozwiązaniach chmurowych AWS oraz Azure. Jego celem jest tworzenie wydajnych i skalowalnych pipeline’ów danych oraz integracja danych z różnych źródeł w celu wsparcia procesów analitycznych i biznesowych.

W ramach projektu zespół odpowiada za rozwój procesów ETL, zapewnienie wysokiej jakości danych oraz wdrażanie standardów bezpieczeństwa i zgodności. Istotnym elementem jest również optymalizacja architektury danych oraz udział w inicjatywach związanych z migracją systemów do chmury.

Projekt realizowany jest w środowisku międzynarodowym, we współpracy z analitykami i interesariuszami biznesowymi, co daje realny wpływ na kształt rozwiązań oraz ich zastosowanie w praktyce.

• 4–6 lat doświadczenia w obszarze data engineering (ETL, integracja, modelowanie danych)
• Bardzo dobra znajomość usług AWS lub Azure (lub obu), takich jak Azure Databricks, Data Lake, Data Factory, Glue, Synapse, Snowflake, AWS Redshift
• Dobra znajomość języków Python oraz SQL
• Znajomość narzędzi CI/CD oraz podstawowych zagadnień DevOps
• Rozumienie zasad integracji danych oraz jakości danych
• Znajomość języka angielskiego na poziomie minimum B2

Nice to have:

• Doświadczenie w projektach z obszaru healthcare lub fintech/pharma będzie dodatkowym atutem

• Projektowanie, wdrażanie oraz utrzymanie rozwiązań do przetwarzania danych w środowiskach AWS i Azure
• Budowanie oraz optymalizacja procesów ETL i przepływów integracji danych
• Tworzenie i utrzymanie pipeline’ów danych z wykorzystaniem Azure Data Factory, Synapse oraz Databricks
• Zapewnienie jakości danych, bezpieczeństwa oraz zgodności ze standardami we wszystkich rozwiązaniach
• Współpraca z analitykami, interesariuszami biznesowymi oraz zespołami międzyfunkcyjnymi w celu dostarczania niezawodnych rozwiązań danych
• Wsparcie w rozwoju architektury danych oraz projektach migracji do chmury