Data Engineer

• Minimum 5 lat doświadczenia komercyjnego w obszarze Data Engineering lub Big Data
• Bardzo dobra znajomość Spark oraz Scala wykorzystywanych do przetwarzania dużych wolumenów danych
• Zaawansowana znajomość Python wykorzystywanego do budowy i utrzymania pipeline’ów danych
• Swobodne poruszanie się w środowisku Linux
• Doświadczenie w pracy z rozproszonymi systemami przetwarzania danych oraz platformami Big Data
• Praktyczna znajomość ekosystemu Hadoop, w tym Hive, Oozie oraz MapReduce
• Bardzo dobra znajomość SQL i pracy z bazami danych
• Umiejętność projektowania, tworzenia i rozwijania przepływów danych
• Bardzo dobra znajomość systemów kontroli wersji Git oraz Bitbucket
• Doświadczenie w zakresie testów jednostkowych (JUnit 5, Mockito, testowanie Spark)
• Umiejętność pracy w środowisku wymagającym wysokiej jakości kodu i automatyzacji procesów
• Znajomość języka angielskiego na poziomie umożliwiającym swobodną komunikację (min. B2+)

Nice to have:

• Znajomość strategii wersjonowania kodu oraz branchingu
• Doświadczenie w pracy w środowisku Agile/SAFe
• Znajomość zagadnień związanych z Continuous Delivery w środowiskach Big Data
• Dodatkowe doświadczenie w pracy z Java w połączeniu ze Spark i Python

• Budowa oraz rozwój rozproszonych pipeline’ów Big Data do przetwarzania dużych wolumenów danych (zarówno ustrukturyzowanych, jak i nieustrukturyzowanych) w czasie zbliżonym do rzeczywistego
• Rozwój i utrzymanie procesów przetwarzania danych z wykorzystaniem Spark oraz Scala
• Tworzenie i rozwój przepływów danych wspierających procesy decyzyjne i produkty danych
• Utrzymanie oraz rozwój rozwiązań opartych o Hadoop i platformy Big Data
• Automatyzacja procesów oraz dbanie o ich powtarzalność i niezawodność
• Współpraca z zespołami technicznymi w zakresie dostarczania i utrzymania rozwiązań data engineeringowych

• Miejsce pracy: praca zdalna
• Start: Czerwiec 2026
• Wynagrodzenie: 150-170zł netto/h + VAT
• Proces rekrutacyjny: Krótka rozmowa telefoniczna z ITFS ➡ rozmowa miękko-techniczna z klientem ➡ Decyzja