Big Data Engineer (Spark, Scala/Java)

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom.

Obszary naszego działania to m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie.

• masz minimum 4 lata doświadczenia w obszarze Big Data
• bardzo dobrze znasz Spark, Scala, Hive oraz SQL
• masz doświadczenie w pracy z dużymi zbiorami danych i pipeline’ami przetwarzania danych
• pracowałeś z narzędziami takimi jak Python, Java, CI/CD, DevOps lub Airflow
• masz doświadczenie w pracy z systemami produkcyjnymi i dbasz o jakość kodu
• swobodnie komunikujesz się w języku angielskim - B2+/C1

Nice to have:

• doświadczenie w projektach z branży bankowej lub finansowej

• projekt z branży bankowości inwestycyjnej związany z przetwarzaniem i analizą dużych zbiorów danych
• projektowanie i rozwijanie rozwiązań do zbierania, przetwarzania i transformacji dużych wolumenów danych
• tworzenie i rozwój procesów przetwarzania danych z wykorzystaniem Spark i Scala
• rozwój i utrzymanie pipeline’ów przetwarzania danych oraz dbanie o ich wydajność i niezawodność
• udział w code review oraz wspólne rozwijanie dobrych praktyk w zespole
• praca nad rozwiązaniami w obszarze Big Data oraz rozwijanie architektury przetwarzania danych
• praca hybrydowa: 2–3 dni w tygodniu z biura w Warszawie