Architect/ Senior Data Engineer

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom.

Obszary naszego działania to m.in.: doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie.

• projektowanie i budowa rozwiązań Data Lake i DWH
• projektowanie pipeline’ów zasilających ETL/ELT
• projektowanie rozwiązań wykorzystujących architekturę sterowaną zdarzeniami
• projektowanie rozwiązań Big Data wykorzystujących możliwości GenAI
• praca z rozwiązaniami opartymi o Google BigQuery
• projektowanie rozwiązań z wykorzystaniem Kubernetes
• praca z relacyjnymi bazami danych Oracle i PostgreSQL
• wykorzystanie Python i/lub Rust w budowie rozwiązań
• praca z Apache Airflow

Nice to have:

• znajomość koncepcji data mesh
• znajomość baz wektorowych i grafowych
• znajomość Apache Spark, najlepiej GCP Data Proc
• znajomość Apache Beam, najlepiej GCP DataFlow
• znajomość AutomateNow
• znajomość Informatica PowerCenter

• masz doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake i DWH
• znasz aspekty związane z budową pipeline’ów zasilających ETL/ELT
• znasz technologie wykorzystywane w ramach architektury sterowanej zdarzeniami, np. Kafka lub Pub/Sub
• znasz aspekty związane z budową rozwiązań Big Data wykorzystujących możliwości GenAI
• znasz Google BigQuery
• znasz Kubernetes, najlepiej Google Kubernetes Engine i OpenShift
• znasz relacyjne bazy danych Oracle i PostgreSQL w zakresie projektowania, budowy i tuningu baz danych
• biegle znasz Python i/lub Rust
• dobrze znasz Apache Airflow