Senior Data Engineer - Databricks

Next Technology Professionals to wyspecjalizowana agencja rekrutacyjna i firma outsourcingowa o silnym profilu technologicznym. Od ponad 10 lat wspieramy firmy w budowie zespołów IT, AI, Cybersecurity, SAP oraz w rekrutacjach dla finansów, inżynierii i marketingu. Zrealizowaliśmy ponad 1000 skutecznych procesów rekrutacyjnych dla korporacji, scale-upów i dynamicznie rosnących startupów. Przesyłając swoje CV do Next Technology Professionals, trafiasz do starannie wyselekcjonowanej bazy kandydatów realizujących projekty dla wiodących globalnych organizacji. Pracujemy wyłącznie w oparciu o aktualne, konkretne potrzeby klientów. Jeśli Twój profil będzie odpowiadał jednemu z prowadzonych procesów, skontaktujemy się niezwłocznie.

• Minimum 6 lat doświadczenia na stanowisku Data Engineer lub pokrewnym związanym z inżynierią danych.
• Zaawansowana znajomość ekosystemu Azure, w szczególności usług Databricks i Azure Data Factory.
• Praktyczne doświadczenie w transformacji danych przy użyciu Apache Spark.
• Biegłość w pisaniu optymalnych zapytań SQL oraz zaawansowane umiejętności skryptowania w języku Python.
• Doświadczenie w modelowaniu danych (zarówno relacyjne, jak i nierelacyjne bazy danych).
• Znajomość języka angielskiego na poziomie B2+/C1 (swobodna komunikacja w środowisku międzynarodowym).

• Projektowanie i wdrażanie skalowalnej infrastruktury dla systemów rozproszonych i Big Data.
• Budowa wzorców architektury danych oraz automatyzacja workflow w środowisku chmurowym Azure.
• Automatyzacja procesów Data Engineering: od modelowania i walidacji po pełne wdrożenie produkcyjne.
• Tworzenie reużywalnych komponentów (artefaktów) optymalizujących pracę całego zespołu inżynieryjnego.
• Zarządzanie wydajnością i retencją danych, w tym proaktywne usprawnianie i monitorowanie infrastruktury.

Możliwość pełnej pracy zdalnej z dowolnego miejsca w Polsce.