In short
Data Engineer in Wrocław joining a Risk Technology team that builds corporate data solutions on Databricks. Day to day: designing PySpark/SQL pipelines, developing data models and ETL processes, and supporting cloud architecture, CI/CD and data governance, while mentoring junior engineers.
About the role
Zespół Risk Technology buduje i utrzymuje korporacyjne rozwiązania danych na Databricks, dostarczając skalowalne platformy danych i możliwości analityczne. Będziesz projektować pipeline'y w PySpark i SQL, rozwijać modele danych i procesy ETL oraz wspierać architekturę chmurową, CI/CD i data governance. Oferta dla doświadczonego Data Engineera, który dodatkowo mentoruje juniorów i dba o dobre praktyki inżynierskie.
- doświadczenie z Databricks i PySpark
- zaawansowana znajomość SQL i hurtowni danych
- doświadczenie z Azure Data Lake, Azure Data Factory lub podobnymi technologiami chmurowymi
- znajomość modelowania danych, ETL/ELT i optymalizacji wydajności
- doświadczenie w pracy w zespołach Agile
Requirements
- Experience with Databricks and PySpark
- Advanced SQL and data warehousing knowledge
- Experience with Azure Data Lake, Azure Data Factory or similar cloud technologies
- Knowledge of data modeling, ETL/ELT and performance optimization
- Experience working in Agile teams
- Mentoring junior engineers and maintaining good engineering practices