In short
Data Engineer designing, building and maintaining production-ready data pipelines and the end-to-end data landscape (DataLake, central harmonized model, ELT structures) using Databricks, Azure, Python, PySpark and SQL. Works in a SAFe-organized product team doing ETL development, testing and integration, with 3-4 on-site days per month in Vienna.
About the role
- Design, Erstellung und Wartung von produktionsreifen Data Pipelines
- Architektur und Design für eine gesamte Datenstrecke über DataLake, harmonisiertes zentrales Modell, zentrales Datenprodukt mit mehreren Abnehmern
- ETL Entwicklung & Durchführung von System & Integrationstests im Rahmen der agilen Umsetzung
- Design von ELT Strukturen in enger Abstimmung mit dem System Architektur Team
- Mitarbeit im Product Team organisiert nach SAFE
Anforderungen:
- Erfahrung mit Databricks, Azure, Python, PySpark, Pandas und SQL
- Erfahrung mit agilen Softwareentwicklungsprozessen und Datenmanagementprojekten
- Erfahrung in der Zusammenarbeit mit agilen Softwareentwicklungsteams
- Fähigkeit, komplexe technische Zusammenhänge für nicht-technische Zielgruppen verständlich darzustellen
- Kenntnisse des Software Development Lifecycle (SDLC)
- Kenntnisse im Release Management und in Release-Prozessen
- Erfahrung im Testmanagement
- 3-4 Tage pro Monat vor Ort in Wien
Requirements
- Experience with Databricks, Azure, Python, PySpark, Pandas and SQL
- Experience with agile software development processes and data management projects
- Experience collaborating with agile software development teams
- Ability to explain complex technical topics to non-technical audiences
- Knowledge of the Software Development Lifecycle (SDLC)
- Knowledge of release management and release processes