In short
Junior data engineer/DevOps role at an IT consulting firm in Milan, working hybrid on cloud data platforms: building ETL pipelines with Airflow and AWS Lambda, batch jobs via AWS Batch/Fargate, Redshift data warehousing, and data quality checks with Great Expectations.
About the role
Il ruolo
Cerchiamo un Junior Data Engineer- DevOps engineer per un’allocazione in un ambiente moderno e collaborativo. Lavorerai su progetti di data engineering con focus su architetture cloud e pipeline ETL.
Cosa farai
- Sviluppare e mantenere pipeline ETL utilizzando Airflow e AWS Lambda
- Gestire elaborazioni batch con AWS Batch e Fargate
- Lavorare con Amazon Redshift per data warehousing
- Implementare data quality checks con Great Expectations
- Collaborare con il team su soluzioni di data engineering scalabili
- Python, incluso testing
- SQL
- Airflow
- AWS Lambda
- AWS Batch e Fargate
- Amazon Redshift
- GitHub
- Apache Iceberg o equivalente formato open table
- CloudFormation;
- GitHub Actions e workflow.
- Conoscenza di DuckDB
- Conoscenza di Spark
Ibrida su Milano
Inviare curriculum vitae dettagliato in formato Word all’indirizzo *** autorizzando il trattamento dei dati personali ai sensi del D.Lgs. 196⁄03.
Indicare nell’oggetto il sito di riferimento dell’annuncio e la posizione per la quale ci si candida.
Ai sensi della normativa vigente l’offerta è rivolta ad entrambi i sessi (DL 903⁄77).
Requirements
- Python, including testing
- SQL
- Airflow
- AWS Lambda
- AWS Batch and Fargate
- Amazon Redshift