Siamo alla ricerca di un Data Engineer per la nostra divisione Data Lab.
La risorsa sarà responsabile della progettazione, sviluppo e manutenzione di pipeline di dati end-to-end per l’analisi di Big Data. Lavorerà a stretto contatto con altri ingegneri e analisti per acquisire, trasformare, analizzare e visualizzare dati su larga scala.
Responsabilità:
- Progettare, sviluppare e implementare pipeline di dati utilizzando Apache Spark, Hadoop e altri strumenti di Big Data.
- Sviluppare e mantenere ETL (Extract, Transform, Load) per caricare dati da diverse sorgenti in data warehouse e data lake.
- Ottimizzare le prestazioni delle pipeline di dati e dei sistemi di archiviazione dati.
- Collaborare con data scientist e analisti per comprendere le loro esigenze e sviluppare soluzioni di analisi dati.
- Sviluppare e mantenere report e dashboard per la visualizzazione dei dati.
- Assicurare la qualità, la sicurezza e l’integrità dei dati.
- Tenere aggiornate le proprie conoscenze sulle tecnologie di Big Data e sugli strumenti di analisi.
Requisiti fondamentali:
- 2+ anni di esperienza lavorativa come Data Engineer.
- Esperienza con Apache Spark, Hadoop, Hive, Pig e altri strumenti di Big Data.
- Esperienza con GCP (Google Cloud Platform) e con la gestione di data warehouse e data lake su cloud.
- Conoscenza di SQL e linguaggi di scripting come Python o Bash.
- Capacità di progettazione e sviluppo di pipeline di dati end-to-end.
- Capacità di ottimizzare le prestazioni delle pipeline di dati e dei sistemi di archiviazione dati.
- Capacità di lavorare in modo indipendente e come parte di un team.
Qualifiche:
- Laurea in Informatica, Ingegneria Informatica o Matematica.
- Conoscenza professionale della lingua inglese.
Esperienza desiderabile:
- Esperienza con GCP (Google Cloud Platform) e con la gestione di data warehouse e data lake su cloud.
- Esperienza con strumenti di machine learning e deep learning.
- Conoscenza di Docker e Kubernetes.
- Esperienza con CI/CD (Continuous Integration/Continuous Delivery).
Sede: Napoli e Milano
