
Data Engineer
- Milano
- Tempo indeterminato
- Full time
- Competenza nell'ecosistema Hadoop
- Progettare, implementare e ottimizzare pipeline di dati e flussi di lavoro sfruttando strumenti e tecnologie dell'ecosistema Hadoop, tra cui: HDFS, YARN, Spark, HBase, Impala, HIVE
- Costruire e distribuire API RESTful utilizzando Java Spring Boot per facilitare l'integrazione dei dati e l'interoperabilità tra i sistemi.
- Progettare e mantenere processi batch utilizzando Java, garantendo l'esecuzione efficiente dei flussi di lavoro dei dati e della logica aziendale.
- Implementare soluzioni robuste per la gestione degli errori, la registrazione e il monitoraggio.
- Mantenere e ottimizzare soluzioni di database relazionali utilizzando Oracle DB.
- Scrivere query SQL e Spark SQL complesse ed efficienti per garantire prestazioni ottimali del database.
- Monitorare, risolvere i problemi e migliorare le prestazioni dei processi.
- Garantire l'integrità, la qualità e la sicurezza dei dati.
- Partecipare attivamente alle pratiche Agile, tra cui stand-up e retrospettive quotidiane, per garantire il raggiungimento efficiente degli obiettivi del progetto.
- Partecipare alle revisioni del codice, alle discussioni sul design e alla collaborazione del team per mantenere standard elevati.
- Competenza nei framework di calcolo distribuito e nell'elaborazione dei dati su scala.
- Esperienza con pipeline ETL e modellazione dei dati.
- Solida conoscenza della gestione dei cluster, della risoluzione dei problemi dei big data e dello sviluppo di API con Java Spring.
- Forti capacità analitiche e di risoluzione dei problemi con attenzione ai dettagli.
- Over a century of knowledge and innovation
- A culture of top performance
- A global, diverse environment
- Products that contribute to a sustainable world
- A conviction to improve communities around us
- Competitive salary and benefits