Siamo alla ricerca di un Data Engineer da inserire nel nostro team Data Management, responsabile dello sviluppo di un'ampia gamma di prodotti di dati, dai sistemi scalabili di ingestione/elaborazione dei dati ai progetti di data lake e machine learning. Come parte del team Data & Analytics, i nostri data engineer lavorano in modo interfunzionale con il reparto IT, i data scientist e gli analyst per supportare gli stakeholder aziendali a guidare l'impatto attraverso un processo decisionale informato.
Responsabilità
* Costruire e implementare processi ETL/ELT e di manipolazione dei dati altamente efficienti e scalabili utilizzando tecnologie big data e cloud;
* Progettare e implementare il data lake per la reportistica e l'analisi self-services;
* Raccogliere i requisiti dalle parti interessate, compresi i data scientist e gli analisti aziendali;
* Modellare il dato in ottica “enterprise data model” per facilitare le analisi di business;
* Impostare sistemi di monitoraggio della qualità dei dati che garantiscano che i dati raccolti abbiano la qualità e le caratteristiche richieste;
* Progettare pipeline CI/CD scalabili per distribuire in produzione prodotti di dati e soluzioni di intelligenza artificiale;
* Lavorare a stretto contatto con i partner in un ambiente collaborativo per realizzare casi d'uso analitici;
Requisiti Minimi
* Minimo 3 anni di esperienza nel campo dell'ingegneria dei dati lavorando in un contesto agile;
* Esperienza di sviluppo con Python/Java. La conoscenza di Scala è un plus;
* Forte conoscenza del database SQL/NoSQL e delle tecniche di modellazione dei dati;
* Esperienza diretta con le tecnologie Cloud (ad es. Azure, AWS, Google);
* Esperienza pregressa nella progettazione e implementazione di soluzioni MLOps e CI/CD;
* Esperienza con framework/metodologie ETL/ELT e orchestrazione;
* Nice to have: Esperienza con piattaforme di stream processing e event streaming (es. Kafka, Spark, Akka);
* Nice to have: conoscenza della piattaforma Google Cloud, in particolare Bigquery, DataFlow, Apache Beam, Cloud Composer, Data catalog, Compute Engine, DataPrep.
Sede: Milano (ibrido)
#J-18808-Ljbffr