WESTHOUSE è una società leader che opera nel campo della ricerca e selezione del personale, gestione di progetti ed è autorizzata a tempo indeterminato per la somministrazione di lavoro con Autorizzazione Ministeriale Prot. n. 0000095 del 03/08/2018.
Per azienda finale attiva nel settore Energy&Utilities, fortemente improntata all'innovazione digitale, siamo alla ricerca di un/a DATA ENGINEER
La risorsa, a riporto del responsabile dell’area, verrà inserita nel team AI Facotry e avrà la responsabilità di progettare, sviluppare e mantenere le pipeline di dati e dell’infrastruttura che supporta le iniziative di analisi avanzata e intelligenza artificiale.
Lavorerà a stretto contatto con i Data Scientist, specialisti di AI e team di business per garantire che i dati vengano acquisiti, elaborati, archiviati e serviti in modo efficiente e sicuro, utilizzando tecnologie all'avanguardia come Azure, Databricks e Delta Lake.
Nello specifico si occuperà di:
Progettare e implementare pipeline di dati robuste utilizzando Azure Data Factory, garantendo l'integrazione senza problemi di più fonti di dati.
Costruire e mantenere architetture Delta Lake (livelli Bronze, Silver, Gold) per gestire dati grezzi, puliti e arricchiti in modo efficiente;
Sviluppare processi ETL per preparare e trasformare i dati per modelli di AI e strumenti di business intelligence e garantire che i dati sia strutturati e ottimizzati per il consumo attraverso dashboard e report costruite con PowerBI;
Supportare il deployment di modelli utilizzando Databricks, MLflow e Azure Cognitive Services, abilitando l'accesso ai dati in tempo reale.
Creare, mantenere e ottimizzare le prestazioni di pipeline di dati e dell’archiviazione e garantire che le infrastrutture siano efficienti e scalabili, monitorando la qualità del dato;
Collaborare con i team Agile della Digital Factory allo sviluppo della data platform aziendale, implementazione dei processi di gestione della qualità del dato, collaborare con gli sviluppatori per esporre servizi di dati e analisi tramite API Gateway, e coordinare e supportare eventuali fornitori esterni;
Requisiti principali :
Laurea in Ingegneria Informatica, Statistica, Matematica e/o simili
Esperienza di almeno 3 anni nel ruolo di Data Engineer, avendo partecipato a progetti di trasformazione data-driven/AI-driven;
Competenza nello sviluppo di processi ETL per la preparazione e trasformazione del dato;
Competenza nell’uso di PowerBI per la creazione di report e dashboard;
Conoscenza ed esperienza pratica con database SQL e NoSQL
Esperienza con piattaforma Databricks per analisi big data;
Esperienza con piattaforme di MLOps (MLflow)
Esperienza con uno dei principali Provider Cloud (GCP, Azure, AWS)
Conoscenza dei linguaggi di programmazione: Python, Pyspark, SQL
Metodologia di sviluppo Waterfall e Agile
Buona conoscenza della lingua inglese per contatti con colleghi e referenti esteri
Completano il profilo :
Spiccato interesse per attività gestionali/progettuali, oltre che puramente tecniche
Team working
Ottime capacità di analisi e problem solving
Buone capacità comunicative e di relazione
Sede lavorativa : Milano o Torino (modalità di lavoro ibrida)
I candidati ambosessi (D.lgs n. 198/2006) sono invitati a leggere l’informativa privacy ai sensi degli artt. 13 e 14 del Reg. EU 679/2016 al seguente indirizzo: Si comunica inoltre che i curricula potranno essere considerati per altre posizioni vacanti e potrebbero essere gestiti e comunicati anche attraverso l’uso di tools propri e/o dell’azienda cliente.