Data Engineer Databricks Developer

Informazioni sullofferta di lavoro

Siamo alla ricerca di un/una Data Engineer / Databricks Developer da inserire allinterno del team per progettare sviluppare ed evolvere soluzioni Data & AI su piattaforma Databricks con particolare attenzione al data engineering allintegrazione dei dati allautomazione allanalytics e allo sviluppo di servizi a supporto dei processi aziendali.

Descrizione Attività

• Analizzare progettare e sviluppare pipeline dati su piattaforma Databricks.
• Implementare processi di data ingestion trasformazione e distribuzione dei dati provenienti da sistemi interni ed esterni.
• Sviluppare notebook workflow e job automatizzati utilizzando Python e gli strumenti della piattaforma Databricks.
• Collaborare alla progettazione di moderne architetture Data Lakehouse scalabili.
• Sviluppare componenti software API e servizi backend a supporto delle piattaforme dati.
• Integrare Databricks con database sistemi enterprise servizi cloud e piattaforme di Machine Learning.
• Garantire qualità affidabilità e monitoraggio delle pipeline dati.
• Gestire processi di versionamento rilascio e automazione tramite pipeline CI/CD.
• Collaborare con Data Scientist Software Engineer Cloud Engineer e stakeholder di business.
• Supportare le attività di troubleshooting e la risoluzione di problematiche tecniche complesse.
• Contribuire allevoluzione delle piattaforme cloud e delle soluzioni Data & AI aziendali.
• Applicare principi di sicurezza governance e qualità dei dati durante lintero ciclo di vita delle soluzioni.

Requisiti

• Esperienza nello sviluppo con Python.
• Esperienza nellutilizzo della piattaforma Databricks.
• Conoscenza di Apache Spark e dei principi di elaborazione distribuita dei dati.
• Esperienza nella progettazione e sviluppo di pipeline ETL/ELT.
• Ottima conoscenza di SQL e della modellazione dei dati.
• Esperienza con Delta Lake e architetture Data Lakehouse.
• Conoscenza di database relazionali e sistemi di storage dati.
• Esperienza con Git e workflow di sviluppo collaborativo.
• Esperienza nellutilizzo di pipeline CI/CD e strumenti di automazione.
• Conoscenza dei principali servizi cloud preferibilmente Microsoft Azure.
• Familiarità con servizi di integrazione dati API REST e architetture distribuite.
• Buona conoscenza della lingua inglese scritta e letta.

Costituiscono titolo preferenziale:

• Esperienza con Unity Catalog Data Governance e Data Lineage.
• Conoscenza di Azure Databricks o Databricks su altri cloud provider.
• Esperienza con strumenti di orchestrazione come Airflow Azure Data Factory o equivalenti.
• Esperienza con workload di streaming (Spark Streaming Kafka Event Hub o equivalenti).
• Conoscenza di servizi di Machine Learning e Intelligenza Artificiale.
• Esperienza nello sviluppo di API REST e microservizi.
• Conoscenza di framework backend come FastAPI Spring Boot o .NET.
• Esperienza con Docker e containerizzazione.
• Conoscenza di Kubernetes (AKS EKS OpenShift o equivalenti).
• Familiarità con architetture event-driven e sistemi di messaging.
• Esperienza con strumenti di monitoraggio e osservabilità.
• Familiarità con metodologie Agile/Scrum.

Soft Skill

• Ottime capacità di analisi e problem solving.
• Forte attitudine allapprendimento continuo e allaggiornamento professionale.
• Capacità di lavorare sia in autonomia sia allinterno di team multidisciplinari.
• Attitudine proattiva e orientamento al risultato.
• Precisione attenzione ai dettagli e capacità organizzative.
• Buone capacità relazionali e comunicative.

Benefici

• Opportunità di lavorare su progetti innovativi nellambito Data Cloud e Intelligenza Artificiale.
• Ambiente di lavoro collaborativo dinamico e orientato allinnovazione.
• Formazione continua e possibilità di conseguire certificazioni tecniche.
• Percorso di crescita professionale allinterno dellazienda.

Sede di lavoro: Bologna o Napoli (almeno 2 giorni a settimana)

La ricerca è rivolta a candidati di entrambi i sessi (L. 903/77 e L. 125/91). I dati personali saranno trattati esclusivamente per finalità di selezione nel rispetto del Regolamento (UE) 2016/679 (GDPR).