Senior Databricks Data Engineer

T.
A.
I. Software Solution s.r.l. ricerca candidati con profilo professionale di “Senior Databricks Data Engineer” per le sedi di Pisa, Firenze, Milano, Roma. Potranno essere richieste attività presso le sedi dei clienti, è comunque prevista la possibilità di Smart Working, incluso Full Remote. Le figure selezionate saranno inserite nella Business Line “Data Engineering & AI”, all’interno del gruppo dedicato alla progettazione di soluzioni dati avanzate ed erogazione di servizi su architetture Cloud. La risorsa avrà un ruolo di riferimento tecnico: guiderà la progettazione di architetture, dall’analisi dei requisiti fino alla messa in esercizio, affiancando i clienti nelle scelte tecnologiche e supportando la crescita dei colleghi più junior. Lavorerà a progetti sfidanti su clienti enterprise di primaria importanza. La selezione è rivolta a candidati con esperienza lavorativa specifica di almeno 4-5 anni in ambito Data Engineering e con una forte propensione all'innovazione in ambito AI applicata ai dati. Di cosa ti occuperai:
• Progettare, sviluppare e ottimizzare architetture dati (Lakehouse, Data Mesh) su piattaforma Databricks per scenari enterprise complessi.
• Sviluppare e ingegnerizzare pipeline di dati a supporto di modelli di Machine Learning e architetture di Generative AI (es. sistemi RAG
- Retrieval-Augmented Generation).
• Integrare servizi cognitivi e Large Language Models (LLM) all'interno dei flussi di elaborazione dati per estrarre valore da fonti informative non strutturate.
• Redigere documenti di architettura e di design (HLD/LLD) e guidare le scelte tecnologiche insieme al cliente;
• Disegnare e implementare pipeline di dati (ETL/ELT) scalabili e robuste sfruttando Apache Spark, Delta Lake e i servizi cloud nativi.
• Fare da riferimento tecnico per I clienti, supportando la crescita dei profili più junior;
• Integrare le soluzioni Databricks all'interno degli ecosistemi cloud aziendali, assicurando alte performance e sostenibilità dei costi;
• Definire strategie di sicurezza e governance degli ambienti (es. tramite Databricks Unity Catalog). Conoscenze richieste:
• Forte ed estesa competenza sull'ecosistema Databricks (Workspace, Repos, Jobs, DLT) e Apache Spark (tuning, partizionamento, ottimizzazione).
• Comprovata esperienza su uno o più dei principali cloud provider (AWS, Azure, GCP), con esperienza diretta nella progettazione delle soluzioni; In questo ruolo è richiesta un'enfasi particolare su AWS e GCP.
• Ottima padronanza di Python, SQL applicati al calcolo distribuito.
• Conoscenza approfondita dei formati di memorizzazione open-source (Delta Lake, Parquet, Iceberg).
• Familiarità con framework e librerie per l'AI/ML e l'integrazione di LLM (es. LangChain, LlamaIndex, MLflow, Databricks MosaicML).
• Conoscenza delle logiche di memorizzazione e ricerca vettoriale (Vector Databases) in ambito Databricks o tramite servizi Cloud nativi.
• Ottime conoscenze di networking, in particolare in ambito cloud e ibrido (VPC/VNet, connettività ibrida, DNS, load balancing); Elementi qualificanti:
• Laurea in discipline scientifiche;
• Certificazioni Databricks (es. Databricks Certified Data Engineer Professional, Databricks Machine Learning Associate) o Cloud Data Engineer (GCP Professional Data Engineer, AWS Certified Data Engineer).
• Esperienza in ruoli di Technical Lead o Architect su progetti complessi;
• Conoscenza di soluzioni di CI/CD e GitOps (GitLab CI/CD, Jenkins, ArgoCD, Flux);
• Buone conoscenze del mondo infrastrutturale che ruota intorno ai servizi di GenAI (MLOps, Serving, Nvidia NIM, Nvidia Dynamo, kServe);
• Buona conoscenza della lingua inglese, scritta e parlata; Cosa

offriamo:
• contratto a tempo indeterminato;
• strumenti di formazione sia per le hard che soft skill;
• follow-up costanti con il team HR e con il proprio Business Manager;
• un piano di crescita professionale ben strutturato in un ambiente dinamico e stimolante. TAI SOLUTIONS è orgogliosa di dare pari opportunità di impiego. Ci impegniamo a garantire un’opportunità di lavoro a chiunque sia qualificato. Vogliamo creare un ambiente di lavoro che non faccia distinzioni di razza, colore, religione, genere, identità o espressione di genere, orientamento sessuale, origine, genetica, disabilità o età. L’offerta si intende rivolta all’uno e all’altro genere in ottemperanza al D.
Lgs. 198/2006. Alla candidatura dovrà essere necessariamente allegato il CV completo di autorizzazione al trattamento dei dati personali (ai sensi del Dlgs. 196/2003 e ai sensi dell’art. 13 GDPR 679/16 – “Regolamento europeo sulla protezione dei dati personali”).