Data Engineer

4 settimane fa

Italy aizoOn Technology Consulting A tempo pieno

aizoOn, società di consulenza tecnologica di innovazione, indipendente, che opera a livello globale ricerca un / una Data Engineer.

Il / La candidato / a verrà inserito / a nell'area IT della divisione di mercato Transportation ed opererà per un importante cliente in ambito mobilità sostenibile.

Parteciperà a progetti complessi di integrazione dati su AWS, lavorerà su architetture cloud moderne, ecosistemi di microservizi e pipeline di dati.

In particolare si occuperà di:

• Progettare e implementare pipeline ETL per l'integrazione tra sistemi eterogenei (SQL Server, DynamoDB, Aurora/MySQL, MongoDB) utilizzando AWS Glue, Spark e Lambda.

• Creare soluzioni di migrazione dei dati utilizzando AWS DMS, Debezium e altri strumenti di change data capture per consentire la sincronizzazione continua dei dati tra microservizi e sistemi esterni.

• Progettare soluzioni di data lake su S3, strategie di partizionamento e integrazione con servizi AWS come Athena ed EventBridge.

• Gestire l'evoluzione degli schemi e le sfide relative alla qualità dei dati, risolvendo le incongruenze dei tipi di dati tra sistemi NoSQL e SQL.

PROFILO

- Laurea in materie tecnico/scientifiche.
- Almeno 3 anni di esperienza nel ruolo in contesto cloud con buona conoscenza di AWS (Glue, Lambda, S3, DynamoDB, Aurora, Athena, Step Functions).
- Ottima conoscenza della lingua inglese, minimo B2.

COMPETENZE TECNICHE

- Esperienza pratica con con strumenti di migrazione dati e CDC, tra cui AWS DMS, Debezium, modelli di Change Data Capture e strategie di replicazione del database.
- Esperienza nell'elaborazione di dati in batch e streaming con Apache Spark (Scala/Python), PySpark e architetture di pipeline di dati distribuite.
- Ottime competenze di database che includono SQL avanzato, NoSQL (DynamoDB, MongoDB) e database relazionali (Aurora/MySQL, SQL Server).
- Competenza nell'architettura dei microservizi e nei modelli di integrazione API, tra cui API REST, limitazione della velocità, meccanismi di ripetizione e tolleranza agli errori.
- Esperienza con formati di dati e gestione degli schemi, tra cui Parquet, JSON, evoluzione degli schemi e convalida della qualità dei dati.
- Competenza nella programmazione in Python per l'elaborazione dei dati, lo scripting e l'integrazione con AWS SDK.

Nice to have:

- Esperienza di Infrastructure as Code (IaC) con Terraform o CloudFormation per la distribuzione automatizzata di pipeline di dati
- Esperienza di governance e monitoraggio dei dati con CloudWatch, metriche personalizzate, tracciamento della discendenza dei dati e sistemi di avviso.
- Gestione di pipeline CI/CD per la distribuzione e il test automatizzati di soluzioni di data engineering.
- Pratiche DevOps ed esperienza con tecnologie di containerizzazione e orchestrazione.

INFORMAZIONI AGGIUNTIVE

Sono previste saltuarie e brevi trasferte presso il cliente a Torino.

The job search refers to candidates of both genders

  • Data Engineer

    2 settimane fa

    Italy Azienda Riservata Italia A tempo pieno

    Data Engineer The group, operating internationally and active in the services sector, is looking for a Data Engineer . Key Responsibilities Interact with the product and development team to improve current innovation projects and launch new ones using our Data Architecture methodology and culture; Design, build and maintain data pipeline. Track and monitor...

  • Data Engineer

    3 settimane fa

    Italy Lenis A tempo pieno

    Lenis Srl è una società di Consulenza Informatic a e Sviluppo Software che supporta lo sviluppo dei propri clienti nelle aree dell’innovazione. Per nostra business di consulenza stiamo cercando un* Data Engineer con solida esperienza nella progettazione, sviluppo e ottimizzazione di pipeline dati su larga scala, da inserire in un team multidisciplinare...

  • Data Engineer

    2 settimane fa

    Italy Hays A tempo pieno

    Freelance Data Engineer – Remote/Hybrid OpportunityLocation: Remote (with optional hybrid days in Turin, Milan, Rome, Bologna, or Naples)Engagement: Freelance / Contract Languages: Italian (C1), English (B2) Must be based in Italy – No sponsorship available About the RoleWe're looking for a Data Engineer who thrives on building scalable data pipelines...

  • Data Engineer

    1 settimana fa

    Italy ATON IT A tempo pieno

    Per il potenziamento della nostra struttura, siamo alla ricerca di un Data Engineer . Competenze ed esperienze richieste nelle seguenti tecnologie: Python Power BI ETL Completano il profilo: Gradita la conoscenza di Tableau Se interessati, inviate il Vostro Curriculum Vitae aggiornato e dettagliato che dovrà contenere autorizzazione al trattamento dei dati...

  • Data engineer

    4 settimane fa

    Italy agap2 Italia A tempo pieno

    CHI SIAMO AGAP2 è un gruppo europeo di consulenza ingegneristica e operativa, parte del Gruppo MoOngy. Con oltre 10.000 dipendenti in 14 Paesi, siamo in costante crescita ed evoluzione, rafforzando i nostri team con persone che condividono i nostri valori: ambizione, positività e dinamismo, in un contesto dove le relazioni umane sono sempre al centro....

  • Data Engineer

    2 settimane fa

    Italy Randstad Digital Italia A tempo pieno

    Randstad Digital Italia, divisione specializzata nella ricerca e selezione di professionistii in ambito ICT & Digital di Randstad Italia, ricerca per strutturata azienda finale di prodotto operante nel settore informatico una figura di Data Engineer con comprovata esperienza nella creazione di nuove piattaforme dati. Sarai responsabile della progettazione,...

  • Data Engineer

    3 settimane fa

    Italy Investech spa A tempo pieno

    Investech S.p.A., azienda IT operante su tutto il territorio nazionale con una significativa esperienza nella Digital Transformation, ricerca candidati con il seguente profilo professionale: Data Engineer Il candidato ideale è in possesso delle seguenti competenze: Azure/AWS; Databricks; SQL; Processi ETL; Inglese B2. Cosa offriamo: Progetto a lunga...

  • Data Engineer

    4 settimane fa

    Italy Fides A tempo pieno

    MEET FIDES Fides è una tech company che da vent’anni si contraddistingue sul mercato per una doppia offerta di servizio: partnership consulenziali con i più importanti system integrator internazionali e sviluppo di progetti IT custom. Grazie a 20 anni di esperienza e oltre 300 risorse dislocate tra le sedi (Milano, Napoli, Roma e Torino ), Fides si...

  • DATA ENGINEER HPC

    3 settimane fa

    Italy S2E | Business Technology Consultants A tempo pieno

    QuantiaS è la divisione di S2E specializzata in Data & Analytics, con forti competenze in ambito Data Warehouse, Business Intelligence, High Performance Computing, Advanced Analytics e AI. La nostra missione è quella di massimizzare il valore dei dati per i Clienti attraverso soluzioni efficaci e all’avanguardia, anche grazie alla sinergia con il gruppo...

  • MIDDLE DATA ENGINEER

    1 settimana fa

    Italy S2E | Business Technology Consultants A tempo pieno

    S2E è un’azienda italiana di consulenza in ambito Business Technology, all’avanguardia nell’innovazione tecnologica nei settori Fintech, Insurtech e Cybertech. Con oltre 400 collaboratori, sede principale a Milano e uffici a Roma, Lecce, Lussemburgo, riprogetta, personalizza e sviluppa soluzioni digitali per il business delle imprese che operano in...