Senior Data Engineer
3 settimane fa
Project description We are seeking an expert with deep proficiency as a Platform Engineer, possessing experience in data engineering. This individual should have a comprehensive understanding of both data platforms and software engineering, enabling them to integrate the platform effectively within an IT ecosystem. Responsibilities Manage and optimize data platforms (Databricks, Palantir). Ensure high availability, security, and performance of data systems. Provide valuable insights about data platform usage. Optimize computing and storage for large-scale data processing. Design and maintain system libraries (Python) used in ETL pipelines and platform governance. Optimize ETL Processes – Enhance and tune existing ETL processes for better performance, scalability, and reliability. Skills Must have Minimum 10 Years of experience in IT/Data. Minimum 5 years of experience as a Data Platform Engineer/Data Engineer. Bachelor's in IT or related field. Infrastructure & Cloud: Azure, AWS (expertise in storage, networking, compute). Data Platform Tools: Any of Palantir, Databricks, Snowflake. Programming: Proficiency in PySpark for distributed computing and Python for ETL development. SQL: Expertise in writing and optimizing SQL queries, preferably with experience in databases such as PostgreSQL, MySQL, Oracle, or Snowflake. Data Warehousing: Experience working with data warehousing concepts and platforms, ideally Databricks. ETL Tools: Familiarity with ETL tools & processes Data Modelling: Experience with dimensional modelling, normalization/denormalization, and schema design. Version Control: Proficiency with version control tools like Git to manage codebases and collaborate on development. Data Pipeline Monitoring: Familiarity with monitoring tools (e.g., Prometheus, Grafana, or custom monitoring scripts) to track pipeline performance. Data Quality Tools: Experience implementing data validation, cleaning, and quality frameworks, ideally Monte Carlo. Nice to have Containerization & Orchestration: Docker, Kubernetes. Infrastructure as Code (IaC): Terraform. Understanding of Investment Data domain (desired). We offer numerous benefits such as: ⏰ Flexible work schedule Great company culture and friendly environment Work within a fast-moving, exciting, and challenging environment Talent development ecosystem Luxoft Training Center services with ad-hoc leadership and technical programs Knowledge sharing in professional communities Meetings for knowledge sharing, celebrations, and brainstorming: your ideas count Regular team-building activities Variety of discounts for our employees
-
Senior Network Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino Tron Group Holding A tempo pienoPer importante azienda cliente leader nella consulenza ICT siamo alla ricerca di un Senior Network Engineer con una solida esperienza nella progettazione, implementazione e gestione di infrastrutture di rete complesse in ambito Data Center. Il candidato ideale possiede una conoscenza approfondita dei protocolli di routing L3 (BGP, OSPF, Multihoming) e solide...
-
Data Engineer Freelance
2 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino Cosmico Italia A tempo pienoPer un nostro importante cliente, una delle principali realtà digitali italiane nel settore dei servizi online, stiamo cercando un Data Engineer Freelance , con una solida base in Python e una buona conoscenza dei principali ambienti cloud . La risorsa lavorerà su un progetto interno di evoluzione architetturale ed entrerà a far parte del team Data del...
-
Senior DevOps Engineer
1 settimana fa
Turin, PIEDMONT, Italy, Provincia di Torino TOPIC Embedded Systems A tempo pienoAt TOPIC (in the Netherlands) we work every day on high-tech innovations to make the world smarter, healthier, and better. Are you a driven and ambitious Senior DevOps Engineer with a passion for automation, CI/CD, and state-of-the-art tooling that we are looking for? As a Senior DevOps Engineer, you play a key role in enabling development teams to work...
-
Data Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino PhotoSì A tempo pienoCon PhotoSì i momenti di ieri diventano le emozioni di oggi. Ogni giorno celebriamo i ricordi delle persone trasformando le loro foto in prodotti da toccare, mostrare e condividere. Nel 2012 abbiamo lanciato la prima app per la stampa foto in Europa e oggi quasi 2 milioni di persone ogni anno creano capolavori fotografici personalizzati sul nostro sito web...
-
Big Data Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino Capgemini A tempo pienoJob Title : Big Data Engineer Company: Capgemini Location : Italy (Rome, Milan , Turin , Bologna) About Us: Capgemini is a leading tech innovator , committed to pushing boundaries and driving impactful solutions for our clients. The Insights practice is part of Capgemini’s global Insights & Data group; our goal is to help the organizations we work with...
-
Data Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino agap2 Italia A tempo pienoCHI SIAMO AGAP2 è un gruppo europeo di consulenza ingegneristica e operativa facente parte del Gruppo MoOngy. Presente in 14 paesi europei con oltre 10.000 dipendenti, abbiamo aperto, da quattro anni, la prima sede italiana a Milano e, vista la continua crescita, stiamo rafforzando e ampliando il nostro team con persone che condividano gli stessi valori...
-
Data Network Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino agap2 Italia A tempo pienoAGAP2 è un gruppo europeo di consulenza ingegneristica operativa facente parte del Gruppo MoOngy. Presente in 11 paesi europei con oltre 6.000 dipendenti abbiamo aperto, da circa tre anni, la prima sede italiana a Milano e, vista la continua crescita, stiamo rafforzando e ampliando il nostro team con persone che condividano gli stessi valori della nostra...
-
Senior Instrumentation Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino Arkad SpA A tempo pienoOur company is looking for a Senior Instrumentation Engineer to join our Engineering team. The purpose of this role is to carry out the design activities and issue the deliverables assigned by the Chef Engineer, in full respect of Contract, Quality, Safety, and Environment requirements, within the Specific Time Schedule and Cost. This role is a technical...
-
Data Engineer
3 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino agap2 Italia A tempo pienoCHI SIAMO AGAP2 è un gruppo europeo di consulenza ingegneristica operativa facente parte del Gruppo MoOngy. Presente in 14 paesi europei con oltre 9.000 dipendenti abbiamo aperto, da circa sette anni, la prima sede italiana a Milano e, vista la continua crescita, stiamo rafforzando e ampliando il nostro team con persone che condividano gli stessi valori...
-
Data Engineer
2 settimane fa
Turin, PIEDMONT, Italy, Provincia di Torino Software Inside Srl A tempo pienoDescrizione azienda Software Inside S.r.l. è una Software House italiana che opera dal 2016 come società di consulenza nei settori Bancario & Finanza, Cyber Security, Telecomunicazioni, Energy & Utilities. Ci collochiamo nel settore dell 'Information Technology proponendoci come obiettivo quello di fornire una vasta gamma di prodotti, servizi e soluzioni...