CrawlJobs Logo

Data Engineer - Big Data

Italy, Catania 30000.00 EUR / Anno · Offerta pubblicata 16 maggio 2026
Candidati
Condividi link dell'offerta

Descrizione del lavoro

Lavoriamo su piattaforme dati enterprise e pipeline scalabili su Google Cloud. Costruiamo sistemi affidabili per ingestione, trasformazione e analisi di grandi volumi di dati.

Responsabilità

  • Progettare e sviluppare pipeline di elaborazione dati batch e streaming con Apache Beam e Apache Spark su Google Cloud Dataproc
  • Modellare, ottimizzare e interrogare dataset di grandi dimensioni su BigQuery, con attenzione a costi e performance
  • Lavorare con BigQuery Studio per esplorazione dati, sviluppo di notebook analitici e collaborazione con i team di Data Science e Analytics
  • Integrare sorgenti dati eterogenee (database relazionali, API, event stream) nelle pipeline GCP
  • Monitorare la qualità dei dati, implementare test e alert sulle pipeline in produzione
  • Collaborare con il team di Data Science per rendere i dati disponibili, affidabili e ben documentati
  • Contribuire alla definizione degli standard di data engineering del team: naming convention, data catalog, lineage

Requisiti

  • Apache Beam/Spark — Sviluppo pipeline — livello intermedio
  • Google Cloud Dataproc — Cluster, job, tuning — livello intermedio
  • BigQuery — SQL avanzato, ottimizzazione — livello intermedio/avanzato
  • BigQuery Studio — Notebook, esplorazione — livello base/intermedio
  • Python — pipeline e scripting — livello intermedio
  • SQL avanzato — Window fn, CTE, ottimiz. — livello intermedio
  • Git/CI-CD — Workflow collaborativo — livello intermedio

Preferibile

  • Esperienza con Google Cloud Dataflow (pipeline Beam fully managed)
  • Conoscenza di orchestratori di pipeline: Apache Airflow / Cloud Composer
  • Nozioni di data modeling: schema star/snowflake, data vault
  • Certificazione Google Cloud Professional Data Engineer (o percorso in corso)

Cosa offriamo

  • Company canteen
  • Piano di crescita professionale strutturato

Looking for more opportunities?

Search for other job offers that match your skills and interests.

Lavori simili per

Data Engineer - Big Data

8 matching positions

Cloud Data Engineer

Entra a far parte di BIP – xTech, il Centro di Eccellenza di BIP specializzato i...
Località
Località
Italy , Bari
Salario
Salario:
Non fornito
businessintegrationpartners.com Logo
Business Integration Partners
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Esperienza nell’implementazione e gestione di piattaforme dati basate sul cloud
  • Conoscenza di una o più piattaforme cloud (es. Google GCP, Amazon AWS, Microsoft Azure) e dei servizi a supporto di gestione, elaborazione e analisi dei dati
  • Conoscenza dei principali concetti sulle moderne piattaforme dati (es. Big Data, Data Lake, Data Warehouse, Data Virtualization, Data Mesh, Data Governance, ecc…)
  • Esperienza nella progettazione di data model e creazione/manutenzione di data pipeline per l’estrazione, trasformazione e caricamento dei dati
  • Conoscenza di uno o più linguaggi di programmazione e interrogazione dati (es. SQL, Java, Ruby, Python, R…)
  • Conoscenza approfondita di una o più tecnologie per gestione di basi dati strutturate e non strutturate (es. Bigquery, MongoDB, Hadoop, Redis, ecc…)
Responsabilità
Responsabilità
  • Operare su Data Platform Big Data o ibride, on-premises o cloud, implementando pipeline di lavorazione batch o real time, trasformazione e trattamento di dati strutturati e non strutturati
  • Essere autonomo/a nelle fasi di acquisizione, storicizzazione, cleansing, anonimizzazione/crypting/masking dei dati, trattamento dei valori nulli e outlier, aggregazione, strutturazione di dati non strutturati, creazione di KPI di quality, preparazione dati per diversi utenti
  • Recepire i modelli di Machine Learning dai Data Scientist, ottimizzarli in logica di esecuzione in scala, ad esempio applicando parallelismi di calcolo, e integrarli / schedularli per un’esecuzione automatica efficiente
  • Fornire Advisory per selezionare tecnologie di Engineering all’interno di nascenti architetture Big Data o per efficientare ecosistemi già attivi
  • Dimostrare ed evolvere le capacità di costruire relazioni con clienti, vendor, partner e assicurare il raggiungimento della migliore soluzione
  • Contributo attivo per alimentare la Community con attività di ricerca, scouting, concept di nuove soluzioni e business development
Cosa offriamo
Cosa offriamo
  • Crescita e Formazione: più di 300 corsi su tecnologie e business emergenti, programmi di sviluppo personalizzati e iniziative di training e people care
  • Flessibilità e Work-Life Integration: lavoro agile con possibilità di programmare le giornate da remoto e in ufficio
  • Banca Ore Solidale
  • Salute & Benefits: assicurazione sanitaria, check-up agevolati, piattaforme per il benessere psicofisico e un piano welfare integrativo
  • Ticket restaurant e altri benefit dedicati
  • Famiglia e Genitorialità: integrazione al 100% per i primi 3 mesi del congedo parentale o bonus una tantum, giorni extra per i papà e iniziative di supporto
  • Inclusione e Valori: promozione dell’unicità e pari opportunità, politiche attive per le categorie protette
  • Tempo pieno
Leggi di più
Arrow Right

Senior Data Engineer

Randstad Digital, divisione specializzata nella ricerca, selezione e formazione ...
Località
Località
Italy , Egna
Salario
Salario:
34000.00 - 40000.00 EUR / Anno
https://www.randstad.com Logo
Randstad
Data di scadenza
14 luglio 2026
Flip Icon
Requisiti
Requisiti
  • Laurea in Informatica o formazione equivalente, con esperienza professionale consolidata nel ruolo
  • Profonda conoscenza delle architetture backend e dei sistemi distribuiti
  • Esperienza operativa con Elasticsearch o OpenSearch, con focus su schema design, query, scaling e operations
  • Ottime competenze nell'utilizzo dei servizi AWS e nella progettazione di pipeline dati robuste (preferibilmente con Spark o Databricks)
  • Ottime capacità comunicative in lingua inglese (livello C1 richiesto), con attitudine alla collaborazione internazionale e cross-funzionale
Responsabilità
Responsabilità
  • Curare l'architettura della piattaforma di ricerca su AWS e definirne la strategia evolutiva
  • Definire standard elevati per performance, affidabilità, osservabilità e Service Level Agreements (SLA)
  • Progettare e ottimizzare pipeline di indicizzazione e dati tramite Databricks, sviluppando schemi, mapping e strategie di query avanzate
  • Realizzare direttamente funzionalità complesse, prototipi e componenti architetturali fondamentali
  • Garantire la scalabilità, il monitoraggio e l'ottimizzazione dei costi dei cluster Elasticsearch o OpenSearch, assicurando coerenza tecnica tra le applicazioni internazionali
Cosa offriamo
Cosa offriamo
  • Buoni pasto da 7 €
  • Assicurazione sanitaria integrativa
  • Polizza infortuni
  • Premio di produzione aziendale convertibile in beni e servizi (Welfare aziendale)
  • Formazione continua e certificazioni finanziate dall'azienda
  • Contesto internazionale giovane e dinamico
  • Tempo pieno
Leggi di più
Arrow Right

Martech Data Engineer

Località
Località
Italy , Milano
Salario
Salario:
Non fornito
businessintegrationpartners.com Logo
Business Integration Partners
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Laurea Specialistica in Ingegneria Informatica, Ingegneria Matematica, Ingegneria delle Telecomunicazioni, Informatica, Statistica o discipline affini (STEM)
  • Background in Architetture informatiche, Clustering e Sistemi Distribuiti, Cloud
  • Ottima conoscenza e competenza in ambito Big Data con tecnologie come Hadoop, Hive, Pig, Spark, Flume, Kafka, Airflow
  • Ottima conoscenza di database relazionali SQL e NoSQL, come MongoDB, Cassandra e HBase
  • Conoscenza di Google Cloud Platform
  • Conoscenza di almeno uno dei seguenti linguaggi tra Python, Java, C++, SQL
  • Esperienza con strumenti di version control (es. Git)
  • Esperienza nel campo della progettazione logico-concettuale di modelli dati complessi ottimizzati per l'ambito analitico
  • Conoscenza fluente di italiano e inglese
Responsabilità
Responsabilità
  • Operare su architetture Cloud Martech basate su Google Cloud e soluzioni Software as a Service (SaaS) in ambito Martech
  • Implementare pipeline di lavorazione batch o real time, trasformazione e trattamento di dati strutturati e non strutturati
  • Essere autonomo/a nelle fasi di acquisizione, storicizzazione, cleansing, anonimizzazione/crypting/masking dei dati, trattamento dei valori nulli e outlier, aggregazione, strutturazione di dati non strutturati, creazione di KPI di quality, preparazione dati per diversi utenti
  • Lavorare con diverse tecnologie, scelte in base allo specifico progetto e Cliente
  • Fornire Advisory per efficientare ecosistemi Martech basati su Google Cloud
  • Costruire relazioni con clienti, vendor, partner
  • Contributo attivo per alimentare la Community con attività di ricerca, scouting, concept di nuove soluzioni e business development
Cosa offriamo
Cosa offriamo
  • Crescita e Formazione
  • Flessibilità e Work-Life Integration
  • Salute & Benefits
  • Famiglia e Genitorialità
  • Inclusione e Valori
  • Tempo pieno
Leggi di più
Arrow Right

Data Engineer

Il Gruppo Lynx è specializzato nella progettazione e realizzazione di soluzioni ...
Località
Località
Italy , Cagliari
Salario
Salario:
Non fornito
lynxspa.com Logo
Lynx SpA
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • 3+ anni di esperienza in Data Engineering o sviluppo Backend complesso
  • Esperienza pratica approfondita con i servizi core per i dati: Storage (S3/Blob), Compute (Lambda/Functions, EC2), Database e Orchestration (Glue/Data Factory)
  • Comprensione dei concetti di VPC e IAM
  • Ottima conoscenza di Python o linguaggi equivalenti, non solo per scripting, ma con approccio ingegneristico (OOP, gestione eccezioni, generatori per efficienza memoria, Type Hinting)
  • Ottima padronanza di linguaggi di scripting (come Python, Javascript, Go o Scala) per l'automazione e lo sviluppo
  • Competenze avanzate in SQL e nella gestione di database relazionali e non relazionali (NoSQL)
  • Familiarità con i concetti di elaborazione distribuita (Spark) e differenze rispetto all'elaborazione in-memory single-node (Pandas)
  • Capacità di gestire ambienti eterogenei e integrare funzionalità personalizzate
  • Utilizzo avanzato di Git (branching strategy, PR review) e conoscenza di Docker e Terraform
Responsabilità
Responsabilità
  • Enterprise Agentic Architectures: Progettare e implementare l'infrastruttura sottostante per Agenti AI e sistemi multi-agente, gestendo la persistenza dello stato (Memory), l'integrazione sicura con API aziendali (Tools) e l'orchestrazione scalabile dei flussi di ragionamento (es. LangGraph deployment) in ambienti di produzione
  • Advanced ETL/ELT Pipeline Design: Progettare e sviluppare pipeline dati robuste e monitorate (Airflow, Step Functions, Glue), gestendo complessità come caricamenti incrementali, gestione degli errori (retry logic, dead letter queues) e idempotenza dei processi
  • Big Data Processing & Optimization: Gestire volumi di dati significativi utilizzando framework distribuiti (Spark) o librerie ottimizzate (Polars) quando Pandas non è sufficiente, ottimizzando le performance attraverso tecniche di partizionamento e formato file (Parquet, ORC)
  • Database Optimization & Data Modeling: Progettare schemi dati analitici e data model (es. Star Schema) e ottimizzare query SQL complesse (uso di CTE, Window Functions, Indici) per garantire performance elevate su DB relazionali e analitici (es. Redshift, BigQuery)
  • Cloud Infrastructure & IaC: Gestire il provisioning e la manutenzione delle risorse Cloud (AWS/Azure) utilizzando Infrastructure as Code (Terraform o CDK), garantendo la gestione corretta dello state file, dei secret (non hardcoded) e la sicurezza tramite IAM roles
  • Cloud Architecture & Data Lakes – Progettare, realizzare e gestire infrastrutture IT su piattaforme Cloud (es. AWS, Azure o GCP), creando e mantenendo Data Lake aziendali sicuri ed efficienti
  • Performance & Cost Optimization – Monitorare costantemente le architetture cloud per ottimizzare le performance computazionali e controllare i costi dei servizi utilizzati
  • Support for Advanced Analytics – Progettare infrastrutture capaci di supportare l'elevata complessità computazionale richiesta dai modelli di Machine Learning sviluppati dal team di Data Science
  • Data Quality & Governance: Implementare controlli automatici di qualità del dato (schema validation, null checks) all'interno delle pipeline e garantire la tracciabilità (lineage) e il catalogo dei dati aziendali
Cosa offriamo
Cosa offriamo
  • accordi di smart working
  • welfare aziendale
  • assistenza sanitaria integrativa
  • Tempo pieno
Leggi di più
Arrow Right

Data Engineer

Come SAP Consultant collaborerai con team multidisciplinari per analizzare proce...
Località
Località
Italy , Torino; Roma; Milano; Treviso; Padova; Bari; Balerna
Salario
Salario:
Non fornito
betacom.it Logo
Betacom Group
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Conoscenza approfondita di un moderno linguaggio di programmazione (Python, Java o C++) e delle relative librerie di data processing, Machine Learning e visualizzazione dati
  • Esperienza consolidata nella gestione di database relazionali (Microsoft SQL Server, Oracle Database) e conoscenza approfondita del linguaggio SQL
  • Esperienza di sviluppo di software distribuito per processamento dati eterogenei (database, file, streaming) su larga scala
Responsabilità
Responsabilità
  • Collaborerai con team multidisciplinari per analizzare processi, progettare soluzioni e supportare l’evoluzione dei sistemi ERP dei nostri clienti
Cosa offriamo
Cosa offriamo
  • Formazione costante
  • Convenzioni aziendali
  • Team building
  • Progetti ad alto valore
  • Tempo pieno
Leggi di più
Arrow Right

Data Platform Engineer

T.A.I. Software Solution s.r.l. ricerca candidati con profilo professionale di “...
Località
Località
Italy , Pisa; Firenze; Milano; Roma
Salario
Salario:
Non fornito
taisolutions.com Logo
TAI SOLUTIONS
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • 4-5 anni di esperienza consolidata nella gestione di ambienti Linux
  • 4-5 anni di esperienza consolidata nella gestione di attività di supporto e troubleshooting
  • Buona attitudine al lavoro in team
  • Buona conoscenza di almeno una delle seguenti piattaforme: Cloudera, Databricks, Nifi, Apache kafka / Confluent kafka / Confluent Cloud
  • Buona conoscenza di sistemi di automazione come Ansible o Terraform
Responsabilità
Responsabilità
  • gestione e manutenzione di infrastrutture IT legate al mondo Big Data
  • automazione dei processi di rilascio infrastrutture/applicativi
Cosa offriamo
Cosa offriamo
  • strumenti di formazione sia per le hard che soft skill
  • follow-up costanti con il team HR e con il proprio Business Manager
  • un piano di crescita professionale ben strutturato in un ambiente dinamico e stimolante
  • Tempo pieno
Leggi di più
Arrow Right

Ai Agent Solutions Specialist / Ai Engineer

Le figure selezionate saranno inserite nella Business Line “Data Management & AI...
Località
Località
Italy , Pisa; Firenze; Milano; Roma
Salario
Salario:
Non fornito
taisolutions.com Logo
TAI SOLUTIONS
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Conoscenza approfondita di sistemi operativi Linux
  • Conoscenza base delle problematiche di networking e sicurezza applicativa
  • Conoscenza dei principi di architetture distribuite e microservizi
  • Esperienza nell’uso di API REST e servizi asincroni
  • Conoscenza di containerizzazione e virtualizzazione (Docker, Kubernetes)
  • Padronanza di strumenti di accesso remoto (vpn, ssh)
  • Conoscenza di tecniche di monitoring, logging e troubleshooting
  • Capacità di scrittura di script (bash, Python) per automazione e integrazione
  • Attitudine al lavoro in team multidisciplinari
  • Capacità di analisi, problem solving e comunicazione tecnica
Leggi di più
Arrow Right
Nuovo

Addetto Carico/Scarico Impianti

Randstad Italia, filiale di Varese, per una solida azienda cliente operante nel ...
Località
Località
Italy , Vedano Olona
Salario
Salario:
22000.00 - 28000.00 EUR / Anno
https://www.randstad.com Logo
Randstad
Data di scadenza
24 agosto 2026
Flip Icon
Requisiti
Requisiti
  • Esperienza pregressa preferibilmente in contesti chimici o industriali complessi
  • Patentino per il carrello elevatore in corso di validità
  • Eventuale attestato per Lavori in Quota
  • Affidabilità, precisione e capacità di gestione delle procedure di sicurezza
Responsabilità
Responsabilità
  • Gestione flussi: eseguire le operazioni di carico e scarico delle autocisterne di polioli
  • Coordinamento autisti: accogliere i conducenti, fornire le disposizioni di sicurezza aziendali e indicare le aree di sosta e pesata
  • Movimentazione merci: utilizzare il carrello elevatore e il transpallet per lo stoccaggio e il prelievo dei colli sulle scaffalature
  • Controllo e documentazione: verificare la conformità delle operazioni e dei documenti di trasporto
Leggi di più
Arrow Right