CrawlJobs Logo

Data Engineer - Big Data

bcame.it Logo

Bcame

Location Icon

Località:
Italy , Catania

Category Icon
Categoria:
IT - Sviluppo Software

Job Type Icon

Tipo di contratto:
Non fornito

Salary Icon

Salario:

30000.00 EUR / Anno
Salva lavoro
Save Icon
Candidati

Descrizione del lavoro:

Lavoriamo su piattaforme dati enterprise e pipeline scalabili su Google Cloud. Costruiamo sistemi affidabili per ingestione, trasformazione e analisi di grandi volumi di dati.

Responsabilità:

  • Progettare e sviluppare pipeline di elaborazione dati batch e streaming con Apache Beam e Apache Spark su Google Cloud Dataproc
  • Modellare, ottimizzare e interrogare dataset di grandi dimensioni su BigQuery, con attenzione a costi e performance
  • Lavorare con BigQuery Studio per esplorazione dati, sviluppo di notebook analitici e collaborazione con i team di Data Science e Analytics
  • Integrare sorgenti dati eterogenee (database relazionali, API, event stream) nelle pipeline GCP
  • Monitorare la qualità dei dati, implementare test e alert sulle pipeline in produzione
  • Collaborare con il team di Data Science per rendere i dati disponibili, affidabili e ben documentati
  • Contribuire alla definizione degli standard di data engineering del team: naming convention, data catalog, lineage

Requisiti:

  • Apache Beam/Spark — Sviluppo pipeline — livello intermedio
  • Google Cloud Dataproc — Cluster, job, tuning — livello intermedio
  • BigQuery — SQL avanzato, ottimizzazione — livello intermedio/avanzato
  • BigQuery Studio — Notebook, esplorazione — livello base/intermedio
  • Python — pipeline e scripting — livello intermedio
  • SQL avanzato — Window fn, CTE, ottimiz. — livello intermedio
  • Git/CI-CD — Workflow collaborativo — livello intermedio

Preferibile:

  • Esperienza con Google Cloud Dataflow (pipeline Beam fully managed)
  • Conoscenza di orchestratori di pipeline: Apache Airflow / Cloud Composer
  • Nozioni di data modeling: schema star/snowflake, data vault
  • Certificazione Google Cloud Professional Data Engineer (o percorso in corso)
Cosa offriamo:
  • Company canteen
  • Piano di crescita professionale strutturato

Informazioni aggiuntive:

Offerta pubblicata:
16 maggio 2026

Tipo di impiego:
Tempo pieno
Tipo di lavoro:
Lavoro in sede
Icon
Bcame - Tutte le offerte di lavoro
Condividi link dell'offerta:
Copy Link Icon
Facebook Icon Twitter Icon LinkedIn Icon

Cerchi altre opportunità? Cerca altre offerte di lavoro che corrispondano alle tue competenze e ai tuoi interessi.

Briefcase Icon

Lavori simili per Data Engineer - Big Data

Senior Data Engineer

In Key Partner cerchiamo un Senior Data Engineer appassionato di dati, tecnologi...
Località
Località
Italy , Roma; Milano; Termoli
Salario
Salario:
Non fornito
keypartner.com Logo
keypartner
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Esperienza in consulenza IT e interazione diretta con il cliente
  • Capacità di analisi funzionale e di sintesi delle esigenze di business
  • Time management e capacità di gestire più attività contemporaneamente
  • Comunicazione efficace e attitudine al lavoro di squadra
  • Inglese (B2 scritto, B1 orale)
  • Python (avanzato)
  • Spark/PySpark (intermedio)
  • SQL (intermedio)
  • Azure Data Services (avanzato)
  • Esperienza con strumenti di Business Intelligence (Power BI, Tableau, Qlik, Spotfire)
Responsabilità
Responsabilità
  • Progettazione e implementazione di soluzioni di Data Management scalabili e performanti
  • Sviluppo e ottimizzazione di pipeline ETL per l’integrazione e trasformazione dei dati
  • Manipolazione e analisi dati con Python (pandas, polars, numpy)
  • Sviluppo di API con FastAPI per l’esposizione di dati e servizi
  • Lavoro su architetture Big Data con Spark/PySpark per l’elaborazione distribuita
  • Utilizzo della Data Platform di Azure (Databricks, Synapse, Data Lake, Data Factory, Event Hubs, Purview)
  • Progettazione e gestione di database SQL per garantire efficienza e qualità dei dati
  • Creazione di dashboard e reportistica per supportare il decision-making aziendale
Cosa offriamo
Cosa offriamo
  • Un percorso di crescita personalizzato, tarato sulle esigenze di sviluppo individuali
  • Formazione continua attraverso academy interna, certificazioni ufficiali, workshop e mentorship
  • Progetti sfidanti e concreti su integrazione, orchestrazione AI-based e digital transformation
  • Modalità di lavoro flessibile: puoi scegliere tra lavoro full remote o ibrido presso le sedi di Milano e Roma
  • Un ambiente inclusivo, trasparente e collaborativo, in cui il contributo di ogni persona è riconosciuto
  • Un’organizzazione meritocratica, che valorizza la competenza e il desiderio di crescita
  • Un clima di lavoro informale ma professionale: si lavora sodo, ma con equilibrio e umanità
  • Tempo pieno
Leggi di più
Arrow Right

Data Platform Engineer

T.A.I. Software Solution s.r.l. ricerca candidati con profilo professionale di “...
Località
Località
Italy , Pisa; Firenze; Milano; Roma
Salario
Salario:
Non fornito
taisolutions.com Logo
TAI SOLUTIONS
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • 4-5 anni di esperienza consolidata nella gestione di ambienti Linux
  • 4-5 anni di esperienza consolidata nella gestione di attività di supporto e troubleshooting
  • Buona attitudine al lavoro in team
  • Buona conoscenza di almeno una delle seguenti piattaforme: Cloudera, Databricks, Nifi, Apache kafka / Confluent kafka / Confluent Cloud
  • Buona conoscenza di sistemi di automazione come Ansible o Terraform
Responsabilità
Responsabilità
  • gestione e manutenzione di infrastrutture IT legate al mondo Big Data
  • automazione dei processi di rilascio infrastrutture/applicativi
Cosa offriamo
Cosa offriamo
  • strumenti di formazione sia per le hard che soft skill
  • follow-up costanti con il team HR e con il proprio Business Manager
  • un piano di crescita professionale ben strutturato in un ambiente dinamico e stimolante
  • Tempo pieno
Leggi di più
Arrow Right

Senior Data Engineer

Se anche tu vuoi dare forma al futuro con noi lavorando su importanti progetti p...
Località
Località
Italy , Assago
Salario
Salario:
Non fornito
https://www.soprasteria.com Logo
Sopra Steria
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Padronanza di SQL, Python e framework Big Data (Spark, Hadoop)
  • Esperienza con CI/CD e orchestrazione (Airflow, Luigi)
  • Conoscenza di architetture distribuite e microservizi per il data processing
  • Familiarità con strumenti di monitoraggio e logging (Prometheus, ELK)
  • Buona conoscenza dell’inglese tecnico
  • Leadership tecnica e capacità di coordinamento
  • Orientamento alla qualità e alla scalabilità
  • Almeno 4-6 anni di esperienza nella progettazione e gestione di architetture dati scalabili
Responsabilità
Responsabilità
  • Progettazione e sviluppo di data pipeline complesse per grandi volumi di dati
  • Implementazione di soluzioni cloud-native per data lake e data warehouse (AWS Redshift, Azure Synapse, BigQuery)
  • Ottimizzazione delle performance e gestione di database relazionali e NoSQL
  • Integrazione di strumenti di streaming e messaggistica (Kafka, Kinesis)
  • Definizione di standard di data governance, sicurezza e qualità dei dati
  • Coordinamento tecnico e mentoring di profili junior
  • Tempo pieno
Leggi di più
Arrow Right

Data Engineer

Il Gruppo Lynx è specializzato nella progettazione e realizzazione di soluzioni ...
Località
Località
Italy , Cagliari
Salario
Salario:
Non fornito
lynxspa.com Logo
Lynx SpA
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • 3+ anni di esperienza in Data Engineering o sviluppo Backend complesso
  • Esperienza pratica approfondita con i servizi core per i dati: Storage (S3/Blob), Compute (Lambda/Functions, EC2), Database e Orchestration (Glue/Data Factory)
  • Comprensione dei concetti di VPC e IAM
  • Ottima conoscenza di Python o linguaggi equivalenti, non solo per scripting, ma con approccio ingegneristico (OOP, gestione eccezioni, generatori per efficienza memoria, Type Hinting)
  • Ottima padronanza di linguaggi di scripting (come Python, Javascript, Go o Scala) per l'automazione e lo sviluppo
  • Competenze avanzate in SQL e nella gestione di database relazionali e non relazionali (NoSQL)
  • Familiarità con i concetti di elaborazione distribuita (Spark) e differenze rispetto all'elaborazione in-memory single-node (Pandas)
  • Capacità di gestire ambienti eterogenei e integrare funzionalità personalizzate
  • Utilizzo avanzato di Git (branching strategy, PR review) e conoscenza di Docker e Terraform
Responsabilità
Responsabilità
  • Enterprise Agentic Architectures: Progettare e implementare l'infrastruttura sottostante per Agenti AI e sistemi multi-agente, gestendo la persistenza dello stato (Memory), l'integrazione sicura con API aziendali (Tools) e l'orchestrazione scalabile dei flussi di ragionamento (es. LangGraph deployment) in ambienti di produzione
  • Advanced ETL/ELT Pipeline Design: Progettare e sviluppare pipeline dati robuste e monitorate (Airflow, Step Functions, Glue), gestendo complessità come caricamenti incrementali, gestione degli errori (retry logic, dead letter queues) e idempotenza dei processi
  • Big Data Processing & Optimization: Gestire volumi di dati significativi utilizzando framework distribuiti (Spark) o librerie ottimizzate (Polars) quando Pandas non è sufficiente, ottimizzando le performance attraverso tecniche di partizionamento e formato file (Parquet, ORC)
  • Database Optimization & Data Modeling: Progettare schemi dati analitici e data model (es. Star Schema) e ottimizzare query SQL complesse (uso di CTE, Window Functions, Indici) per garantire performance elevate su DB relazionali e analitici (es. Redshift, BigQuery)
  • Cloud Infrastructure & IaC: Gestire il provisioning e la manutenzione delle risorse Cloud (AWS/Azure) utilizzando Infrastructure as Code (Terraform o CDK), garantendo la gestione corretta dello state file, dei secret (non hardcoded) e la sicurezza tramite IAM roles
  • Cloud Architecture & Data Lakes – Progettare, realizzare e gestire infrastrutture IT su piattaforme Cloud (es. AWS, Azure o GCP), creando e mantenendo Data Lake aziendali sicuri ed efficienti
  • Performance & Cost Optimization – Monitorare costantemente le architetture cloud per ottimizzare le performance computazionali e controllare i costi dei servizi utilizzati
  • Support for Advanced Analytics – Progettare infrastrutture capaci di supportare l'elevata complessità computazionale richiesta dai modelli di Machine Learning sviluppati dal team di Data Science
  • Data Quality & Governance: Implementare controlli automatici di qualità del dato (schema validation, null checks) all'interno delle pipeline e garantire la tracciabilità (lineage) e il catalogo dei dati aziendali
Cosa offriamo
Cosa offriamo
  • accordi di smart working
  • welfare aziendale
  • assistenza sanitaria integrativa
  • Tempo pieno
Leggi di più
Arrow Right

Data Engineer

Come SAP Consultant collaborerai con team multidisciplinari per analizzare proce...
Località
Località
Italy , Torino; Roma; Milano; Treviso; Padova; Bari; Balerna
Salario
Salario:
Non fornito
betacom.it Logo
Betacom Group
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Conoscenza approfondita di un moderno linguaggio di programmazione (Python, Java o C++) e delle relative librerie di data processing, Machine Learning e visualizzazione dati
  • Esperienza consolidata nella gestione di database relazionali (Microsoft SQL Server, Oracle Database) e conoscenza approfondita del linguaggio SQL
  • Esperienza di sviluppo di software distribuito per processamento dati eterogenei (database, file, streaming) su larga scala
Responsabilità
Responsabilità
  • Collaborerai con team multidisciplinari per analizzare processi, progettare soluzioni e supportare l’evoluzione dei sistemi ERP dei nostri clienti
Cosa offriamo
Cosa offriamo
  • Formazione costante
  • Convenzioni aziendali
  • Team building
  • Progetti ad alto valore
  • Tempo pieno
Leggi di più
Arrow Right

Martech Data Engineer

Località
Località
Italy , Milano
Salario
Salario:
Non fornito
businessintegrationpartners.com Logo
Business Integration Partners
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Laurea Specialistica in Ingegneria Informatica, Ingegneria Matematica, Ingegneria delle Telecomunicazioni, Informatica, Statistica o discipline affini (STEM)
  • Background in Architetture informatiche, Clustering e Sistemi Distribuiti, Cloud
  • Ottima conoscenza e competenza in ambito Big Data con tecnologie come Hadoop, Hive, Pig, Spark, Flume, Kafka, Airflow
  • Ottima conoscenza di database relazionali SQL e NoSQL, come MongoDB, Cassandra e HBase
  • Conoscenza di Google Cloud Platform
  • Conoscenza di almeno uno dei seguenti linguaggi tra Python, Java, C++, SQL
  • Esperienza con strumenti di version control (es. Git)
  • Esperienza nel campo della progettazione logico-concettuale di modelli dati complessi ottimizzati per l'ambito analitico
  • Conoscenza fluente di italiano e inglese
Responsabilità
Responsabilità
  • Operare su architetture Cloud Martech basate su Google Cloud e soluzioni Software as a Service (SaaS) in ambito Martech
  • Implementare pipeline di lavorazione batch o real time, trasformazione e trattamento di dati strutturati e non strutturati
  • Essere autonomo/a nelle fasi di acquisizione, storicizzazione, cleansing, anonimizzazione/crypting/masking dei dati, trattamento dei valori nulli e outlier, aggregazione, strutturazione di dati non strutturati, creazione di KPI di quality, preparazione dati per diversi utenti
  • Lavorare con diverse tecnologie, scelte in base allo specifico progetto e Cliente
  • Fornire Advisory per efficientare ecosistemi Martech basati su Google Cloud
  • Costruire relazioni con clienti, vendor, partner
  • Contributo attivo per alimentare la Community con attività di ricerca, scouting, concept di nuove soluzioni e business development
Cosa offriamo
Cosa offriamo
  • Crescita e Formazione
  • Flessibilità e Work-Life Integration
  • Salute & Benefits
  • Famiglia e Genitorialità
  • Inclusione e Valori
  • Tempo pieno
Leggi di più
Arrow Right

Full Stack Engineer / Developer

Siamo alla ricerca di Full Stack Engineers / Developers sia Junior che Senior pe...
Località
Località
Italy , Cernusco sul Naviglio, Milano
Salario
Salario:
25000.00 - 50000.00 EUR / Anno
oncode.it Logo
Oncode
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Laurea Triennale/specialistica in Ingegneria Informatica, Scienze dell'Informazione o discipline attinenti
  • Conoscenza delle architetture applicative enterprise
  • Conoscenza delle tecnologie per lo sviluppo web e mobile (HTML5, CSS3, JavaScript, Typescript)
  • Conoscenza di alcuni dei seguenti linguaggi: Java, C#
  • Familiarità con alcuni dei seguenti framework: Spring, .NET, Angular, React
  • Conoscenza di database relazionali (MySQL, PostgreSQL, Oracle, SQL Server)
  • Familiarità con sistemi di versioning (GIT)
  • Spiccate capacità di problem solving e reverse engineering
  • Capacità relazionali e gestionali
  • Conoscenza della lingua inglese
Responsabilità
Responsabilità
  • Curare la progettazione e lo sviluppo di complesse applicazioni web composte da molteplici servizi che si integrano e interagiscono fra di loro
  • Sviluppare soluzioni usando il linguaggio Java / C# e framework come .NET core / Spring Boot, Angular 2+, React.js
  • Affrontare, insieme al nostro team di specialisti del settore, tematiche di Data Science, Big Data Analytics, Cloud Computing, Deep Learning & Machine Learning
  • Sviluppare progetti occupandosi di tutte le fasi del suo ciclo di vita, dalla raccolta requisiti alla messa in produzione
Cosa offriamo
Cosa offriamo
  • Buoni pasto da 8 euro / giorno
  • Welfare aziendale
  • Orario di lavoro flessibile e smartworking
  • Possibilità di crescita professionale in un ambiente dinamico e meritocratico
  • Assicurazione medica integrativa
  • Premio annuale in linea con i risultati aziendali
  • Budget per l'acquisto di libri relativi al mondo software
  • Formazione specifica
  • Partecipazione a conferenze in Italia ed Europa
  • Eventi di team building
  • Tempo pieno
Leggi di più
Arrow Right

Ai Agent Solutions Specialist / Ai Engineer

Le figure selezionate saranno inserite nella Business Line “Data Management & AI...
Località
Località
Italy , Pisa; Firenze; Milano; Roma
Salario
Salario:
Non fornito
taisolutions.com Logo
TAI SOLUTIONS
Data di scadenza
Fino a nuovo avviso
Flip Icon
Requisiti
Requisiti
  • Conoscenza approfondita di sistemi operativi Linux
  • Conoscenza base delle problematiche di networking e sicurezza applicativa
  • Conoscenza dei principi di architetture distribuite e microservizi
  • Esperienza nell’uso di API REST e servizi asincroni
  • Conoscenza di containerizzazione e virtualizzazione (Docker, Kubernetes)
  • Padronanza di strumenti di accesso remoto (vpn, ssh)
  • Conoscenza di tecniche di monitoring, logging e troubleshooting
  • Capacità di scrittura di script (bash, Python) per automazione e integrazione
  • Attitudine al lavoro in team multidisciplinari
  • Capacità di analisi, problem solving e comunicazione tecnica
Leggi di più
Arrow Right