Data Engineer Databricks Emplois

Data Engineer Databricks Senior

Nous sommes à la recherche d’un Big Data Engineer Databricks Sénior qui sera en ...

Emplacement

France , Paris

Salaire:

Non fourni

Talan

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Issu(e) d’une formation supérieure (école d’ingénieur, master,…)
Au moins 4 années d’expérience dans le domaine du Big Data (et particulièrement sur le framework Spark)
Au moins 6 années d’expérience dans le développement logiciel
Maîtrise du développement logiciel (Scala, Python …)
Solides expériences dans la mise en place de pipelines de données
Maîtrise du Framework Spark (idéalement sur Databricks) et son optimisation
Maîtrise des bases de données SQL et le langage SQL
Expérience sur les méthodes de stockage : HDFS, S3,…
Bonnes connaissances en devOps : Jenkins, Gitlab, Maven, …
Connaissance de l’Agilité

Responsabilités

Manager des Big Data Engineer et Cloud Engineer
Coacher techniquement les membres de l’équipe : solution et code review sur site, recommandation sur les formations à suivre, certifications à réaliser, …
Analyse des besoins techniques métiers, définition de l’architecture solution et logiciel, référent technique, développement et optimisation, code review, maintenir les pratiques Devops “You build IT, You run IT”, support à recette et mise en production, documentation, et parfois assumer le rôle de Scrum Master,…
Benchmark de solutions et conseil auprès de notre client sur les solutions technologiques à adopter, en lien avec leurs besoins
Partage de connaissances et formations interne

Ce que nous offrons

Plan de formation pour accompagner votre carrière (formations éditeurs, certifications) grâce à nos partenariats nous accordant une position de partenaire privilégié, et management de proximité par des experts
Locaux modernes en centre-ville
Télétravail jusqu’à 5 jours selon les missions, prime d’équipement de 100€
Mobilité en France et à l’étranger
Tickets restaurant, prime vacances, 50% transport (abonnement transport public), mutuelle
Permanence handicap (consultant dédié aux collaborateurs en situation de handicap et aux proches aidants)
Actionnariat salarié
Prime de cooptations
RTT

Temps plein

Data Engineer Databricks confirmé

Nous sommes à la recherche d’un Big Data Engineer Databricks confirmé qui sera e...

Emplacement

France , Paris

Salaire:

Non fourni

Talan

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Issu d’une formation supérieure (école d’ingénieur, master,…)
Au moins 3 années d’expérience dans le domaine du Big Data et particulièrement sur le framework Spark (idéalement Databricks)
Maîtrise du développement logiciel (Scala, Python,…)
Solides expériences dans la mise en place de pipeline de données
Expérience sur une plateforme Cloud serait un plus et idéalement AWS
Expérience sur des flux temps réel serait un plus : Kafka + Spark Streaming
Maitrise du langage SQL
Expérience sur des méthodes de stockage : HDFS, S3, ,…
Bonnes connaissances en devOps : Jenkins, Gitlab, Maven, …
Connaissance de l’Agilité

Responsabilités

Analyse des besoins techniques métiers, définition de l’architecture solution et logiciel, référent technique, développement et optimisation, code review, maintenir les pratiques Devops “You build IT, You run IT”, support à recette et mise en production, documentation, et parfois assumer le rôle de Scrum Master,…
Partager techniquement les membres de l’équipe : solutions et code reviews, recommandations, certifications à réaliser, …
Participation à des meet-up, coding dogo,…
Communication : écriture d’articles, retours d’expérience…

Ce que nous offrons

Plan de formation pour accompagner votre carrière (formations éditeurs, certifications)
Locaux modernes en centre-ville
Télétravail jusqu’à 5 jours selon les missions, prime d’équipement de 100€
Mobilité en France et à l’étranger
Tickets restaurant, prime vacances, 50% transport (abonnement transport public), mutuelle
Permanence handicap (consultant dédié aux collaborateurs en situation de handicap et aux proches aidants)
Actionnariat salarié
Prime de cooptations
RTT

Temps plein

Data engineer Pyspark / Databricks

Cabinet de conseil spécialisé en Innovation, Design Produit, Gestion de projet I...

Emplacement

France , Courbevoie

Salaire:

63000.00 EUR / Année

VISIAN

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Diplôme d’École d’Ingénieur
Minimum 4 ans d’expérience significative sur des projets Data complexes
Maîtrise impérative du Français et de l’Anglais (contexte international)
Expertise Python, Spark, Databricks et SQL
Maîtrise de l’écosystème AWS (S3, Glue, AirFlow, Cloudwatch, Lambda, IAM)
Environnement : Git, CI/CD (Gitlab), JIRA/Confluence et méthodologie Scrum

Responsabilités

Concevoir des jobs d’ingestion et de transformation via Python et Spark sur de gros volumes de données
Maîtriser l’environnement (clusters, notebooks, jobs) et optimiser les requêtes SQL
Assurer le maintien en condition opérationnelle de la plateforme en production (analyse et correction d’incidents)
Apporter une vision long terme sur l’évolution de la plateforme et promouvoir les meilleures pratiques de développement
Participer aux ateliers de conception (techniques et fonctionnels) et maintenir la documentation à jour

Ce que nous offrons

Entre 1-2 jours de télétravail
RTT / Jour de repos

Temps plein

Data Engineer ou Architecte Data

Dans le cadre de l’évolution d’une plateforme Data stratégique, nous recherchons...

Emplacement

France , Saint-Denis

Salaire:

50000.00 - 71000.00 EUR / Année

APEC

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Minimum 4 ans d’expérience en Data Engineering ou Architecture Data
Très bonne maîtrise de Databricks et Azure
Expérience sur plateformes d’ingestion et data lake
Capacité à prendre de la hauteur sur l’architecture globale
Esprit force de proposition

Responsabilités

Conception et modélisation des flux de données
Choix d’architecture sur Databricks
Audit et optimisation de code (Spark / Python)
Résolution de problématiques de performance, scalabilité et coûts
Mise en place et amélioration des pipelines CI/CD
Automatisation des tâches d’exploitation (catalogues, habilitations, provisioning)
Mise en place de monitoring (DataDog)
Réalisation de POC et veille technologique
Contribution à la production des livrables d’architecture (HLD / LLD)
Suivi projet en méthodologie Agile

Temps plein

Data Analyst/ Data Engineer

Orcan Intelligence recherche pour l’un de ses clients un Data Analyste confirmé ...

Emplacement

France , Paris

Salaire:

Non fourni

Orcan Intelligence

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Minimum 5 ans d’expérience
Maîtrise parfaite de SQL
Capacité à analyser et manipuler les données
Capacité à formaliser des besoins métiers
Français/Anglais – Courant

Responsabilités

Identifier les cas d’usage data et faciliter la spécification du backlog LADM (Life & Health Data Foundations)
Assurer une coordination efficace entre les data stewards (métier) et l’équipe de développement
Contribuer au processus d’acceptation en testant minutieusement les datasets exposés
Procéder à des contrôles de cohérence pour vérifier la qualité et l’intégrité des données

Senior Data Engineer - Sopra Steria Next

Sopra Steria Next est la marque de conseil en transformation digitale du Groupe ...

Emplacement

France , Courbevoie

Salaire:

Non fourni

Sopra Steria

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Bac+5 en informatique / data
7 à 15 ans d’expérience en Data Engineering
Expérience confirmée sur au moins une plateforme : Snowflake et/ou Databricks et/ou Denodo

Responsabilités

Concevoir et développer des pipelines de données (ETL / ELT)
Industrialiser les flux (orchestration, monitoring, gestion des erreurs)
Assurer la qualité, la traçabilité et la fiabilité des données
Participer à la conception de Data Platforms modernes (Lakehouse / DWH)
Contribuer à des projets de migration vers Snowflake / Databricks
Mettre en place des patterns d’architecture (layers, data products, gouvernance)
Intégrer des solutions de virtualisation de données (Denodo) si nécessaire
Modéliser les données (staging, core, data marts)
Développer des traitements en SQL, Spark ou Python
Optimiser les performances et les coûts (compute, stockage)

Ce que nous offrons

Un accord télétravail pour télétravailler jusqu’à 2 jours par semaine selon vos missions
Des nouveaux locaux inspirants et un environnement de travail agréable certifié Great Place To work à la Défense et dans plusieurs grandes villes de France
Un package avantages intéressant : une mutuelle, un CSE, des titres restaurants, un accord d’intéressement, des primes vacances et cooptation
Un accompagnement individualisé avec un mentor que vous choisissez
Des opportunités de carrières multiples : plus de 30 familles de métiers, autant de passerelles à imaginer ensemble
Plusieurs centaines de formations accessibles en toute autonomie depuis l’app mobile avec Sopra Steria Academy
Des parcours pour accélérer la progression et la promotion des femmes dans l’entreprise tous les niveaux
La possibilité de s’engager auprès d’une association grâce à notre plateforme d’engagement citoyen

Temps plein

Data Engineer

Dans la continuité de la croissance de notre agence Nantaise, nous sommes en rec...

Emplacement

France , Nantes

Salaire:

Non fourni

Talan

Date d'expiration

Jusqu'à nouvel ordre

Exigences

Minimum 4 years of experience in the Data field
Bac+5 type diploma
Experience with Python, SQL
Experience with relational and non-relational databases (SQL, MongoDB, Couchbase, ElasticSearch, BigQuery)
Experience with Data Warehousing (Snowflake or Databricks)
Experience with Cloud platforms (GCP Big Query, AWS Glue, Azure Data Factory)
Experience with OPS tools (Ansible, Git, Jenkins, Docker, Kubernetes, Azure DevOps)

Responsabilités

Design and implement modern data platforms
Industrialize and optimize technical solutions
Develop and maintain efficient data pipelines, from sourcing to visualization
Ensure data quality and security throughout their lifecycle
Collaborate with business teams to understand needs and provide adapted data solutions
Evaluate and recommend emerging technologies to improve platform capabilities

Ce que nous offrons

Remote work possible (up to 3 days/week)
Restaurant vouchers
50% subsidy on Naolib subscription
Health insurance covered at 80%
Employee shareholding
Vacation bonus
Extensive training offer (catalog of over 1,500 courses)
Possible return from maternity leave at 4/5th without loss of salary for 6 months

Temps plein

Senior Cloud Data Engineer

Synotis, entreprise du groupe SMILE, spécialisée dans la mise en œuvre de projet...

Emplacement

Switzerland , Lausanne

Salaire:

Non fourni

Smile Group

Date d'expiration

Jusqu'à nouvel ordre

Exigences

5 à 10+ années d’expérience en Data Engineering
Expérience significative sur Azure
Solide expérience sur Fabric OU Databricks (idéalement les deux)
Expérience en conception d’architectures cloud data
Réalisation obligatoire de projets autours des technologies citée ci-dessus
Connaissance de Power BI pour exposer les données
Langages: Python, PySpark
SQL avancé
Notions de PowerShell / Bash appréciées
Architecture: Patterns de Data Engineering, Lakehouse, Real-time (Event Hub, Kafka, IoT Hub), CI/CD (Azure DevOps, GitHub Actions), Observability, quality, monitoring

Responsabilités

Conception & développement de pipelines de données: Construire des pipelines d’ingestion, transformation et orchestration (batch & streaming)
Développer sur Microsoft Fabric (Data Factory, Lakehouse, Warehouse, OneLake)
Développer sur Databricks (pyspark, medallion architecture, Delta Live Tables)
Mettre en œuvre des flux ETL/ELT via Talend ou autres solutions (ADF, NiFi etc…)
Architecture Data & Cloud: Concevoir des architectures data cloud modulaires, sécurisées et scalables
Définir les modèles de données (conceptuels, logiques, physiques)
Participer au choix des technologies et à la structuration des plateformes
Participation à l’élaboration de la CI/CD,du monitoring, de la qualité et de la sécurité des plateformes de données
Proposer des patterns d’architecture sur Azure: Lakehouse, Medallion, Real-time ingestion, Multi-tenant / multi-projets, Best practices sur OneLake / Fabric / Databricks
Gouvernance & qualité des données: Participer à la mise en place de la Data Quality (DQ), Data Observability, lineage, catalogues

Ce que nous offrons

Équilibre vie pro et vie perso grâce au télétravail possible
Formations "sur mesure" avec la possibilité de passer des certifications
Développer votre carrière vers de l’expertise ou de la gestion de projet
Atmosphère familiale

Temps plein

Sélectionner un pays

Data Engineer Databricks

Description du poste

Responsabilités

Exigences

Looking for more opportunities?