CrawlJobs Logo

Data Engineer Spark Scala

https://www.soprasteria.com Logo

Sopra Steria

Location Icon

Emplacement:
France , Paris

Category Icon

Job Type Icon

Type de contrat:
Non fourni

Salary Icon

Salaire:

Non fourni
Enregistrer l'offre
Save Icon
Postuler

Description du poste:

Chez notre client, grande banque commerciale française, vous intégrez nos squads pour intervenir sur des projets de grande envergure, des projets transformants et structurants de la banque de demain. Vous interviendrez sur la gestion d’applications sur des domaines tels que : la conformité, la fraude, la lutte anti-blanchiment, les risques de crédit, la trésorerie, les paiements, les financements structurés ou encore le réglementaire bancaire.

Responsabilités:

  • Vous travaillez avec le client pour évaluer, concevoir, déployer, améliorer et maintenir les pipelines de données
  • Vous vous assurez que les pipelines de données créés sont résilients, sécurisés et accessibles
  • Vous définissez le modèle opérationnel pour monitorer et supporter les pipelines de données
  • Vous fournissez une expertise à nos clients sur leurs données pour assurer leur optimisation et leur sécurité par rapport à leurs besoins
  • Vous apportez un savoir en gestion de la qualité et la gouvernance de la donnée pour assurer le suivi de la conformité à la gouvernance de la donnée
  • Vous faites de la veille technologique dans le domaine afin d’enrichir les roadmaps technologiques et fournir des solutions modernes à nos clients

Exigences:

  • Maîtrise des technologies de bases de données Relationnelles et NoSQL
  • Maîtrise d’au moins un outil d’ETL/ELT (Informatica, datastage, etc.)
  • Maîtrise des technologies de traitement distribué de données (spark, scala, Hadoop)
  • Maîtrise d’au moins un framework de streaming de données (Kafka, RabbitMQ, etc.)
  • Maîtrise de chaines CI/CD et de des bonnes pratiques de DataOps
  • Maîtrise de solutions de Vitrtualisation de données (Denodo, Dremio, etc.)
  • Méthodologie Agile Scrum
  • Anglais professionnel

Souhaitable:

  • Vous êtes attiré(e) par le monde du numérique, le Cloud (maitrise d'un environnement public ou privé est un plus) et des technologies innovantes
  • Vous avez un bon esprit d'analyse, êtes curieux(se) et passionné(e) et vous avez le sens du travail en équipe
Ce que nous offrons:
  • Un accord télétravail pour télétravailler jusqu'à 2 jours par semaine selon vos missions
  • Un package avantages intéressants : une mutuelle, un CSE, des titres restaurants, un accord d'intéressement, des primes vacances et cooptation
  • Un accompagnement individualisé avec un mentor
  • Des opportunités de carrières multiples : plus de 50 métiers, autant de passerelles à imaginer ensemble
  • Plusieurs centaines de formations accessibles en toute autonomie depuis l'app mobile avec Sopra Steria Academy
  • La possibilité de s'engager auprès de notre fondation ou de notre partenaire « Vendredi »
  • L'opportunité de rejoindre le collectif Tech'Me UP (formations, conférences, veille, et bien plus encore)

Informations supplémentaires:

Offre publiée:
29 avril 2025

Type d'emploi:
Temps plein
Type de travail:
Travail hybride
Partager le lien de l'offre:

Vous cherchez plus d'opportunités ? Recherchez d'autres offres d'emploi qui correspondent à vos compétences et à vos intérêts.

Briefcase Icon

Emplois similaires pour Data Engineer Spark Scala

Data Engineer Spark Scala

Data Engineer Spark Scala pour la division Services Financiers de Sopra Steria, ...
Emplacement
Emplacement
France , Courbevoie
Salaire
Salaire:
Non fourni
https://www.soprasteria.com Logo
Sopra Steria
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Diplômé(e) d'une école d'Ingénieurs ou formation équivalente
  • Expérience de minimum 5 ans sur un poste similaire
  • Participation à un projet Data
  • Compétences en Spark, Scala, Python, Hadoop, Hive, Kafka, Elastic, Cloudera, Azure HD Insight, DataStage, SAS, DataIku, DataBricks
  • Importance au développement des compétences sur plusieurs technologies
  • Souci de l'apport de valeur pour les clients
  • Volonté de transmettre son savoir auprès de collaborateurs moins expérimentés
Responsabilités
Responsabilités
  • Évaluer, concevoir, déployer et maintenir en condition opérationnelle les bases de données
  • Définir le modèle opérationnel pour monitorer et supporter les pipelines de données
  • S'assurer que les pipelines de données créés sont résilients, sécurisés et accessibles
  • Fournir une expertise à nos clients sur leurs données pour assurer leur optimisation et leur sécurité
  • Apporter un savoir en gestion de la qualité et la gouvernance de la donnée
  • Faire de la veille technologique dans le domaine
Ce que nous offrons
Ce que nous offrons
  • Mutuelle
  • CSE
  • Titres restaurants
  • Accord d'intéressement
  • Primes vacances et cooptation
  • Opportunités de carrières multiples
  • Formations pour développer vos compétences
  • Plateformes de formations en autonomie
  • Possibilité de s'engager auprès de notre fondation ou de notre partenaire « Vendredi »
  • Collectif Tech'Me UP
  • Temps plein
Lire la suite
Arrow Right

Data Engineer

Novencia accompagne ses clients dans leurs projets de transformation digitale, t...
Emplacement
Emplacement
France , Lyon
Salaire
Salaire:
Non fourni
novencia.com Logo
Novencia
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Data Engineer depuis au moins 3 ans
  • compétences en langage Python/Spark
  • bonnes capacités de modélisation
  • forte appétence pour le Big Data
  • compétences en architectures Big Data
  • Azure/AWS
  • Cloud
  • Hadoop
  • Java
  • Kafka
Responsabilités
Responsabilités
  • Concevoir et proposer les solutions data répondant aux besoins fonctionnels et techniques des projets big data
  • Développer ces solutions et documenter le code associé
  • Mettre à disposition des équipes Métiers et des data scientists, des données de manière sécurisée et fiable
  • S’assurer de la conformité fonctionnelle et technique de ces réalisations en effectuant les tests nécessaires
  • Accompagner les mises en production et la mise en place de monitoring
  • Assurer la maintenance des applicatifs / plateformes de data science et de data analyse
  • Assurer une veille technologique
Lire la suite
Arrow Right

Data Engineer Databricks Senior

Nous sommes à la recherche d’un Big Data Engineer Databricks Sénior qui sera en ...
Emplacement
Emplacement
France , Paris
Salaire
Salaire:
Non fourni
talan.com Logo
Talan
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Issu(e) d’une formation supérieure (école d’ingénieur, master,…)
  • Au moins 4 années d’expérience dans le domaine du Big Data (et particulièrement sur le framework Spark)
  • Au moins 6 années d’expérience dans le développement logiciel
  • Maîtrise du développement logiciel (Scala, Python …)
  • Solides expériences dans la mise en place de pipelines de données
  • Maîtrise du Framework Spark (idéalement sur Databricks) et son optimisation
  • Maîtrise des bases de données SQL et le langage SQL
  • Expérience sur les méthodes de stockage : HDFS, S3,…
  • Bonnes connaissances en devOps : Jenkins, Gitlab, Maven, …
  • Connaissance de l’Agilité
Responsabilités
Responsabilités
  • Manager des Big Data Engineer et Cloud Engineer
  • Coacher techniquement les membres de l’équipe : solution et code review sur site, recommandation sur les formations à suivre, certifications à réaliser, …
  • Analyse des besoins techniques métiers, définition de l’architecture solution et logiciel, référent technique, développement et optimisation, code review, maintenir les pratiques Devops “You build IT, You run IT”, support à recette et mise en production, documentation, et parfois assumer le rôle de Scrum Master,…
  • Benchmark de solutions et conseil auprès de notre client sur les solutions technologiques à adopter, en lien avec leurs besoins
  • Partage de connaissances et formations interne
Ce que nous offrons
Ce que nous offrons
  • Plan de formation pour accompagner votre carrière (formations éditeurs, certifications) grâce à nos partenariats nous accordant une position de partenaire privilégié, et management de proximité par des experts
  • Locaux modernes en centre-ville
  • Télétravail jusqu’à 5 jours selon les missions, prime d’équipement de 100€
  • Mobilité en France et à l’étranger
  • Tickets restaurant, prime vacances, 50% transport (abonnement transport public), mutuelle
  • Permanence handicap (consultant dédié aux collaborateurs en situation de handicap et aux proches aidants)
  • Actionnariat salarié
  • Prime de cooptations
  • RTT
  • Temps plein
Lire la suite
Arrow Right

Big Data Engineer

Intégré(e) au sein d’une équipe Sopra Steria, pour un de nos Grands Comptes Banc...
Emplacement
Emplacement
France , Mérignac
Salaire
Salaire:
Non fourni
https://www.soprasteria.com Logo
Sopra Steria
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • De formation Bac+5 ou équivalent
  • Au moins 5 ans d’expérience dans la data dont 3 ans en Big Data
  • Expérience sur les technologies Hdfs, hive, spark, oozie, Scala, HQL, Shell, GitLab, Nexus, Maven, Jenkins, Sonar
  • Aimer travailler en équipe
  • Savoir relever les défis techniques
  • Savoir conseiller et apporter de la valeur ajoutée à une équipe
  • Savoir être challengeant et leader envers le client et l’équipe de développement
  • Aimer se tenir informé des nouveautés technologiques
  • Être à la recherche d’une évolution de carrière basée sur l’expérience projet et l’acquisition de nouvelles compétences
Responsabilités
Responsabilités
  • Apporter votre expertise et votre expérience à vos collègues lors des phases de conception et développement
  • Accompagner vos collègues dans leur montée en compétence technique au sein du projet
  • Définir et implémenter des solutions au sein d’un périmètre applicatif existant
  • Proposer des idées d’amélioration continue à votre client et à votre équipe (revue de procédures, mise en place de nouveaux outils dans le cadre de livraison, test ou qualimétrie)
  • Concevoir et développer des sujets complexes
  • Alimentation d’un DataLake jusqu‘au build d’un moteur de calcul
  • Intervention sur la mise en place de règles relatives aux normes Bâloises
Ce que nous offrons
Ce que nous offrons
  • Un accord télétravail pour télétravailler jusqu’à 2 jours par semaine selon vos missions
  • Une mutuelle
  • Un CSE
  • Des titres restaurants
  • Un accord d’intéressement
  • Des primes vacances et cooptation
  • Des opportunités de carrières multiples
  • Plusieurs centaines de formations accessibles en toute autonomie avec Sopra Steria Academy
  • La possibilité de s’engager auprès d’une association grâce à notre plateforme d’engagement citoyen
  • L'opportunité de rejoindre le collectif Tech'Me UP (formations, conférences, veille, et bien plus encore…)
  • Temps plein
Lire la suite
Arrow Right

Data Engineer Databricks confirmé

Nous sommes à la recherche d’un Big Data Engineer Databricks confirmé qui sera e...
Emplacement
Emplacement
France , Paris
Salaire
Salaire:
Non fourni
talan.com Logo
Talan
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Issu d’une formation supérieure (école d’ingénieur, master,…)
  • Au moins 3 années d’expérience dans le domaine du Big Data et particulièrement sur le framework Spark (idéalement Databricks)
  • Maîtrise du développement logiciel (Scala, Python,…)
  • Solides expériences dans la mise en place de pipeline de données
  • Expérience sur une plateforme Cloud serait un plus et idéalement AWS
  • Expérience sur des flux temps réel serait un plus : Kafka + Spark Streaming
  • Maitrise du langage SQL
  • Expérience sur des méthodes de stockage : HDFS, S3, ,…
  • Bonnes connaissances en devOps : Jenkins, Gitlab, Maven, …
  • Connaissance de l’Agilité
Responsabilités
Responsabilités
  • Analyse des besoins techniques métiers, définition de l’architecture solution et logiciel, référent technique, développement et optimisation, code review, maintenir les pratiques Devops “You build IT, You run IT”, support à recette et mise en production, documentation, et parfois assumer le rôle de Scrum Master,…
  • Partager techniquement les membres de l’équipe : solutions et code reviews, recommandations, certifications à réaliser, …
  • Participation à des meet-up, coding dogo,…
  • Communication : écriture d’articles, retours d’expérience…
Ce que nous offrons
Ce que nous offrons
  • Plan de formation pour accompagner votre carrière (formations éditeurs, certifications)
  • Locaux modernes en centre-ville
  • Télétravail jusqu’à 5 jours selon les missions, prime d’équipement de 100€
  • Mobilité en France et à l’étranger
  • Tickets restaurant, prime vacances, 50% transport (abonnement transport public), mutuelle
  • Permanence handicap (consultant dédié aux collaborateurs en situation de handicap et aux proches aidants)
  • Actionnariat salarié
  • Prime de cooptations
  • RTT
  • Temps plein
Lire la suite
Arrow Right

Data Engineer

Rejoindre une équipe de shapers qui partagent des valeurs et des convictions éco...
Emplacement
Emplacement
France , Lyon
Salaire
Salaire:
42000.00 - 50000.00 EUR / Année
datagalaxy.com Logo
DataGalaxy
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Bac +5 / Master
  • > 4 ans d'expérience
  • Compétences solides en technologie Spark (job, scripting, déploiement)
  • Maîtrise des bases de données Oracle
  • Maîtrise d'un des langages suivants : Java, Scala, ou Python
  • Maîtrise avancée du requêtage SQL
  • Bonne connaissance des solutions de stockage de données
  • Maîtrise des fondamentaux de l'agilité
Responsabilités
Responsabilités
  • Apporter une expertise en Big Data (Spark) pour faciliter la manipulation des données
  • Mettre en place des solutions de stockage de données (SQL, NoSQL, etc.)
  • Veiller à la sécurisation et la clarté des pipelines de données pour faciliter l'analyse et la transformation
  • Rechercher et conseiller sur de nouvelles technologies
  • Intervenir sur le maintien en condition opérationnelle du Datalake
Ce que nous offrons
Ce que nous offrons
  • Formation financée à 100%
  • Transports pris en charge à 100%
  • Prime de mobilité durable de 35€/mois (420€/an) pour déplacements à vélo ou à la marche
  • Titre restaurant Swile de 10€/jour travaillés
  • 50€ de chèques Etik'do pour les fêtes de fin d'année
  • Primes de cooptation, primes d'apport d'affaires, primes à la conversion
  • Temps plein
Lire la suite
Arrow Right

Data Engineer PySpark

Join Sopra Steria, a major player in European Tech, as part of the Data Factory ...
Emplacement
Emplacement
France , Paris
Salaire
Salaire:
Non fourni
https://www.soprasteria.com Logo
Sopra Steria
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Experience of at least 3 years in a data-related project
  • diploma from an engineering school or equivalent formation
  • knowledge in programming languages applied to data analysis such as SQL, Scala, R, Python, Java
  • familiarity with distributed data processing tools such as Spark, Pyspark, Hadoop
  • experience with data streaming frameworks such as Kafka or RabbitMQ
  • good analytical mindset
  • curiosity and passion for technology
  • teamwork skills in Agile environments such as Scrum or SAFE.
Responsabilités
Responsabilités
  • Understand business needs and translate them into data engineering solutions
  • implement data ingestion solutions in batch and/or streaming within a cloud context
  • structure the DataLake and establish data governance and security processes
  • process and expose data to business applications
  • establish CI/CD pipelines and their monitoring
  • conduct technology watch
  • develop prototypes, proofs of concept, or MVPs to drive innovation for clients.
Ce que nous offrons
Ce que nous offrons
  • Inclusive and respectful work environment
  • employer commitment against discrimination
  • promotion of diversity and inclusion.
  • Temps plein
Lire la suite
Arrow Right

Chef de projet BI & Big Data

Chef de projet BI / Big Data depuis au moins 4 ans, vous êtes à la recherche de ...
Emplacement
Emplacement
France , Paris
Salaire
Salaire:
Non fourni
novencia.com Logo
Novencia
Date d'expiration
Jusqu'à nouvel ordre
Flip Icon
Exigences
Exigences
  • Chef de projet BI / Big Data depuis au moins 4 ans
  • Capacité à traduire des besoins clients en usages et fonctionnalités produit
  • Compréhension des enjeux métier liés à la donnée
  • Capacité à comprendre les principes et pratiques de l'analyse de données et des dernières avancées du Machine Learning pour identifier les applications produit potentielles
  • Compréhension de l'architecture Data présente autour de la donnée (Data Lake, Data-Hub, Data-Lab, Data Warehouse, Pipeline)
  • Maîtrise des enjeux du Big Data
  • Connaissance des différentes solutions du marché (Cloud, Data Gouvernance, Data virtualisation, ETL …)
  • Capacité à appréhender les différents rôles que constitue son équipe Data (Data Analyst, Data Scientist, Data Engineer, …)
  • Vision bout en bout du traitement de la donnée
  • Connaissance des langages de programmation SQL, Python, Spark, Scala, R
Responsabilités
Responsabilités
  • Cadrer le projet en adéquation avec les enjeux métiers et IT par une co-construction avec l'ensemble des acteurs impliqués
  • Spécifier et concevoir les solutions
  • Piloter et coordonner le projet pour faciliter son exécution et développer une relation de confiance avec le client
  • Etre le référent technique des projets en apportant une expertise Data
  • Manager, challenger et coacher les équipes techniques et fonctionnelles sur l'ensemble des briques du projet
  • Assurer une veille technologie permanente et promouvoir les Best Practices
Lire la suite
Arrow Right