Skip to content
Toutes les missions
Veille marché · Freework Publiée 2 weeks ago

Data Engineer Scala / Python / Spark (H/F)

Ne postulez pas si vous ne justifiez pas d'au moins 5 ans d'expérience et d'une parfaite maîtrise de Python et de Spark.Contexte de la missionDans le cadre du renforcement de...

Entreprise JEMS
Mode Remote

Résumé

<p></p><p>Ne postulez pas si vous ne justifiez pas d&#039;au moins 5 ans d&#039;expérience et d&#039;une parfaite maîtrise de Python et de Spark.</p>Contexte de la mission<p>Dans le cadre du renforcement de ses équipes Data, notre client, acteur majeur du secteur des services financiers, recherche un <strong>Data Engineer Scala ou Python / Spark</strong>.</p><p>Vous intégrerez une équipe technique en charge de la conception, du développement et de la maintenance de solutions de traitement et d&#039;exploitation de données à grande échelle.</p>Missions principales<ul><li><p>Concevoir, développer et maintenir des pipelines de traitement de données.</p></li><li><p>Développer des traitements distribués avec Apache Spark en Scala ou Python.</p></li><li><p>Participer à la collecte, à la transformation et à l&#039;intégration de données provenant de différentes sources.</p></li><li><p>Optimiser les performances et la fiabilité des traitements Data.</p></li><li><p>Garantir la qualité, la cohérence et la disponibilité des données.</p></li><li><p>Participer à l&#039;industrialisation et à l&#039;automatisation des flux de données.</p></li><li><p>Collaborer avec les équipes Data, IT et métiers.</p></li><li><p>Contribuer aux bonnes pratiques de développement, de documentation et de mise en production.</p></li></ul>Compétences techniques requises<ul><li><p>Bonne maîtrise de <strong>Scala ou Python</strong>.</p></li><li><p>Expérience significative avec <strong>Apache Spark</strong>.</p></li><li><p>Bonne connaissance des architectures et traitements Big Data.</p></li><li><p>Maîtrise des concepts ETL / ELT et des pipelines de données.</p></li><li><p>Bonne compréhension des bases de données SQL.</p></li><li><p>Connaissance des environnements distribués.</p></li><li><p>Utilisation de Git et des bonnes pratiques de développement.</p></li></ul><p></p>