Aller au contenu
Toutes les missions
Veille marché · Freework Publiée il y a 1 mois

Data Engineer Senior Lead Python / PySpark / AWS - F/H

Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer Senior à posture de lead, pour porter une plateforme de données AWS la...

Entreprise INGENIANCE
Mode Remote

Résumé

<p>Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer Senior à posture de lead, pour porter une plateforme de données AWS lancée from scratch pour une équipe des marchés actions.<br /><br />Chaque nuit, des batchs produisent des prix, des sensibilités et du PnL sur plusieurs centaines de millions de lignes. Les équipes métier connaissent ces données, mais ont besoin d&#039;un expert pour construire des pipelines industriels. Vous pilotez le projet au quotidien, en appui du Tech Lead qui valide les grandes orientations.<br /><br />Vos missions :<br />- Porter le projet de bout en bout : cadrage avec le métier, découpage, priorisation et plan de livraison.<br />- Proposer et défendre les choix d&#039;architecture, et arbitrer en autonomie.<br />- Encadrer deux développeurs (un junior, un confirmé) : standards de code, revues, montée en compétences.<br />- Définir la stratégie de refactoring d&#039;un projet existant, priorisée par risque et par valeur.<br />- Construire un framework commun piloté par configuration et développer les pipelines Python / PySpark sur AWS Glue.<br />- Orchestrer avec Step Functions et EventBridge, organiser le stockage S3 (Parquet ou Iceberg) et l&#039;exposition via Glue Data Catalog et Athena.<br />- Mettre en place la qualité des données et le monitoring, et optimiser performances et coûts.<br />- Industrialiser avec l&#039;équipe DevOps : Terraform, CI/CD, tests.<br /><br />Vous rejoignez Ingéniance en CDI et intégrez une communauté d&#039;experts de la data et de la finance de marché.<br /><br />Ref : O-SIYUA</p>