Aller au contenu
Toutes les missions
Veille marché · Freework Publiée il y a 1 semaine

Data Engineer Apache Iceberg / AWS / PySpark - F/H

Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer confirmé. Vous rejoignez une équipe qui construit un hub de données de...

Entreprise INGENIANCE
Mode Île-de-France

Résumé

<p>Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer confirmé. Vous rejoignez une équipe qui construit un hub de données de marchés sur AWS, avec Apache Iceberg comme format de stockage central. Un projet structurant, qui s&#039;inscrit dans la stratégie SI du client et interagit avec plusieurs grands programmes.<br /><br />Vos missions :<br />- Concevoir et mettre en œuvre les pipelines d&#039;ingestion depuis les référentiels de données de marchés.<br />- Structurer et modéliser des datasets cohérents à partir des référentiels sources.<br />- Exploiter Apache Iceberg : partitionnement, time travel, évolution de schéma, compaction.<br />- Développer les traitements de transformation et de chargement en Python / PySpark (EMR ou Glue ETL).<br />- Garantir la qualité et la traçabilité des données : lineage, contrôles de cohérence, gouvernance.<br />- Assurer la fiabilité en production : monitoring, alertes, reprises et gestion des incidents.<br />- Échanger avec les équipes métier, data et infrastructure.<br /><br />Vous êtes recruté en CDI cadre chez Ingéniance et rejoignez notre communauté d&#039;experts data.<br /><br />Ref : O-LPXHD</p>