Postée il y a 39 jours
Dans le cadre du développement de solutions analytiques et du traitement de données à grande échelle pour l'un de nos clients, nous recherchons un Data Engineer confirmé avec une expertise sur les technologies Spark, Scala et Python, ainsi qu'une solide compréhension du secteur de la finance.
Missions :
Concevoir, développer et maintenir des pipelines de données à grande échelle en utilisant Spark, Scala et Python.
Travailler sur des systèmes de traitement de données complexes dans un environnement Big Data.
Participer à l?intégration et l'optimisation des flux de données dans des environnements distribués.
Collaborer avec les équipes produit et business pour comprendre les besoins et les traduire en solutions techniques adaptées.
Assurer la qualité et la fiabilité des données avec des tests et des contrôles appropriés.
Apporter une expertise technique pour résoudre des problématiques complexes et proposer des améliorations.
Mettre en place des solutions de traitement en temps réel avec Apache Spark et optimiser les performances des systèmes.
Travailler avec des outils de gestion de données et des bases de données NoSQL et SQL.
Participer à des projets d'analyse de données financières et à des reporting pour les équipes business.
Profil candidat:
De formation Bac+5 minimum au sein d'une école d'ingénieur ou d'informatique, vous avez une expérience de 3 ans minimum en tant que Data Engineer Spark Scala Python confirmé