VISIAN
Postée il y a 4 jours
Bonjour,
Dans le cadre de ses projets clients, Visian est à la recherche d'un Data Engineer Python/Spark/Deltalake.
Tâches:
Conception, de?veloppement et de?ploiement des pipelines de donne?es efficaces pour l?extraction, la transformation et le chargement (ETL) des donne?es,
- Collaboration avec les e?quipes me?tier pour comprendre les besoins en matie?re de donne?es et proposer une solution adapte?e,
- Etablissement des spe?cifications techniques a? partir des besoins,
- Mise en place de la collecte et la mise a? disposition des donne?es,
- Garantie de la se?curisation des pipelines de donne?es de?ploye?s,
- Analyse et transformation des donne?es pour re?pondre aux besoins des me?tiers,
- Industrialisation et automatisation de la transformation des donne?es suivants les spe?cifications de?finies,
- De?veloppement et maintien des batchs d?automatisations de traitement,
- Suivi de la production et la maintenance,
- De?veloppement de l?industrialisation de mode?les statistiques,
- De?veloppement des dashboards en lien avec les attentes du me?tier,
- Re?daction et maintien de la documentation relative aux bases de donne?es et a? leur exploitation,
- Accompagnement des citizens developers dans leur prise en main de la plateforme data in-house.
Si vous êtes actuellement à l'écoute du marché, je vous invite à m'envoyer votre candidature.
Bien à vous,
Nadia
Profil candidat:
Data Engineer avec une excellente maîtrise de :
- L' Architecture globale du data lakehouse
- La Conceptualisation des bases de donne?es
- La Conception des data pipelines
- L' Exploitation des donne?es
Et une bonne maîtrise des outils suivants: Python, Pandas, SQL, Dagster, Spark, DeltaLake, Apache Parquet