En collaboration avec l’architecte data, les experts data et le gestionnaire/propriétaire produit, vous serez amené à participer aux opérations et à l’implémentation de la roadmap technique de la plateforme d’orchestration. Voici vos missions :
- Participer au cycle de développement du produit Airflow,
- Assurer l’implémentation/développement de l’outillage et des fonctionnalités de la plateforme nécessaires avec accord de l’Architecte Data et les experts Data du groupe,
- Contribuer au développement des graphes orientés acycliques (DAG) nécessaires à la bonne opérabilité des plateformes datalake et datamart (AWS et Snowflake),
- Assurer le rôle de support technique auprès des end-users lors de leur usage de la plateforme,
- Assurer les livraisons et déploiement du code,
- Assurer le mode run de la plateforme,
- Support niveau 2 expertise de la production et participation aux situations de crises,
- Reporter au gestionnaire de la plateforme Airflow, les performances IT, l’état de santé temps réel et principaux risques opérationnels de la plateforme,
- Contribuer à la communauté Data Orchestration,
- Produire la documentation nécessaire à ce passage de connaissance : tuto, document d’exploitation, etc…
- Assurer et animer les sessions de transfert de connaissances au travers de démos produit.
- Vous avez un diplôme d’ingénieur ou un Bac+5 équivalent
- Vous avez 3 ans d'expérience en tant que Data Engineer
- Vous avez une bonne conne connaissance de l'environnement cloud AWS
- Vous avez une bonne maitrise de l'Orchestration des processus, notamment avec Airflow
- Vous êtes familier avec les principes ETL/ELT
- Vous avez déjà travaillé avec la méthodologie Agile Scrum/Kanban