Cloud Data Engineer Azure Freelance

Les missions du poste

En quelques mots

Cherry Pick est à la recherche d'un "Data Azure Engineer" pour un client dans le secteur de l'énergie.

Description

Contexte

Au sein de notre équipe Data Platform, vous interviendrez avec d'autres Data Engineers et

DevOps dans les activités de création et d'interaction avec des solutions de Data Lake (Gen 2),

de maintien et d'évolution du processus de déploiement automatisé avec Terraform, de

développement de microservices en Python, et de monitoring et d'exploitation de la Data

Platform. Vous aurez une expérience significative sur l'environnement des données en Cloud

(Azure), en particulier sur les services de données : ADLS Gen 2, Data Factory, WebApp, VNET,

NSG. Une expérience sur AWS (S3, VPC) est un plus.

Missions

Développement et gestion de la data plateforme

• Concevoir, déployer et maintenir une architecture Data Lake (Gen 2) sur Azure.
• Développer des pipelines de données avec Azure Data Factory et Databricks.
• Assurer le monitoring et l’exploitation de la Data Platform.

Automatisation et Infrastructure-As-Code

• Mettre en place et améliorer les déploiements automatisés avec Terraform.
• Gérer les environnements cloud (Azure et AWS en option) via Docker, Kubernetes, VNET, NSG.

Développement de Microservices et intégrations

• Développer des microservices en Python pour interagir avec les données.
• Concevoir des APIs et services pour faciliter l’accès aux données

Sécurité et optimisation

• Implémenter des meilleures pratiques DevOps et Software Craftsmanship.
• Optimiser la performance des traitements de données.
• Sécuriser l’infrastructure et les accès aux données.

Collaboration et méthodologie agile

• Travailler en méthodologie Agile (Scrum, Kanban).
• Collaborer avec les équipes Data, DevOps et les parties prenantes pour répondre aux besoins métiers.
• Être force de proposition et assurer une veille technologique continue.

Compétences réquises

• Expertise en Microsoft Azure et Azure Data Factory
• Avancé en Databricks et Data Engineering
• Expertise en Terraform et Docker
• Bonne connaissance de la méthodologie Agile
• Expérience significative sur le cloud Azure et/ou AWS, notamment sur les services de

données (Gen2 et ou S3).

• Connaissance des pratiques du software craftsmanship.
• À l'aise dans les interactions avec les parties prenantes.
• Force de proposition et désireux(se) d'apprendre en continu.

Profil recherché

5 à 8 ans d'expérience en Data Engineering, DevOps ou Cloud Computing, avec une spécialisation sur Azure.

Expérience significative dans des environnements Data Lake / Data Platform.

Expérience avec le développement de microservices en Python.

Expérience avec Terraform et Docker pour l'automatisation et l'infrastructure-as-code.

Une expérience sur AWS (S3, VPC) est un plus, mais pas obligatoire.