Offre introuvable
Postée il y a 4 jours
Nous recherchons un Consultant TechLead GCP expérimenté en Data Engineering et DataOps, pour accompagner nos clients dans la conception, l'optimisation et la gestion de leurs solutions de données sur Google Cloud Platform (GCP).
Missions :
Data Engineering :
Concevoir et développer des pipelines de données performants sur GCP (BigQuery, Cloud Storage, Dataflow, etc.).
Développer des scripts Python pour automatiser les processus de traitement et transformation des données.
Implémenter des modèles et des transformations de données avec DBT et SQL.
Garantir la qualité des données et l?optimisation des performances des requêtes.
DataOps :
Déployer des solutions de DataOps sur Kubernetes et Docker pour assurer la scalabilité et la performance des applications.
Mettre en place des pipelines CI/CD sur GitLab pour automatiser l'intégration et le déploiement des solutions.
Utiliser Helm pour la gestion des applications dans Kubernetes et collaborer sur la mise en place de bonnes pratiques DevOps.
TechLead :
Accompagner équipes de développement, en les guidant sur les choix technologiques et les meilleures pratiques.
Coordonner les équipes techniques et collaborer avec les parties prenantes pour garantir la bonne avancée des projets.
Participer aux phases de conception, de tests, et de mise en production des solutions.
Compétences requises :
GCP : BigQuery, Dataflow, Cloud Storage, Composer, etc.
Data Engineering : Python, SQL, DBT, ETL, modélisation de données.
DataOps : Kubernetes, Docker, GitLab CI/CD, Helm, outils Cloud-native.
Profil candidat:
Nous recherchons un Consultant TechLead GCP expérimenté en Data Engineering et DataOps, pour accompagner nos clients dans la conception, l'optimisation et la gestion de leurs solutions de données sur Google Cloud Platform (GCP).
Missions :
Data Engineering :
Concevoir et développer des pipelines de données performants sur GCP (BigQuery, Cloud Storage, Dataflow, etc.).
Développer des scripts Python pour automatiser les processus de traitement et transformation des données.
Implémenter des modèles et des transformations de données avec DBT et SQL.
Garantir la qualité des données et l?optimisation des performances des requêtes.
DataOps :
Déployer des solutions de DataOps sur Kubernetes et Docker pour assurer la scalabilité et la performance des applications.
Mettre en place des pipelines CI/CD sur GitLab pour automatiser l'intégration et le déploiement des solutions.
Utiliser Helm pour la gestion des applications dans Kubernetes et collaborer sur la mise en place de bonnes pratiques DevOps.
TechLead :
Accompagner équipes de développement, en les guidant sur les choix technologiques et les meilleures pratiques.
Coordonner les équipes techniques et collaborer avec les parties prenantes pour garantir la bonne avancée des projets.
Participer aux phases de conception, de tests, et de mise en production des solutions.
Compétences requises :
GCP : BigQuery, Dataflow, Cloud Storage, Composer, etc.
Data Engineering : Python, SQL, DBT, ETL, modélisation de données.
DataOps : Kubernetes, Docker, GitLab CI/CD, Helm, outils Cloud-native.