Data Engineer GCP (Pub/Sub, DBT)

Morocco · 5 months ago

About the job

Description du poste Le/la consultant(e) aura pour responsabilités : • Développement et maintenance des pipelines de transformation de données avec DBT. • Manipulation et traitement de gros volumes de données via BigQuery et SQL avancé. • Gestion des flux de données et intégration avec Pub/Sub. • Automatisation des workflows data via GitLab CI/CD et Docker Compose. • Développement de traitements batch pour l’alimentation et l’export des flux de données. • Mise en production des IHM génériques via inserts SQL. • Développement de scripts Shell Bash dans un environnement Linux. • Utilisation du framework interne Carrefour (Génépi). • Collaboration avec l’équipe Flux dans un environnement...