S'INSCRIRE

Offres d'emploi

Trouvez des postes près de chez vous, sur site, hybrides ou à distance.
  • Emplois similaires Ă  : Senior Cloud Data Engineer
XX
Senior Cloud Data EngineerProgi • Canada
Postuler Maintenant
XX

Senior Cloud Data Engineer

Progi
  • CA
    Canada
  • CA
    Canada
Postuler Maintenant

Ă€ propos

En tant que Senior Cloud Data Engineer chez Progi, vous serez responsable de la transformation et orchestration de la plateforme de données cloud , avec un focus particulier sur les couches Silver et Gold (BigQuery, Dataform, Cloud Composer) .

Votre rôle sera central dans l’évolution de notre plateforme vers un modèle data-driven avancé , incluant l’optimisation des coûts, la performance des pipelines et la mise en place des premières capacités en Machine Learning / AI en production .

Vous agirez en propriétaire end-to-end des pipelines de données (architecture medallion) et contribuerez activement à bâtir une plateforme robuste, performante et prête pour les usages analytiques et prédictifs.
Responsabilités principales

Ownership de la plateforme data (Medallion)

  • Concevoir, construire et maintenir les couches Silver et Gold dans BigQuery
  • Assurer l’implĂ©mentation complète d’une architecture Medallion (bronze / silver / gold)
  • Garantir la qualitĂ©, la cohĂ©rence et la scalabilitĂ© des datasets
Orchestration & pipelines
  • DĂ©velopper et maintenir des pipelines ELT/ETL avec Dataform et Cloud Composer
  • Orchestrer les workflows de transformation et de chargement de donnĂ©es
  • Assurer un monitoring fiable des pipelines en production
Ingestion de données
  • ImplĂ©menter des stratĂ©gies d’ingestion via :
    • APIs
    • Bases de donnĂ©es (MySQL, etc.)
  • Standardiser les flux d’ingestion pour assurer leur robustesse et leur rĂ©utilisabilitĂ©
Optimisation BigQuery (clé du rôle)
  • Optimiser les coĂ»ts et les performances des workloads BigQuery
  • Mettre en place des bonnes pratiques :
    • partitioning / clustering
    • query optimization
    • data lifecycle management
  • Suivre et amĂ©liorer en continu l’efficacitĂ© de la plateforme
Data & Machine Learning enablement
  • Collaborer Ă  la mise en place des premiers cas d’usage ML/AI
  • PrĂ©parer les donnĂ©es pour des pipelines de machine learning en production
  • Participer Ă  l’intĂ©gration avec les outils GCP liĂ©s au ML (ex : Vertex AI)
CI/CD & bonnes pratiques
  • Contribuer Ă  la mise en place et l’amĂ©lioration des pipelines CI/CD (Git, automatisation)
  • Appliquer les standards d’ingĂ©nierie modernes (tests, versioning, documentation)
Collaboration
  • Travailler Ă©troitement avec les Ă©quipes BI, produit et techniques
  • Participer Ă  la dĂ©finition des besoins analytiques et des modèles de donnĂ©es
  • Promouvoir une culture de data engineering orientĂ©e performance et valeur mĂ©tier
Profil recherché Expérience
  • Minimum 5 ans d’expĂ©rience en data engineering
  • Minimum 2 ans sur Google Cloud Platform (GCP)
Compétences techniques
  • Excellente maĂ®trise de :
    • SQL (avancĂ©)
    • Python
  • ExpĂ©rience solide avec :
    • BigQuery
    • Dataform
    • Cloud Composer
  • Bonne comprĂ©hension des architectures :
    • Data warehouse
    • Medallion architecture
Expérience pratique souhaitée
  • Construction de pipelines de donnĂ©es en production
  • Optimisation des coĂ»ts et performance BigQuery
  • Migration ou modernisation vers le cloud
  • ExpĂ©rience avec des projets de Machine Learning (atout fort)
Atouts
  • ExpĂ©rience avec CI/CD et Git
  • Connaissance des outils d’ingestion (API, bases transactionnelles)
  • ExpĂ©rience dans un environnement data Ă  forte volumĂ©trie
Ce qui différencie ce rôle
  • Ownership complet de la couche de transformation (pas juste builder)
  • Impact direct sur :
    • les coĂ»ts cloud
    • la performance data
    • la stratĂ©gie AI/ML
  • RĂ´le hybride Data Engineer + Data Platform + AI en devenir
La connaissance de l'anglais est essentiel afin d'accomplir sa prescription de travail avec les différentes parties prenantes.
  • Excellente maĂ®trise de :
    • SQL (avancĂ©)
    • Python
  • ExpĂ©rience solide avec :
    • BigQuery
    • Dataform
    • Cloud Composer
  • Bonne comprĂ©hension des architectures :
    • Data warehouse
    • Medallion architecture
  • ExpĂ©rience pratique souhaitĂ©e
    • Construction de pipelines de donnĂ©es en production
    • Optimisation des coĂ»ts et performance BigQuery
    • Migration ou modernisation vers le cloud
    • ExpĂ©rience avec des projets de Machine Learning (atout fort)
  • Canada

Compétences linguistiques

  • French
Avis aux utilisateurs

Cette offre provient d’une plateforme partenaire de TieTalent. Cliquez sur « Postuler maintenant » pour soumettre votre candidature directement sur leur site.

10'000+ emplois près de chez vous | TieTalent