DATA Engineer GCP 2

KEONI CONSULTING

Paris, Île-de-France, France

Paris, Île-de-France, France

Postuler Maintenant

À propos

CONTEXTE : L quipe est compos e d un product owner, d un data steward et de deux autres data ing nieurs. Le stack technique est principalement constitu de Python, Spark, SQL pour les traitements de donn es, Airflow pour l orchestration et Cloud Storage et Delta lake pour le stockage. La stack inclut aussi les services BigQuery, Dataproc, PubSub et Cloud Storage de la Google Cloud Platform et Terraform et Terragrunt pour la gestion de l infrastructure MISSIONS : 1. Collecter et centraliser les diff rentes sources de donn es non homog nes 2. Assurer la conformit et la s curit des donn es 3. Participer aux initiatives de gouvernance des donn es Participer activement aux diff rentes phases de conception, de planification et de r alisation des t ches avec l quipe Construire et maintenir de pipelines data robustes et scalables Accompagner les membres de l quipe dans l exploitation et le requ tage des donn es Organiser et structurer le stockage des donn es Mettre en place et maintenir des infrastructures scalables capable de r pondre aux besoins et l accroissement rapide du volume de donn es Construire et maintenir les workflows de la CI/CD Partager avec les autres data ing nieurs pour appliquer les bonnes pratiques en vigueur Assurer l volutivit , la s curit , la stabilit des environnements Participer aux diff rentes instances des data ing nieurs Contribuer et veiller la mise jour de la documentation Faire de la veille technologique active dans le domaine Expertises demand es pour la r alisation de la prestation : Au moins 5 ans d exp rience en tant que Data Ing nieur dans un environnement data Comp tences solides en data : structures de donn es, code, architecture Exp riences dans la conception et la r alisation de pipelines data Exp riences dans un environnement du cloud Google (GCP) Exp riences int grant BigQuery et Dataplex Universal Catalog Exp riences int grant les langages Python et SQL Exp riences int grant Spark Exp riences int grant delta lake Exp riences int grant Terraform et Terragrunt Exp riences int grant Gitlab et Gitlab CI/CD Exp riences int grant les m thodologies Agile : Scrum ou Kanban Capacit vulgariser et communiquer sur des aspects purement techniques Profil candidat: Au moins 5 ans d exp rience en tant que Data Ing nieur dans un environnement data Comp tences solides en data : structures de donn es, code, architecture Exp riences dans la conception et la r alisation de pipelines data Exp riences dans un environnement du cloud Google (GCP) Exp riences int grant BigQuery et Dataplex Universal Catalog Exp riences int grant les langages Python et SQL Exp riences int grant Spark Exp riences int grant delta lake Exp riences int grant Terraform et Terragrunt Exp riences int grant Gitlab et Gitlab CI/CD Exp riences int grant les m thodologies Agile : Scrum ou Kanban Capacit vulgariser et communiquer sur des aspects purement techniques

Paris, Île-de-France, France

Compétences linguistiques

French

Avis aux utilisateurs

Cette offre provient d’une plateforme partenaire de TieTalent. Cliquez sur « Postuler maintenant » pour soumettre votre candidature directement sur leur site.

Postuler Maintenant