Octopus Group
Lead Data Engineer - Python/AWS/DevOps/ Big Data/ Linux / Energie (F/H) (IT) / FreelanceOctopus GroupFrance, Nouvelle-Aquitaine, France
Octopus Group

Lead Data Engineer - Python/AWS/DevOps/ Big Data/ Linux / Energie (F/H) (IT) / Freelance

Octopus Group
  • FR
    France, Nouvelle-Aquitaine, France
  • FR
    France, Nouvelle-Aquitaine, France

About

Nous recherchons pour le compte de notre client grand-compte dans l Energie, un Lead data Engineer. Objectifs : Etre le/la r f rent(e) technique de la plateforme de donn es - coordination technique transverse Etre r f rent principale sur un sujet pilote D finir, mettre en uvre et automatiser des pipes des donn es et gouvernance Assurer le Run notamment la MCO, la CI / CD et la mise en production en coordination avec l quipe r f rente Pr parer les pipelines Data en coordination avec l architecte et le manager Avoir un sens exp rimental et de proposition dans un contexte Multi cloud est un atout majeur Missions : Etre le/la r f rent(e) technique de la plateforme de donn es Etre garant(e) du socle technique de la plateforme data et de son volution, D finir les besoins techniques, la roadmap d volution du socle technique de la plateforme de donn es pour suivre ses changements d chelle et garantir ses performances et sa maintenabilit , Etre mentor et r f rent pour les membres de l quipe, Participer aux choix de nos partenaires. Le dev de devops : d finir, mettre en uvre et automatiser des pipes des donn es et gouvernance Mettre en place des projets Data Lake (ingestion de sources, pipeline de traitements de donn es, mod lisation, tests, d ploiements) dans la meilleure architecture, D finir les meilleures de fa on de stocker exposer les donn es au sein de la plateforme selon les usages attendus, Garantir la qualit des donn es en mettant en place les outils de mesure et de suivi ad quats, R aliser les d veloppements en ayant int gr les besoins et pratiques des analystes et data scientists. run et environnements Maintenir les environnements techniques et partager vos connaissances, G rer les incidents et s assurer de leur r solution dans une logique d am lioration continue et d automatisation (ex : rejeu de donn es), Assurer la supervision des traitements (technique et fonctionnelle). Profil candidat: Un minimum de 8 ans d exp rience dans le domaine de la Data engineering avec une orientation DevOps ou quivalent Dipl me d ing nieur dans un domaine orient Data ou quivalent Une premi re exp rience dans le domaine des services nerg tique est une pr f rence Cloud : AWS (Redshift, RDS, Lambda, SQS, SNS, Api Gateway, etc.), GCP DEV : Python, API (Fast ou Flask), GraphQL, Airflow, Linux, Git (Code review, Merge Request, etc.), Docker DevOps : Docker, Terraform, CI/CD, Gitlab, Gitlab CI, etc. Excellentes comp tences DATA : BDD, SGBDR, DataWarehouse,SQL, NOSQL BIGDATA : HDFS, SPARK, Hadoop, etc. Data Science (Mod lisation, MLOPS) Notions : Scalabilit , Clustering, Data Mesh, Data Virt, Data Qualit , etc. Excellente comp tences Analytique : Tableau, Dataiku, Alteryx, etc.
  • France, Nouvelle-Aquitaine, France

Languages

  • French
Notice for Users

This job comes from a TieTalent partner platform. Click "Apply Now" to submit your application directly on their site.