Data Engineer Python
Digital - Data
Master
Work experience: 5-7
Reference number: 91640

Nous sommes à la recherche deux consultants de haut niveau spécialisés en Data Engineering, disposant d’une expertise approfondie dans les technologies Python, Data, GenAI, AWS (Kinesis, S3, EMR, etc.), Airflow, Terraform, GitLab CI/CD, Python ainsi qu’une solide maîtrise de SQL, Snowflake et les architectures Data Streaming. Une expertise en Scala et Spark serait fortement appréciée.

Il sera chargé de concevoir et développer des pipelines de données, développer sur des chatbots AI dans un environnement cloud tout en contribuant activement à la fiabilité, l’automatisation et la scalabilité de notre plateforme data.

Le contexte:

L'un des objectifs majeurs du plan de transformation DATA de notre client est de développer les applications DATA qui permettent à nos métiers businness (pilotage, marketing, commerce, ...) d'être autonomes dans l'analyse des données et des KPI 

Dans ce cadre, notre client a déployé les outils : AWS, Gitlab, Terraform, DBT, Snowflake, Braze, AI, Python, Scala, Spark, Python, POWERBI, .etc.

Architectures sophistiquées pour ingérer plus de 100To de données par jours: Datalake, Event-Driven, Streaming, etc. 

Des exemples de projets sont nombreux: 

- Chatbot AI

- Socle vidéo, navigation et calcul des audiences

- AI pour recommandation des programmes .etc.

- Feature Store

- Moderniser les flux financiers

- Content Platform

- Mise en place Kubernetes

- Plateforme pour le traitement des données CRM et usage

- Partager des informations sur les clients à nos partenaires (Netflix, Apple, M6, TF1, etc.)

- Piloter plus efficacement l'activité des marchés profesionnels

- Mettre à disposition des applications de data-selfservice

Votre rôle sera de :

- Faire des développements avanacés en Python

- Mettre en place des systèmes basés sur la GenAI

- Concevoir, développer, maintenir et déployer des pipelines de données scalables et performants.

- Mettre en place des architectures Big Data sur AWS (S3, EMR, Lambda, Snowflake...).

- Développer en Scala et exploiter Apache Spark pour le traitement massif des données.

- Automatiser les workflows avec Apache Airflow et DBT pour orchestrer les pipelines.

- Concevoir et exposer des APIs performantes (ecommandations en temps réel, etc.)

- Optimiser les performances et garantir la scalabilité du système pour gérer un grand volume d’utilisateurs.

- Travailler en collaboration avec les équipes Data Science, Produit et DevOps pour assurer une intégration fluide.

What are we looking for?

Compétences et qualités attendues : 

- Vous justifiez d’une expérience de 5 ans minimum dans un environnement similaire

- Vous maîtrisez AWS, Gitlab CI/CD, Terraform, vous êtes fluent en Python avancé et aimez les challenges

- Vous etes experts dans le développement de solution d'intégration de données.

- Vous parlez Anglais couramment 

- Vous connaissez et maîtrisez les outils JIRA et les méthodes « agiles » n’ont pas de secret pour vous !

- Autonome, ouvert d’esprit et bon communiquant, vous disposez d’une grande curiosité scientifique

What do we offer?

  • Enjoy a competitive salary package with extra perks that recognize your talent.
  • Advance your career with a clear growth path, coaching, and mentoring to support you.
  • Thrive in a dynamic and supportive environment where you can truly make an impact.
  • Work when and where you perform best, ensuring an optimal work-life balance.
  • Choose a flexible transport solution, from a company car to a public transport subscription.
  • Expand your network and enjoy unforgettable moments at exclusive events and afterworks.
  • Grow your skills with external courses and our in-house Pauwels Academy.
  • Work on exciting projects with industry leaders in Life Sciences, Engineering & Digital.
  • Seize opportunities at every level, from a strong start to career acceleration and expert collaboration.

Vacancies that may also interest you

Valeria Romero
Talent Acquisition Expert France
We are a Great Place to Work
We evaluate our work environment with a survey and audit and have been allowed to call ourselves a Great Place to Work and Best Workplace for five years in a row now.
We are a Great Place to Work