Data Engineer / Référent technique (H/F) | Paris, FR | Hybride
Senior data engineer and technical lead at INVIVOO (a 200+ person consulting partner to financial institutions), building a multi-country big-data platform for a large international group: designing ingestion, processing, and distribution components, improving the CI/CD and monitoring framework, and mentoring a small team of three developers. Core stack: Python, Spark/PySpark, AWS.
- Compensation
- Not disclosed
- Location
- Paris, France
- Work setup
- Not specified
- Seniority
- Not specified
- Employment
- Not specified
- Experience
- Not specified
- Category
- Data engineering
- Posted
Skills
Must have
- Solid experience in Python (design, testing, development best practices)
- Mastery of Spark / PySpark for large-scale data processing and transformation
- Mastery of data engineering challenges: big data architecture, modeling, optimization, distributed environments
- Knowledge of AWS cloud
- Good understanding of monitoring, CI/CD, performance and software quality
- Confirmed experience as a Data Engineer in a Big Data / Python / Spark / Cloud environment
- Experience as technical lead for a small team of developers
- Proven communication skills and good command of English
- Ability to work in a team, with adaptability and collaborative spirit
Full description
Contexte
Créée en 2004, INVIVOO est le partenaire technologique et historique des institutions financières depuis plus de 20 ans. Nous mobilisons nos expertises technologiques et métiers au service de nos clients pour les accompagner dans le secteur de la banque, finance et de l'assurance. Nous sommes plus de 200 collaborateurs, ambassadeurs de nos valeurs : proximité, engagement, questionnement, plaisir.
Projet
Nous recherchons un Data Engineer Senior (H/F) pour intervenir sur un projet stratégique Big Data pour un grand groupe international. L'objectif de ce projet est de développer une plateforme de données robuste et évolutive, capable de gérer un volume conséquent d'informations à l'échelle multi-pays. Cette plateforme permettra de centraliser et standardiser des indicateurs clés afin d'offrir des vues transverses et unifiées aux différentes entités du groupe.
Dans ce cadre, vous serez amené(e) à :
- Concevoir et développer les composants clés de la plateforme : ingestion, traitement/normalisation et distribution des données
- Participer à la mise en place et à l'amélioration d'un framework incluant : monitoring, CI/CD, tests, performance, résilience, bonnes pratiques de développement et qualité du code
- Garantir le respect des directives d'architecture et des frameworks internes
- Collaborer avec les différentes parties prenantes du projet pour promouvoir les bonnes pratiques et proposer des solutions transverses
- Encadrer techniquement une petite équipe de développeurs (3 personnes)
L'équipe est principalement basée à Paris, avec des déplacements ponctuels possibles en région et à l'international.
Environnement technique
- Solide expérience en Python (conception, tests, bonnes pratiques de développement)
- Maîtrise de Spark / PySpark pour le traitement et la transformation de données à grande échelle
- Maîtrise des problématiques de Data Engineering : architecture Big Data, modélisation, optimisation, environnements distribués
- Connaissance du cloud AWS
- Bonne compréhension des enjeux de monitoring, CI/CD, performance et qualité logicielle
Profil recherché
- Expérience confirmée en tant que Data Engineer dans un environnement Big Data / Python / Spark / Cloud
- Capacité démontrée à travailler en équipe, avec adaptabilité et esprit collaboratif
- Compétences avérées en communication et bonne maîtrise de l'anglais
- Expérience en lead technique auprès d'une petite équipe de développeurs
Processus de recrutement
- Une préqualification téléphonique
- Un entretien RH avec un(e) chargé(e) de recrutement
- Un entretien technique avec un(e) consultant(e) senior