Data Engineer Senior Scala / Spark / Hadoop / Databricks (H/F)

-

• Participer à la conception des architectures Data et aux choix techniques.

• Assurer l’orchestration des flux de données et l’industrialisation des traitements.

• Mettre en œuvre les pratiques CI/CD et les processus de déploiement.

• Réaliser les tests unitaires, garantir la qualité du code et contribuer aux mises en production.

• Participer à l’optimisation des performances et à la fiabilisation des traitements.

• Collaborer avec les équipes techniques et métiers dans un environnement Agile.

• Contribuer à la résolution des incidents et à l’amélioration continue des pipelines de données.

Environnement techniqueCompétences indispensables :

• Scala

• Apache Spark

• Hadoop

• Databricks

Compétences complémentaires :

• PySpark et Python

• AWS

• Apache NiFi

• Shell Unix

• Git / GitHub

• CI/CD et industrialisation des traitements Data

Profil recherché

Profil recherché

• Expérience confirmée en ingénierie Data et développement Big Data.

• Excellente maîtrise de Scala et Spark, avec une expérience significative en développement et optimisation de traitements distribués.

• Solide expérience des écosystèmes Hadoop et Databricks.

• Bonne compréhension des architectures Big Data et de la conception de pipelines de données.

• Maîtrise des pratiques de développement, de tests et d’industrialisation.

• Capacité à intervenir en autonomie, avec rigueur et esprit d’équipe.

• Anglais professionnel indispensable pour collaborer dans un environnement international.

• Une expérience dans le secteur bancaire, notamment sur les périmètres Finance et Risques, constitue un atout.

Compétences clés pour le sourcingData Engineer Senior | Scala | Spark | Hadoop | Databricks | Big Data | PySpark | AWS | CI/CD | Banque / Finance / Risques