Data Engineer ICT BRM ICT & Big Data
Experienced Data Engineer joining Infrabel's BRM ICT & Big Data team in Brussels, building and operating reusable data services that support the digitalization of Belgian rail assets. Day-to-day work centers on Elasticsearch (search, indexing, monitoring), Kafka real-time pipelines, the Cloudera data platform, data modeling, and documentation in Confluence.
- Compensation
- Not disclosed
- Location
- Not listed
- Work setup
- Not specified
- Seniority
- Not specified
- Employment
- Not specified
- Experience
- Not specified
- Category
- Data engineering
- Posted
Skills
Must have
- Master's degree in computer science, data engineering, or equivalent experience
- Several years of relevant experience as a Data Engineer or in a comparable role
- Excellent command of Elasticsearch (indispensable requirement)
- Experience with Kafka
- Experience with Cloudera
- Experience with Confluence
- Solid knowledge of databases, data integration, and data architecture
- Proficiency in SQL, ideally plus Python
- Fluent in French or Dutch with functional knowledge of the other national language; technical English
- Structured and analytical way of working; curious and proactive in proposing improvements
- Strong communication with technical and business stakeholders; enjoys sharing knowledge; combines autonomy with teamwork; focus on quality, reliability, and performance
Nice to have
- Experience with Power BI
- Experience with cloud environments and platforms
Full description
LE TRAVAIL
Les données jouent un rôle essentiel dans l’avenir du rail. Au sein d’I-ICT, tu contribues à la digitalisation de l’ensemble du cycle de vie des actifs ferroviaires et aides Infrabel à transformer les données en informations concrètes et en solutions digitales performantes.
Tu es un Data Engineer expérimenté avec une solide expertise en Elastic Search ? Tu as également déjà travaillé avec des technologies telles que Kafka, Cloudera et Confluence ? Alors tu es peut-être le collègue que nous recherchons.
Tu travailles au sein de la Direction ICT.415 et rapportes au Team Lead.
Tes tâches:
En tant que Data Engineer, tu fais partie de l’équipe BRM ICT & Big Data. Cette équipe développe et gère des services de données réutilisables qui soutiennent les différents domaines métier d’Infrabel dans leur transformation digitale.
Tu participes à des solutions liées notamment à la cartographie, à la géolocalisation, à la gestion de flotte, à la gestion du patrimoine et à de futures applications d’intelligence artificielle.
Tes principales responsabilités :
- Tu collectes, transformes, intègres et valides des données provenant de différentes sources afin de garantir aux utilisateurs des informations fiables, complètes et actualisées.
- Tu prépares les données pour l’analyse, le reporting et les applications opérationnelles, avec un fort accent sur l’automatisation, la performance et la réutilisabilité.
- Tu développes, maintiens et optimises des modèles de données, des bases de données et des structures de stockage afin de garantir un traitement efficace et fiable des informations.
- Tu joues un rôle clé dans la conception, la gestion et l’optimisation de solutions de recherche basées sur Elastic Search. Tu développes des mécanismes performants d’indexation, de recherche et de monitoring afin de rendre les données rapidement accessibles de manière efficace et conviviale.
- Tu travailles avec des flux de données en temps réel et des pipelines de données via Kafka afin de traiter les informations de manière fiable et évolutive.
- Tu contribues au développement et à l’optimisation de la plateforme de données dans l’environnement Cloudera.
- Tu rédiges et maintiens la documentation technique, les procédures, les dictionnaires de données et les documents d’architecture dans Confluence afin d’assurer le partage des connaissances et de l’expertise au sein de l’organisation.
- Tu analyses de manière critique l’architecture des données et les techniques de stockage utilisées et élabores, avec les parties prenantes, des propositions visant à automatiser, simplifier et pérenniser les processus.