Senior Data Engineer - Microsoft Azure & Fabric
Senior Data Engineer at Bravent, a Microsoft-focused consultancy in Spain, building end-to-end data platforms on Azure (Data Factory, Databricks, Functions, Fabric): ETL/ELT pipelines, data warehouse modeling, and Power BI analytics, with optional generative AI on data. Remote work and a 36-hour flexible week.
- Compensation
- Not disclosed
- Location
- Spain
- Work setup
- Hybrid
- Seniority
- Senior
- Employment
- Not specified
- Experience
- Not specified
- Category
- Data engineering
- Posted
Skills
Must have
- 4–8 years developing data integration and analytics solutions
- Microsoft Azure and Microsoft Fabric experience
- Azure Data Factory: pipelines, heterogeneous source integration, parameters/variables, control flow, triggers, monitoring, Integration Runtime
- Azure Databricks: notebooks, Spark/PySpark, batch and near real-time processing, performance optimization, Lakehouse architectures
- Azure Functions: serverless development, process orchestration, API and event integration
- ETL/ELT process development and multi-source data ingestion
- Semi-structured data processing (JSON, XML, CSV, Parquet), error handling and retries, auditing and traceability
- Relational modeling, Data Warehouse, star and snowflake schemas, query optimization, indexes and partitioning, stored procedures, large data volumes
- Advanced Pandas and data processing/modeling/transformation
- Dataflows development
- Power BI: semantic modeling, advanced DAX, Power Query, executive dashboards, performance optimization, RLS security, model publishing and governance
- Participation in end-to-end projects: ingestion, transformation, modeling, analytical exploitation
- Experience working with large volumes of data
- Agile methodologies (Scrum / Kanban)
- Version control with Git and Azure DevOps
Nice to have
- Data Agents / generative AI solutions applied to corporate data
Full description
Bravent es una empresa especializada en tecnologías Microsoft donde se impulsa la innovación y, sobre todo, el entorno colaborativo. Buscamos incorporar un/una Senior Data Engineer - Microsoft Azure & Fabric con la siguiente experiencia y conocimientos:
Plataforma de datos Microsoft Azure:
- Azure Data Factory (ADF): Creación y mantenimiento de pipelines, integración de fuentes heterogéneas, parameters, variables y control de flujo, triggering y monitorización de procesos, Integration Runtime.
- Azure Databricks: Desarrollo de notebooks, Spark y PySpark, procesamiento batch y near real-time, pptimización de rendimiento, arquitecturas Lakehouse.
- Azure Functions: Desarrollo de funciones serverless, orquestación de procesos, integración con APIs y eventos.
Diseño y desarrollo de procesos ETL / ELT
- Desarrollo de procesos ETL y ELT.
- Ingesta de datos desde múltiples orígenes.
- Procesamiento de datos semiestructurados: JSON, XML, CSV, Parquet.
- Gestión de errores y reintentos.
- Auditoría y trazabilidad de procesos.
Bases de datos:
Con conocimientos en: Modelado relacional, Data Warehouse, Star Schema y Snowflake Schema, Optimización de consultas, Índices y particionamiento, Procedimientos almacenados, Gestión de grandes volúmenes de datos.
Lenguajes de programación
Nivel avanzado en:
- Pandas
- Procesamiento de datos
- Procedimientos almacenados
- Funciones
- Modelado y transformación de datos.
- Desarrollo de Dataflows.
Business Intelligence y Analítica
- Power BI: Modelado semántico, DAX avanzado, Power Query, Diseño de dashboards ejecutivos, Optimización de rendimiento, Seguridad RLS, Publicación y gobierno de modelos.
Valorable experiencia es Data Agents / IA aplicada al dato:
- Soluciones de IA generativa sobre datos corporativos.
Experiencia requerida
- Entre 4 y 8 años en desarrollo de soluciones de integración y analítica de datos.
- Participación en proyectos end-to-end: Ingesta, transformación, modelado, explotación analítica.
- Experiencia trabajando con grandes volúmenes de información.
- Metodologías Agile (Scrum / Kanban).
- Control de versiones con Git y Azure DevOps.