Data Engineer Semi Senior
Semi-senior data engineer designing, building and optimizing batch and streaming data pipelines on Google Cloud Platform — BigQuery data models, Cloud Composer (Airflow) orchestration, and Dataflow/dbt transformations — while collaborating with analytics, BI and business teams. Based in Santiago, Chile.
- Compensation
- Not disclosed
- Location
- Santiago, Chile
- Work setup
- Not specified
- Seniority
- Middle
- Employment
- Not specified
- Experience
- Not specified
- Category
- Data engineering
- Posted
Skills
Must have
- 2-4 years of experience as a Data Engineer or similar roles
- Hands-on experience working with Google Cloud Platform (GCP)
- BigQuery
- Cloud Storage
- Cloud Composer / Airflow
- Dataflow / Apache Beam
- Pub/Sub
- Advanced SQL including CTEs, window functions and BigQuery query optimization
- Python for data processing, DAG development and GCP client libraries
- Dimensional data modeling and Data Warehouse / Data Lakehouse concepts
- Git and CI/CD workflows such as Cloud Build, GitHub Actions or GitLab CI
- Data formats such as Parquet, Avro and JSON
- Integration patterns such as REST APIs, CDC and incremental loads
- Degree in Systems Engineering, Computer Engineering, Computer Science, Software Engineering or related field
- Effective communication with technical and non-technical teams
- Autonomy to solve medium-complexity technical problems
- Analytical thinking and attention to detail
- Ability to work in agile environments using Scrum or Kanban
Nice to have
- Google Cloud Professional Data Engineer or Associate Cloud Engineer certification
- Experience with Dataform or dbt
- Knowledge of Terraform and infrastructure as code
- Experience with Dataproc / Spark
- Exposure to visualization tools such as Looker or Looker Studio
- Experience in regulated industries such as financial services, social security or healthcare
- Knowledge of data governance and personal data protection
- Experience or notions of enabling data for AI/ML solutions and Vertex AI
Full description
Buscamos un/a Data Engineer Semi Senior para integrarse a un equipo enfocado en la construcción y evolución de soluciones de datos sobre Google Cloud Platform (GCP).
El desafío estará orientado al diseño, desarrollo y optimización de pipelines batch y streaming, modelos de datos en BigQuery y procesos de integración y transformación, asegurando soluciones confiables, escalables, trazables y eficientes en costos.
Trabajarás de manera colaborativa con equipos de Analítica, BI, TI y Negocio, transformando necesidades de información en soluciones de datos que habiliten reportería, análisis y futuros casos de uso de IA/ML.
Responsabilidades
- Diseñar, construir y mantener pipelines de datos batch y streaming en GCP.
- Implementar procesos de ingesta desde sistemas transaccionales, APIs y fuentes externas hacia el Data Warehouse.
- Desarrollar y optimizar modelos de datos en BigQuery, considerando capas raw, staging y analítica.
- Aplicar buenas prácticas de particionamiento, clustering y optimización de consultas para mejorar rendimiento y controlar costos.
- Orquestar y monitorear flujos de datos utilizando Cloud Composer (Airflow), gestionando dependencias, reintentos, alertas y SLAs.
- Desarrollar procesos de transformación utilizando Dataflow (Apache Beam), Dataform o dbt, de acuerdo con las necesidades del proyecto.
- Implementar validaciones automáticas para asegurar la calidad, trazabilidad e integridad de los datos.
- Documentar procesos y soluciones de datos y participar en su catalogación.
- Aplicar buenas prácticas de seguridad y gobierno de datos, incluyendo IAM, políticas a nivel de fila y columna y mecanismos de protección de información sensible.
- Colaborar con equipos de Analítica, BI y Negocio para transformar requerimientos en soluciones de datos.
- Participar en la mejora continua de la arquitectura, proponiendo optimizaciones de performance, costos y mantenibilidad.
- Versionar código y participar en procesos de CI/CD e infraestructura como código.
Requisitos técnicos
2 a 4 años de experiencia como Data Engineer o en roles similares. Experiencia práctica trabajando con Google Cloud Platform (GCP).
Experiencia Con
- BigQuery
- Cloud Storage
- Cloud Composer / Airflow
- Dataflow / Apache Beam
- Pub/Sub
- SQL avanzado, incluyendo CTEs, funciones de ventana y optimización de consultas en BigQuery.
- Python orientado al procesamiento de datos, desarrollo de DAGs y uso de librerías cliente de GCP.
- Conocimientos de modelamiento de datos dimensional y conceptos de Data Warehouse / Data Lakehouse.
- Experiencia con Git y flujos de CI/CD como Cloud Build, GitHub Actions o GitLab CI.