Databricks Architect
Databricks Architect leading end-to-end design and implementation of cloud data, data engineering, and analytics solutions on Databricks (Delta Lake, MLflow, Spark SQL, Unity Catalog) for corporate clients. Hybrid role (3 office days/2 remote) in Mexico City, Guadalajara, or Monterrey; requires 6+ years' experience and advanced English.
- Compensation
- MX$40K–MX$90K / mo
- Location
- Benito Juárez
- Work setup
- Onsite
- Seniority
- Not specified
- Employment
- Not specified
- Experience
- Not specified
- Category
- Architecture
- Posted
Skills
Must have
- 6+ years of experience in data engineering, solution architecture, and large-scale analytics platform design
- Proven track record with Databricks (Delta Lake, MLflow, Spark SQL, Unity Catalog) in complex production environments
- Advanced/fluent conversational English for global teams and executives
- Expert command of Databricks platform, Apache Spark, query optimization, and cluster management
- Design and implementation of Delta Lake architecture
- Data governance and security with Unity Catalog
- Advanced Python, Scala, and SQL for massive data processing
- Building robust, automated, fault-tolerant ETL/ELT pipelines
- Deep experience integrating Databricks with public cloud (preferably AWS or Azure): object storage, virtual networks, IAM permissions
- CI/CD for data code: Git, Terraform (IaC), and orchestrators like Airflow
- Higher education degree (Licenciatura)
Nice to have
- Experience with GCP
Full description
Capital Empresarial Horizonte, empresa mexicana especialista en Recursos Humanos y Tecnologías de la Información, solicita:
Databricks Architect
Para laborar en 📍 Ciudad de México / Guadalajara/ Monterrey (Esquema Híbrido: 3 días de oficina y 2 días de Home Office)Objetivo del Puesto:
Liderar el diseño, arquitectura e implementación de soluciones avanzadas de datos, ingeniería de datos y analítica en la nube utilizando la plataforma Databricks y arquitecturas Lakehouse. El candidato seleccionado garantizará la escalabilidad, gobernanza, rendimiento y seguridad de los ecosistemas de datos para respaldar las decisiones estratégicas de negocio de clientes corporativos.
Requisitos e Información Clave:
- Experiencia Profesional: Mínimo 6+ años de experiencia en ingeniería de datos, arquitectura de soluciones y diseño de plataformas analíticas a gran escala.
- Experiencia Específica: Sólida trayectoria comprobable trabajando con Databricks (Delta Lake, MLflow, Spark SQL, Unity Catalog) en entornos productivos complejos.
- Idioma: Inglés conversacional fluido / avanzado (indispensable para interlocución con equipos globales y directivos).
Requisitos Técnicos Indispensables (Stack):
- Databricks & Lakehouse:
- Dominio experto de la plataforma Databricks, Apache Spark, optimización de consultas y gestión de clusters.
- Implementación y diseño de arquitectura Delta Lake para el almacenamiento y estructuración eficiente de datos.
- Gobernanza y seguridad de datos mediante Unity Catalog.
- Ingeniería de Datos & Lenguajes:
- Dominio avanzado de Python, Scala y SQL para el procesamiento masivo de datos.
- Creación de flujos ETL/ELT robustos, automatizados y tolerantes a fallos.
- Infraestructura Cloud (AWS / Azure / GCP):
- Experiencia profunda integrando Databricks con servicios de nube pública (preferentemente AWS o Azure), manejo de almacenamiento en objetos, redes virtuales y permisos IAM.
- DevOps, CI/CD & Control de Versiones:
- Experiencia con flujos de despliegue continuo para código de datos, integración con Git, Terraform (Infraestructura como Código) y orquestadores como Airflow.
Responsabilidades Principales:
- Diseñar la arquitectura de referencia y soluciones de datos end-to-end basadas en Databricks y arquitecturas modernas de Lakehouse.
- Definir estrategias de modelado de datos, particionamiento, optimización de costos y rendimiento para grandes volúmenes de información (Big Data).