Engenheiro (a) de Dados Cloud Junior
Junior cloud data engineer at EY (Big Four consulting) on a Hive-to-Databricks migration project for one of Latin America's largest financial institutions. Day to day involves converting ETL/ELT processes, stored procedures, and SQL pipelines using Python, PySpark, SQL, Teradata, and Databricks on Azure/AWS/GCP.
- Compensation
- Not disclosed
- Location
- Brasilia, BR
- Work setup
- Not specified
- Seniority
- Junior
- Employment
- Not specified
- Experience
- Not specified
- Category
- Data engineering
- Posted
Skills
Must have
- Degree completed or in progress in Computer Science, Information Systems, Systems Analysis & Development, or related fields
- Cloud experience (Azure, AWS, or GCP) and data engineering with Databricks
- Proficiency in Python, PySpark, SQL, and workflow orchestration
- Experience with Unity Catalog, data governance, and data security
- Solid knowledge of Teradata, including modeling, query optimization, and analytical processes
- Experience in data platform migration projects, especially Teradata to Databricks
- Experience converting and modernizing ETL/ELT processes, stored procedures, SQL scripts, and data pipelines
- Experience with CRM environments and marketing campaigns (customer segmentation, journeys, target audiences, large data volumes)
- Knowledge of Lakehouse migration strategies, performance optimization, and distributed processing with Spark
- Experience with Squad structures and agile methodologies
- Experience with GitHub Copilot for AI-assisted development, troubleshooting, and productivity
Full description
Engenheiro (a) de Dados Cloud
Na EY, estamos comprometidos em moldar seu futuro com confiança.Nós ajudaremos você a ter sucesso em um ambiente globalmente conectado, repleto de equipes diversas, e a levar sua carreira para onde você desejar.Venha para EY e ajude-nos a construir um mundo de negócios melhor.
Sobre a oportunidade:
Oportunidade de atuar em uma empresa Big Four com ampla estrutura de capacitação e atuação em projetos variados em uma das maiores instituições financeira da América Latina.
Você assumirá as seguintes responsabilidades:
O profissional atuará no projeto de migração de Hive para Databricks
Requisitos e habilidades que buscamos:
- Formação completa ou cursando em Ciencia da Computação, Sistema da Informação, Analise e Desenvolvimento de Sistemas e áreas correlatas;
- Experiência em nuvem (Azure, AWS ou GCP) e engenharia de dados utilizando Databricks;
- Domínio de Python, PySpark, SQL e orquestração de workflows;
- Experiência com Unity Catalog, governança e segurança de dados;
- Conhecimento sólido em Teradata, incluindo modelagem, otimização de consultas e processos analíticos;
- Experiência em projetos de migração de plataformas de dados, especialmente de Teradata para Databricks;
- Vivência na conversão e modernização de processos ETL/ELT, procedimentos armazenados, scripts SQL e pipelines de dados;
- Experiência com ambientes de CRM e campanhas de marketing, incluindo segmentação de clientes, jornadas, públicos-alvo e processamento de grandes volumes de dados;
- Conhecimento em estratégias de migração para arquiteturas Lakehouse, otimização de performance e processamento distribuído com Spark;
- Experiência em estruturas de Squad e metodologias ágeis;
- Experiência com GitHub Copilot para desenvolvimento assistido por IA, troubleshooting e aumento de produtividade;
Conheça alguns de nossos benefícios: Assistência médica e odontológica, Auxílio creche, Plataforma de benefícios e descontos exclusivos EY, Incentivos à educação, Day off de aniversário, Gympass/Wellhub, Participação nos Lucros (PLR), Previdência privada, Vale Alimentação e / ou Vale Alimentação e Transporte, e muito mais.
O que oferecemos:
Na EY, você se desenvolve com habilidades voltadas para o futuro e se abastece de experiências de classe mundial. Nós capacitaremos você em um ambiente flexível e potencializaremos seus talentos extraordinários em uma cultura diversa e inclusiva, com equipes globalmente conectadas.
Pelo 4o ano consecutivo, a EY está na lista do Great Place to Work como uma das melhores empresa para se trabalhar, com destaque para as categorias de diversidade. Você poderá fazer parte de nossos programas e grupos que, juntos a inúmeras iniciativas internas, apoiam nossa constante busca pela equidade.