EY

Data Engineer (PySpark, Redshift, Iceberg, Airflow)

EY São Paulo, São Paulo, Brazil

Professional Services · 10,001+ employees

Yesterday
data-engineer Senior (5-10 yrs) Full-time Brazil
Create a free account to apply — email only, no card. You can also save this posting or score it against your profile with AI.

About the role

Develop and maintain scalable data ingestion, transformation, and delivery pipelines using modern cloud architectures. Collaborate with architects and stakeholders to ensure data quality, performance, and alignment with business needs.

What they look for

PySpark Amazon Redshift Apache Iceberg Apache Airflow Data Engineering Cloud Data Platforms AWS Data Lake Data Warehouse Lakehouse Architecture ETL ELT SQL Data Governance Data Quality Distributed Data Processing

Requirements

Requires advanced English communication skills and solid experience in cloud-based data engineering. Candidates must have strong proficiency in PySpark, Amazon Redshift, Apache Iceberg, and Apache Airflow.

Benefits

Health insurance Dental insurance Childcare assistance Exclusive benefits and discount platform Educational incentives Birthday day off Gympass/Wellhub Profit sharing Private pension Food voucher Transportation voucher

Full description

Sabemos que carreiras podem ser tão diferentes quanto as próprias pessoas. Por isso, na EY, você terá a liberdade, as ferramentas e as condições para se desenvolver e construir uma carreira tão única quanto você.

Em Tech Financial Services (Tech FSO), estamos construindo um mundo de negócios melhor apoiando as necessidades e desafios tecnológicos dos nossos clientes do segmento financeiro (Mercado de Capitais, Bancos, Fintechs, Seguros e Gestão de Ativos). Entregamos soluções sob medida com base nas necessidades específicas de cada negócio, a partir de uma equipe multidisciplinar de especialistas com diferentes perfis, como especialistas em Dados, UX, até analistas de negócios e scrum masters.

#TechEY #TechFSO #CarreiraTech

Qual será o seu papel nesse propósito?

Como Senior Data Engineer, você atuará no desenvolvimento e evolução de plataformas modernas de dados em ambientes AWS, contribuindo para a construção de soluções escaláveis, resilientes e orientadas a dados para organizações do setor financeiro.

Você fará parte de iniciativas estratégicas voltadas para Data Platforms, Lakehouse Architectures, modernização de ecossistemas analíticos e processamento de dados corporativos, trabalhando em estreita colaboração com arquitetos, equipes de tecnologia, analistas e stakeholders de negócio.

Por que você?

Se você possui os requisitos abaixo, essa oportunidade pode ser sua:

• Inglês avançado para comunicação profissional.

• Experiência em Engenharia de Dados.

• Experiência sólida com desenvolvimento de plataformas de dados em nuvem.

• Forte conhecimento em PySpark para processamento distribuído de dados.

• Experiência prática com Amazon Redshift.

• Conhecimento sólido em Apache Iceberg.

• Experiência com Apache Airflow para orquestração de pipelines.

• Vivência com serviços AWS voltados para plataformas de dados.

• Experiência na construção de pipelines escaláveis de ingestão, transformação e entrega de dados.

• Conhecimento em arquiteturas Data Lake, Data Warehouse e Lakehouse.

• Experiência com frameworks ETL e ELT.

• Conhecimento avançado em SQL e otimização de workloads analíticos.

• Experiência em monitoramento, governança e qualidade de dados.

• Capacidade de atuar em ambientes corporativos complexos e de grande volume de dados.

Principais responsabilidades:

• Desenvolver e manter pipelines escaláveis de ingestão, transformação e disponibilização de dados.

• Construir soluções utilizando PySpark, Amazon Redshift, Apache Iceberg e Apache Airflow.

• Desenvolver e suportar plataformas baseadas em arquiteturas Lakehouse e Data Warehouse.

• Implementar e evoluir frameworks ETL e ELT de alto desempenho.Garantir qualidade, confiabilidade, escalabilidade e performance dos dados e pipelines.

• Monitorar workloads críticos e atuar na resolução de problemas em ambientes produtivos.

• Trabalhar em conjunto com arquitetos, analistas e stakeholders para desenvolver soluções alinhadas às necessidades do negócio.

• Contribuir para iniciativas de governança, qualidade e catalogação de dados.

• Participar de revisões de arquitetura, design técnico e code reviews.

• Manter documentação técnica atualizada e aderente aos padrões corporativos.

• Apoiar a modernização e evolução contínua da plataforma de dados em nuvem.

• Promover boas práticas de engenharia de dados e excelência operacional.

Conheça alguns de nossos benefícios: Assistência médica e odontológica, Auxílio creche, Plataforma de benefícios e descontos exclusivos EY, Incentivos à educação, Day off de aniversário, Gympass/Wellhub, Participação nos Lucros (PLR), Previdência privada, Vale Alimentação e / ou Vale Alimentação e Transporte, e muito mais.

Quem somos: Somos uma das maiores empresas de serviços do mundo, em Auditoria, Consultoria, Impostos, Estratégia e Transações, orientados à Tecnologia. Com presença em mais de 150 países, aqui você terá a oportunidade de viver as experiências excepcionais que só a EY pode oferecer, com alcance global, cultura inclusiva e tecnologia para se tornar a sua melhor versão.

Aqui, acreditamos que a força que impulsiona a inovação vem da diversidade de pessoas e ideias. Segundo o Great Place to Work 2022, somos a melhor empresa para pessoas LGBTQ+ do Brasil, e a 2a melhor empresa para Mulheres e para Pessoas Pretas. Assim, você poderá fazer parte de nossos programas e grupos que, juntos a inúmeras iniciativas internas, apoiam nossa constante busca pela equidade.

Quer se sentir desafiado/a, motivado/a e valorizado/a todos os dias? Inspirar mudanças e deixar um legado? Faça parte do nosso time e ajude-nos na construção de um mundo de negócios melhor!

Saiba mais sobre como é trabalhar na EY:

Carreiras na EY LinkedIn @EY Instagram @eybrasilcarreiras

Oportunidade disponível em modelo presencial (com flexibilidade para o remoto) nos escritórios da EY em todo o Brasil.

A EY acredita na igualdade de oportunidades. Independentemente de gênero, idade, raça, cor, credo, orientação sexual e deficiência, todos os candidatos qualificados serão considerados em nossos processos.

Similar roles