CI&T

[Job-30766] Sr Data Engineer, Brazil

CI&T Brazil

IT Services and IT Consulting · 5,001-10,000 employees

Yesterday
data-engineer Senior (5-10 yrs) Full-time Brazil
Log in to apply, save this posting, or score it against your profile with AI.

About the role

You will lead the migration and modernization of legacy data pipelines to a modern Google Cloud Platform architecture using Data Mesh and medallion patterns. Responsibilities include developing ELT/ETL processes, automating deployments with CI/CD, and ensuring high standards of data governance and quality.

What they look for

SQL Google BigQuery Google Cloud Platform Python Apache Spark Data Lakehouse Data Modeling Git CI/CD Dataflow Terraform Data Governance ETL ELT Kafka Iceberg

Requirements

Candidates must have solid experience with advanced SQL, Google Cloud Platform, Python, and Apache Spark in large-scale environments. Proficiency in data modeling, version control, and CI/CD practices is required to manage complex data domains.

Benefits

Health insurance Dental insurance Meal vouchers Food vouchers Childcare assistance Extended parental leave Gym membership Profit sharing Life insurance Continuous learning platform Discount club Mental health support Parental courses Online course platform Language learning platform

Full description

Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.

Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.

Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Sobre o desafio

Estamos em um momento estratégico de evolução da nossa plataforma de dados, conduzindo a migração e modernização de um ambiente legado baseado em Azure/Databricks para uma nova arquitetura em Google Cloud Platform (GCP).

Você fará parte da construção de uma fundação de dados moderna, baseada em Data Mesh, arquitetura Medalhão (Raw / Silver / Gold) e fortes práticas de governança, habilitando novas capacidades de Analytics, Inteligência Artificial e processamento de dados em larga escala.

Principais responsabilidades

• Atuar na análise, refatoração e modernização de pipelines e notebooks legados em Spark/Databricks.

• Desenvolver e manter pipelines ELT/ETL utilizando BigQuery, Dataform e SQL para construção das camadas Silver e Gold.

• Implementar processos de ingestão batch e streaming com Dataflow (Apache Beam), Datastream e integração com plataformas de eventos como Kafka ou Event Hubs.

• Trabalhar com persistência de dados em BigLake e tabelas Iceberg, garantindo escalabilidade e governança.

• Automatizar provisionamento e deploys utilizando Terraform, Git e CI/CD (GitHub Actions).

• Implementar práticas de qualidade de dados, catalogação, linhagem e compartilhamento seguro de dados utilizando ferramentas de governança do ecossistema GCP.

• Colaborar com times multidisciplinares na definição de padrões de ingestão, processamento e arquitetura de dados.

Requisitos obrigatórios

• Experiência sólida em SQL avançado, preferencialmente em Google BigQuery.

• Vivência com Google Cloud Platform (GCP), especialmente BigQuery, Cloud Storage (GCS), Dataflow e Cloud Composer / Airflow.

• Experiência com Python e Apache Spark para processamento de dados em ambientes distribuídos.

• Conhecimento de Data Lakehouse, modelagem de dados, particionamento e formatos como Parquet, Avro e Iceberg.

• Experiência com Git, versionamento de código e pipelines de CI/CD.

• Capacidade de atuar em ambientes complexos, de alta volumetria e com múltiplos domínios de dados.

Diferenciais

• Experiência com Dataform ou dbt para transformação e orquestração de dados.

• Conhecimento em Terraform (Infraestrutura como Código).

• Familiaridade com Kafka, Event Hubs e processamento de streaming.

• Experiência prévia com Databricks e migração de workloads Spark.

• Conhecimentos em governança e segurança de dados no GCP (Dataplex, IAM, VPC Service Controls).

O que você vai encontrar

• Projetos de grande escala, com processamento de petabytes de dados e migração de milhares de objetos.

• Uso de tecnologias modernas do ecossistema Google Cloud, incluindo BigLake, Analytics Hub e recursos de IA para enriquecimento de dados.

• Ambiente altamente colaborativo, orientado a Data Mesh, com forte foco em engenharia de dados, automação, governança e inovação.

• Oportunidade de participar ativamente da construção de uma plataforma de dados de próxima geração, com impacto direto nas iniciativas de Analytics e IA da organização.

Se você gosta de desafios técnicos complexos, arquitetura de dados moderna e ambientes cloud de alta escala, queremos conhecer você!

#LI-LL1

\n

\nNossos benefícios:

- Plano de saúde e odontológico;

- Vale alimentação e refeição;

- Auxílio-creche;

- Licença parental estendida;

- Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) TotalPass;

- Participação nos Lucros e Resultados (PLR);

- Seguro de Vida;

- Plataforma de aprendizagem contínua (CI&T University);

- Clube de descontos;

- Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;

- Curso gestante e parentalidade responsável;

- Parceria com plataformas de cursos online;

- Plataforma para aprendizagem de idiomas;

- E muitos outros

Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt-br/carreiras

Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.

Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.

Similar roles