Data Engineer Senior
DRIMO Provincia de Santiago, Santiago Metropolitan Region, Chile
Software Development · 51-200 employees
About the role
The Data Engineer will design and maintain batch and streaming pipelines to integrate data from multiple domains including marketing, loyalty, and travel. They are responsible for ensuring data quality, consistency, and observability while managing infrastructure via Terraform and CI/CD.
What they look for
Requirements
Candidates must have extensive experience with GCP services such as Dataflow, Pub/Sub, and BigQuery, along with strong proficiency in Python. A deep understanding of batch, streaming, and event-driven architectures, as well as infrastructure management tools like Terraform, is required.
Benefits
Full description
¡En Drimo seguimos creciendo y queremos que te sumes a nuestro equipo! 🚀
Buscamos un/a Data Engineer Senior para incorporarse al equipo de uno de nuestros principales clientes, una reconocida aerolínea, donde tendrás la oportunidad de trabajar en proyectos de alto impacto y gran escala.
¿Cuál será tu misión?
Buscamos consolidar e integrar información de clientes proveniente de múltiples dominios y sistemas del cliente, disponibilizándola de forma consistente y oportuna mediante API. El Data Engineer será responsable de construir y evolucionar las capas de integración, combinando fuentes streaming, tópicos de órdenes y eventos, y procesos batch de clientes, marketing, loyalty, travel y otros dominios. Su foco será garantizar la calidad, frescura, trazabilidad y estructura de los datos para su consumo operacional vía APIs.
Principales funciones:
- Diseñar y mantener pipelines batch y streaming con Pub/Sub, Dataflow, BigQuery y Cloud Spanner.
- Integrar, transformar, modelar y validar datos de clientes, marketing, loyalty, travel, órdenes y eventos.
- Implementar calidad, idempotencia, deduplicación, reintentos, DLQ y observabilidad end-to-end.
- Resolver incidentes y asegurar trazabilidad, frescura y consistencia de los datos.
- Gestionar infraestructura y despliegues con Terraform y CI/CD.
- Colaborar con propietarios de las fuentes.
- Generar datos sintéticos coherentes para pruebas end-to-end, casos borde y regresiones.
Requisitos:
- GCP, especialmente con Dataflow/Apache Beam, Pub/Sub, BigQuery, Cloud Spanner y Python.
- Es necesario dominar arquitecturas batch, streaming y event-driven, incluyendo ventanas, deduplicación, idempotencia, reintentos y DLQ, además de modelamiento operacional y analítico, integración de fuentes y evolución de esquemas.
- Se requiere manejo de Terraform, Git, GitLab CI/CD, Docker, IAM, seguridad, Cloud Monitoring y Cloud Logging.
- Se valoran conocimientos de gRPC, Protobuf y APIs; estos son deseables, pero no excluyentes.
- Disponibilidad para trabajar de manera híbrida en Las Condes (2 días a la semana presencial).
Porque el mejor código nace de un buen equilibrio, en Drimo te ofrecemos:
- Día libre por tu cumpleaños.
- Cursos y certificaciones para seguir aprendiendo.
- 5 días de vacaciones adicionales al año para que recargues energías.
- Seguro complementario de salud y dental que te acompaña cuando más lo necesites.
Similar roles
-
Senior Data Engineer R&D
MSD Prague, Prague, Czechia
-
Sr Data Engineer
Porch Group India
-
FBS SAP Informatica Power Center Data Engineer
Capgemini Mexico
-
Forward Deployed Data Engineer
Total Performance Consulting Georgia, United States
-
Senior Data Engineer - Algolia
Perficient Bogota, RAP (Especial) Central, Colombia
-
Senior Data Engineer - Tableau
Perficient Bogota, RAP (Especial) Central, Colombia