TECDATA ENGINEERING

Senior Data Engineer Big Data & Cloud

TECDATA ENGINEERING Madrid, Community of Madrid, Spain

IT Services and IT Consulting · 201-500 employees

Oct 22
data-engineer Mid (2-5 yrs) Full-time Spain
Create a free account to apply — email only, no card. You can also save this posting or score it against your profile with AI.

About the role

Design and evolve batch and real-time data architectures using Cloudera and Google Cloud Platform. Manage data ingestion, storage, and aggregation processes while providing technical guidance to the team.

What they look for

Big Data Cloudera Spark Google Cloud Platform BigQuery Scala Python dbt SQL Data Architecture Data Governance Control-M Batch Processing Real-time Processing

Requirements

Requires over 3 years of experience in Big Data and cloud environments. Proficiency in Spark, Scala, Python, SQL, and dbt is essential for this role.

Full description

Senior Data Engineer Big Data & Cloud

Trabajo Hibrido en madrid

Contrato indefinido

Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform.

Responsabilidades Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y GCP.

Implantar y mantener plataformas de ingesta, almacenamiento y agregación de datos con Spark y BigQuery.

Desarrollar, probar, desplegar y documentar procesos en Spark/Scala y en dbt/SQL/Python.

Definir las bases arquitecturales y los procesos de gobierno del dato.

Estimar la complejidad de las funcionalidades y ayudar al Product Owner a priorizar el backlog. Ser el interlocutor técnico con el cliente, IT y negocio, y participar en las demos.

Resolver incidencias de producción y optimizar procesos productivos.

Planificar y supervisar la ejecución de procesos con Control-M. Orientar técnicamente al resto del equipo y velar por las buenas prácticas y las normas del cliente.

Similar roles