Data Engineer Cloud - GCP / AWS (CDI - H/F)
Talan Bordeaux, Nouvelle-Aquitaine, France
IT Services and IT Consulting · 5,001-10,000 employees
About the role
Design, develop, and maintain robust, scalable data pipelines while optimizing data processing using Python and SQL. Implement distributed data processing and real-time streaming architectures within modern cloud-based data platforms.
What they look for
Requirements
Requires a Master's degree in Computer Science and at least 4 years of experience in data platform design and maintenance. Candidates must possess strong proficiency in Python, SQL, and Big Data technologies like Spark and Databricks.
Benefits
Full description
Description de l'entreprise
Talan est un groupe international de conseil en transformation et en innovation par la technologie, créé en 2002.
Nos consultantes et consultants partagent à travers le monde l’audace d’innover, le goût de l’excellence, et l’envie de relever les défis les plus complexes dans des secteurs variés tels que l’énergie, l’industrie, le transport, la finance, le secteur public.
Nos valeurs : engagement, respect, partage, esprit d’équipe et optimisme.
Talan est une entreprise responsable, reconnue par ses collaborateurs et attachée à la diversité. Des aménagements peuvent être proposés si vous êtes en situation de handicap. Retrouvez nos engagements RSE et nos actions en faveur de la diversité sur notre site talan.com.
Talan Sud-Ouest représente plus de 150 consultants répartis sur les agences de Toulouse, Bordeaux et Montpellier. En plein développement, nos trois agences s’agrandissent !
Le pôle Data & IA, fort d’une dizaine de consultants, accompagne ses clients à relever les défis majeurs de création de valeur de leurs organisations grâce à nos expertises conseils (data gouvernance, cadrage, acculturation,…) et technologiques (architecture, ingestion et transformation, restitution et analyse, IA,…).
Description du poste
Vous rejoignez notre agence bordelaise au sein de l’équipe Data & IA et intervenez auprès de nos clients sur des projets de conception, d’industrialisation et d’optimisation de plateformes data modernes.
Vous travaillez en lien direct avec les équipes métiers, Data, Cloud et BI afin de comprendre les besoins, proposer des solutions pragmatiques et robustes, puis les mettre en œuvre dans des environnements cloud et Big Data.
Vos principales missions :
- Concevoir, développer et maintenir des pipelines de données robustes, scalables et industrialisés,
- Développer, transformer, manipuler et optimiser les données à l’aide de Python et SQL.
- Mettre en œuvre des traitements distribués de grands volumes de données avec Apache Spark, PySpark et Databricks.
- Contribuer à des architectures de streaming et de traitement temps réel autour d’Apache Kafka et Apache NiFi.
- Intervenir sur des environnements cloud data et Data Warehouse, notamment AWS Glue et Redshift ou GCP BigQuery.
- Participer à la construction de plateformes data modernes, de type data warehouse, data lake ou lakehouse, selon les besoins clients.
- Garantir la qualité, la performance, la fiabilité et la sécurité des données tout au long de leur cycle de vie.
Dans l’environnement technique suivant (cette liste n’est pas exhaustive et surtout, elle indique les outils et technos qui nous intéressent et qui sont utilisés par nos clients) :
- Langages : Python, SQL.
- Big Data et traitement distribué : Apache Spark, PySpark, Databricks.
- Streaming et temps réel : Apache Kafka, Apache NiFi.
- Cloud AWS (Glue, Redshift) ou GCP BigQuery selon les projets.
Qualifications
Titulaire d’un diplôme en informatique de niveau Bac+5, vous disposez d’une expérience d’au moins 4 ans sur des projets de conception et de maintenance de plateforme de données.
Vos compétences :
- Vous êtes à l’aise pour échanger avec des interlocuteurs métiers, comprendre leurs besoins et proposer des solutions pragmatiques, robustes et adaptées aux enjeux clients.
- Vous maîtrisez Python et SQL pour développer, transformer, manipuler et optimiser les données.
- Vous avez une bonne expérience des environnements Big Data, notamment Apache Spark, PySpark et Databricks pour le traitement distribué des données.
- Vous connaissez les architectures de streaming ou de traitement temps réel, avec Apache Kafka et/ou Apache NiFi.
- Vous avez déjà travaillé sur des environnements cloud data ou Data Warehouse, idéalement AWS Glue et Redshift ou GCP BigQuery.
- Vous connaissez les principes d’ETL/ELT, de qualité de données, d’optimisation des performances et d’industrialisation des traitements.
Compétences souhaitées, qui seraient un plus : connaissances en gouvernance de la donnée et en Domain Driven Design (DDD).
Vos qualités :
- Vous faites preuve de rigueur, d’autonomie et d’un fort esprit d’analyse.
- Vous appréciez le travail en équipe, les environnements collaboratifs et les contextes clients variés.
Ce descriptif vous plait ? Lancez-vous. Nous avons hâte d’en apprendre plus sur vous et vous présenter Talan plus en détails.
Informations supplémentaires
Nos avantages :
- Locaux modernes à Bordeaux proche du centre-ville
- Organisation hybride entre télétravail et présentiel selon les projets de nos clients
- Une mutuelle prise en charge à 80%
- Une large offre de formations (catalogue de + de 1 500 formations)
- Une prime vacances
- Un retour de congé maternité possible à 4/5ème sans perte de salaire pendant 6 mois
L’équipe recrutement s’engage à vous proposer un processus de recrutement rapide et fluide :
- Premier échange avec Quentin, recruteur, pour vous présenter le poste et comprendre votre projet professionnel,
- Entretien en binôme avec le manager de l’équipe Data & IA et un consultant technique.
- Contract Type: Long term contract
Similar roles
-
Data Engineer H/F
NEXTON Lyon, Auvergne-Rhône-Alpes, France
-
Senior Data Engineer - Enablement
N26 Berlin, Germany
-
Senior Data Engineer
Formation Bio San Francisco, California, United States · $186K–$232K/yr
-
Data Engineer
Bluetab, an IBM Company Mexico City, Mexico City, Mexico
-
Data Architect / Data Engineer
Insight Xcite McLean, Virginia, United States · $170K–$220K/yr
-
Lead Data Engineer - Tax Product Development
BDO USA United States · $140K–$210K/yr