Data Engineer H/F
AFNOR Groupe Saint-Denis, Ile-de-France, France · €55K–€70K/yr
Information Services · 1,001-5,000 employees
About the role
You will design, develop, and industrialize data processing pipelines to feed AI services using Python and SQL. You are also responsible for modeling databases, defining interface contracts, and ensuring the scalability and robustness of data architectures.
What they look for
Requirements
Candidates must have at least 3 years of experience in data engineering with a background in data architecture design. Proficiency in Python, SQL, and data orchestration tools is required, along with professional English skills.
Benefits
Full description
Qui sommes-nous ?…
Le contexte
Nos données, principalement constituées de documents normatifs PDF et XML et de leurs métadonnées, alimentent plusieurs services numériques et d’intelligence artificielle du Groupe.
Nos data scientists développent des services d’enrichissement, d’analyse et de recherche s’appuyant notamment sur la recherche sémantique et les architectures RAG. Ces services sont intégrés à des produits commercialisés et exploités en production.
Vos choix techniques ont donc un impact direct sur leur fiabilité, leurs performances, leur capacité à monter en charge et leur coût d’exploitation. Vous évoluez dans un environnement hybride, entre infrastructures on-premise et cloud.
Le poste combine conception d’architecture et mise en œuvre concrète : vous concevez, développez et industrialisez en Python et SQL les chaînes de traitement qui alimentent ces services.
L’équipe s’agrandit autour de nouveaux enjeux : intégration de collections internationales, évolution des modèles de données, montée en charge des services IA et industrialisation des chaînes de traitement.
Vos missions
Ingestion et alimentation des collections
- Concevoir, développer et industrialiser l’ingestion des collections normatives (PDF, XML)
et de leurs métadonnées, y compris celles de partenaires internationaux.
- Automatiser le suivi des évolutions des référentiels sources et réduire le délai
d’intégration de nouvelles collections.
- Garantir la qualité, la traçabilité et le versionnement des données.
Développement et orchestration des chaînes de traitement
- Concevoir, développer et industrialiser en Python et SQL les chaînes qui alimentent nos
services d’intelligence artificielle en production.
- Orchestrer les traitements : extraction, parsing, transformation, appels aux API
d’enrichissement développées par les data scientists, puis chargement et indexation.
- Garantir la robustesse des chaînes : reprise sur erreur, rejeu, idempotence et gestion
des dépendances.
- Instrumenter les traitements et automatiser les contrôles de qualité des données.
Architecture et industrialisation IA
- Concevoir et faire évoluer l’architecture des chaînes data alimentant nos produits et
services IA, en arbitrant entre performance, robustesse, évolutivité et maîtrise des
coûts.
- Modéliser les bases de données et définir les contrats d’interface entre composants :
schémas, API et formats d’échange.
- Définir avec les data scientists les contrats d’intégration de leurs services
d’enrichissement et les critères de mise en production.
- Participer à l’industrialisation des usages IA : recherche sémantique, bases vectorielles
et architectures RAG.
- Documenter les choix structurants sous forme d’Architecture Decision Records (ADR).
Référent data du pôle
- Porter les sujets data auprès des architectes DSI, de la Sécurité et des Ops.
- Assurer la coordination technique avec les partenaires internationaux pour l’intégration
de leurs collections.
- Analyser l’impact des évolutions de données, d’API et de services sur les applications
consommatrices.
Ce que le poste n'est pas
Il ne s’agit pas d’un poste d’architecte uniquement : vous restez directement impliqué dans la conception, le développement, les tests et l’industrialisation des chaînes de traitement.
Vous ne développez pas les modèles ni les algorithmes d'enrichissement : c'est le rôle des data scientists, avec qui vous définissez les contrats d'intégration.
Vous n'assurez pas le monitoring d'exploitation ni l'analyse des logs, qui sont pris en charge par une personne dédiée. Vous travaillez avec elle pour que les chaînes soient observables.
Vous n'êtes pas responsable de l'urbanisation SI globale du Groupe ni du pilotage des livraisons produit.
Évolution du poste
Ce poste offre une trajectoire naturelle vers un rôle d’Architecte Data, avec une montée progressive en responsabilité sur les choix d’architecture, les standards techniques et la vision cible du domaine data.
Profil :
De formation supérieure en informatique ou en data, vous disposez de minimum 3 ans d'expérience en tant que data engineering, dont une expérience de conception d'architecture de données.
- Maîtrise de Python et SQL, et d'au moins un orchestrateur (Airflow, Dagster, Prefect ou
équivalent).
- Modélisation de données relationnelles, conception et consommation d'API.
- Capacité à formaliser et défendre des choix techniques auprès d'interlocuteurs variés,
techniques ou non.
- Anglais professionnel requis (partenaires internationaux).
Atouts appréciés : Expérience d'une plateforme alimentant des produits IA (RAG, bases vectorielles), pratique de l'instrumentation OpenTelemetry ou de l'intégration avec Elastic, notions de data quality et de lignage
Pourquoi nous rejoindre
- Un environnement stimulant : une mission d'intérêt générale , un collectif engagé, une expertise reconnue, une forte influence sur les politiques publiques et industrielles.
- Un équilibre vie pro / vie perso : télétravail, horaires aménageables, mutuelle famille, dispositifs aidants, etc.
- Des opportunités de développement : parcours de formation, mobilité interne, accompagnement individualisé.
- Un employeur responsable : politique RSE ambitieuse, inclusion, égalité, accessibilité.
- Une vie d’équipe dynamique : événements, activités culturelles et sportives via un CSE impliqué.
Informations complémentaires
- Poste basé à La Plaine Saint-Denis (RER B, ligne 14)
- Rémunération proposée entre 55 et 70 000€ brut annuel en fonction du profil
Similar roles
-
Data Engineer H/F
NEXTON Lyon, Auvergne-Rhône-Alpes, France
-
Senior Data Engineer - Enablement
N26 Berlin, Germany
-
Senior Data Engineer
Formation Bio San Francisco, California, United States · $186K–$232K/yr
-
Data Engineer
Bluetab, an IBM Company Mexico City, Mexico City, Mexico
-
Data Architect / Data Engineer
Insight Xcite McLean, Virginia, United States · $170K–$220K/yr
-
Lead Data Engineer - Tax Product Development
BDO USA United States · $140K–$210K/yr