Data Engineer IA — Architecte data pour agents IA (Remote)
Posted Updated
Description
Raedy recherche un ingénieur data expérimenté pour construire et maintenir la couche data du socle IA. Vous ingérerez les sources, préparerez les jeux de données et assurerez la qualité des données pour l’utilisation par les agents IA et les RAG.
Le poste implique l’industrialisation des pipelines sur AWS, l’utilisation de Snowflake et l’orchestration via Airflow, avec une forte sensibilité à la sécurité et à la conformité. Localisation à Puteaux, 2 jours/semaine au bureau, télétravail partiel.
Construire et fiabiliser la couche data du socle: ingestion des sources, préparation et contrôle qualité. Mettre en place les pipelines d'ingestion vers la plateforme (bases internes, APIs, fichiers, espaces documentaires). Modéliser et préparer les jeux de données exploités par les agents, avec règles de gestion. Industrialiser les chaînes documentaires alimentant les RAG: nettoyage, découpage, enrichissement, rafraîchissement. Gérer les synchronisations et traitements incrémentaux, avec reprise sur erreur. Exposer les données via les connecteurs de la plateforme (MCP Snowflake). Collaborer avec les équipes data locales pour cadrer les sources. Documenter schémas et contrats de données et faire évoluer sans casser les usages. Veiller à la sécurité et conformité des accès aux données. Déployer et opérer les traitements sur AWS avec orchestration et CI/CD. Assurer l’observabilité des pipelines: logs, métriques, coûts. Contribuer aux revues de code et choix d’architecture. Langages: Python et SQL avancé pour construire et fiabiliser la couche data. Data: Snowflake, modélisation et traitements incrémentaux. Cloud: AWS S3, ECS, DynamoDB et orchestration via Airflow ou équivalent. IA générative et MCP, recherche sémantique et embeddings. Qualité et observabilité: tests de données, contrôles de fraîcheur et logs structurés. Outils: Docker, Poetry, Git, CI/CD GitLab et Jira.Skills
Sign in to read and join the discussion.