Data Engineer (AI)

januari 29, 2025

notre client explore des projets d'IA à différents niveaux, notamment l'assistance bureautique pour les employés, les chatbots utilisant la génération augmentée par la récupération (RAG), ainsi que des initiatives d’automatisation plus transformationnelles. Pour naviguer dans cet environnement en évolution, notre client vise à établir un Centre d'Excellence pour l'IA Générative et cherche actuellement son premier membre d'équipe pour participer au développement de divers POC, pilotes et projets. Dans ce contexte, notre client recherche un Data Engineer spécialisé en IA et Azure pour rejoindre son centre de compétence IA générative afin de contribuer à la transformation des processus métier à travers des projets avancés et soutenir les initiatives stratégiques et opérationnelles en IA générative :

  • La gestion des pipelines de données (ETL/ELT), leur transformation et leur optimisation qui sont critiques pour les projets IA générative.
  • La préparation des données et l’utilisation des plateformes (Azure Fabric, Data Factory, Synapse, etc.) pour garantir un flux de données optimisé.
  • La coordination avec la data factory interne (dans un modèle hub & spoke) qui impliquera de travailler avec des dépendances limitées.

Ce poste exige une expertise technique solide et une expérience significative dans des projets d'envergure en IA générative, essentielle pour établir la base de l'équipe IA générative de notre client. Le candidat idéal doit adopter une démarche proactive d'apprentissage continu et d'innovation dans le domaine.

Responsabilités

Le candidat sélectionné devra, en partenariat avec le solution architect et l’expert IA, participer à la conception, au déploiement, à l’optimisation et au monitoring des solutions d’IA générative. Son rôle sera en particulier de :

  • Construire, optimiser et maintenir des pipelines ETL/ELT.
  • Gérer les flux de données, leur transformation et leur intégration dans des workflows IA.
  • Superviser la qualité, la sécurité, et la gouvernance des données (ex : Azure Purview, RGPD).
  • Créer des dashboards de monitoring pour analyser les performances et optimiser les coûts.
  • Garantir la scalabilité, la sécurité, et la fiabilité des solutions déployées.
  • Développer des pipelines CI/CD robustes pour les déploiements IA.

Expérience Requise

Compétence Catégorie Années d’expérience Description
Gestion et transformation des données Must have 3-5 ans Expertise dans la création et la maintenance de pipelines ETL/ELT. Maîtrise des outils Azure tels que Azure Data Factory, Synapse Analytics, et Fabric.
Python et SQL Should have 3-5 ans Python : indispensable pour automatiser et transformer les données. SQL : essentiel pour interagir avec les bases de données et optimiser les requêtes.
Stockage et gouvernance des données Must have 3 ans Expertise en gestion des Data Lakes et Data Lakehouses sur Azure. Connaissance des outils de gouvernance des données (Azure Purview, respect des conformités RGPD).
CI/CD pour pipelines Must have 2-3 ans Connaissance des outils Azure DevOps pour intégrer et déployer des pipelines de données. Automatisation des processus de déploiement et des tests.
Cloud et Infrastructure-as-Code Should have 2-3 ans Familiarité avec les déploiements via Infrastructure-as-Code (Terraform). Expérience avec la gestion des ressources Azure.
Orchestration Nice to have 1-2 ans Connaissance de Docker et Kubernetes pour la gestion de microservices.
Monitoring et observabilité Should have 1-2 ans Mise en place de solutions de monitoring pour les pipelines (Azure Monitor, Log Analytics).
Intégration avec MLOps Nice to have 1-2 ans Capacité à intégrer des modèles IA déployés dans les pipelines (ex. LangChain, Prompt Flow).
Maîtrise du français Must have 3-5 ans Capacité à collaborer aisément dans un environnement francophone.
Connaissance AI Must have 2-3 ans Connaissance des processus AI et leur fonctionnement i.e. Training, fine-tuning, inference via endpoints ou via des batchs des modèles AI et plus particulièrement des LLMs.
Azure AI éco-système Nice to have 1-2 ans Connaissance de l’éco-système IA de Microsoft et plus particulièrement de AI Foundry, AI Search et AI Services.

Compétences Douces

  • Collaboration et communication avec des équipes multidisciplinaires.
  • Autonomie et capacité à résoudre des problèmes complexes.
  • Esprit innovant pour proposer des solutions adaptées aux besoins métier.

Job specifications

ID: 9220

Duration: 15/02/2025 - 15/02/2026

Location: Gosselies

Type: Freelance

Viktor Feyt

IT Recruitment Consultant
This position is no longer accepting applications.