Notre client est à la recherche d'un Développeur Data
Contexte de la mission
La Factory est responsable de la gestion, de la maintenance et de l'évolution de nos solutions data (Microsoft Fabric, Azure Data Factory et SAP BO/DS). Le Data Engineer rejoindra l'équipe de développement, maintenance et support des solutions BI Azure & Fabric (tant sur les volets correctifs qu’évolutifs).
Tâches principales
- Développer les flux d'ingestion via Fabric Data Factory (et comprehension de Azure Data Factory) ;
- Développer les flux de transformation de données via Fabric Factory Notebook ;
- Optimiser les Queries des transformations, en particulier en prenant en compte les coûts Azure associés ;
- Contribuer à la modélisation du Lake House ;
- Établir le Design technique,implémentation de l'architecture médaillon (silver& gold) dans Microsoft Fabric ;
- Établir le plan de tests unitaires (automatisables) de la solution ;
- Suivre/exécuter les tests unitaires ;
- Participer à l’estimation de l’effort lié aux activités de développement lors du cadrage de la demande ;
- Rédiger la documentation technique ;
- Contribuer à l’amélioration continue (guidelines de développement) ;
- Contribuer à la maintenance & résolution des incidents (production).
Profil recherché
Les compétences techniques
La connaissance des bonnes pratiques de développement en matière de sécurité et l’expérience dans leur mise en œuvre seront vérifiés durant l’entretien s’il a lieu.
- Connaissance du format open table (Delta, Iceberg)
- Expérience en tant que développeur data / data engineer
- Expérience prouvée avec des outils Cloud Data (Azure, AWS, GCP, …)
- Expérience prouvée avec le framework Spark (PySpark)
- Expérience prouvée avec le langage Python
- Expérience prouvée d'utilisation des langages SQL & T-SQL
- Expérience prouvée dans l'écosystème Azure
- Expérience prouvée dans l'écosystème Fabric
- Expérience prouvée de Git & du CI/CD
- Expérience prouvée en modélisation dimensionnelle
- Maîtrise des principes de Lake House
- Certification Fabric Data Engineer Associate (DP-700: Implementing Data Engineering Solutions Using Microsoft Fabric)
- Connaissance des bonnes pratiques de développement en matière de sécurité et expérience dans leur mise en œuvre
- Maîtrise de Fabric Data Factory et/ou Azure Data Factory
- Maîtrise de l'outil Synapse Spark ou Fabric ou Databricks
- Maîtrise des principes de Azure Storage Account / OneLake
- Connaissances (théoriques) en modélisation UML (Class diagram)
- Expérience en tant que développeur sur les plateformes SAP BO/DS
- Expérience probante/effective en langage DAX et Power BI
- Exigence linguistique: Niveau de français C2 sur l'échelle européenne CEFR
- Exigence linguistique: Niveau de anglais B1 sur l'échelle européenne CEFR