afarax cherche un(e) Data Engineer freelance. Nous avons besoin de vous!
Le projet:
Notre client dans le secteur de l’énergie cherche un(e) Data Engineer pour renforcer son équipe.
Tâches principales:
- Développer les flux d'ingestion via Fabric Data Factory (et comprehension de Azure Data Factory) ;
- Développer les flux de transformation de données via Fabric Factory Notebook ;
- Optimiser les Queries des transformations, en particulier en prenant en compte les coûts Azure associés ;
- Contribuer à la modélisation du Lake House ;
- Établir le Design technique,implémentation de l'architecture médaillon (silver& gold) dans Microsoft Fabric ;
- Établir le plan de tests unitaires (automatisables) de la solution ;
- Suivre/exécuter les tests unitaires ;
- Participer à l’estimation de l’effort lié aux activités de développement lors du cadrage de la demande ;
- Rédiger la documentation technique ;
- Contribuer à l’amélioration continue (guidelines de développement) ;
- Contribuer à la maintenance & résolution des incidents (production).
Est-ce vous?
- Expérience en tant que développeur data / data Engineer
- Expérience prouvée avec des outils Cloud Data (Azure, AWS, GCP, …)
- Expérience prouvée avec le langage Python et du framework Spark (PySpark)
- Expérience prouvée d'utilisation des langages SQL & TSQL
- Expérience prouvée de Git & CI/CD
- Expérience prouvée en modélisation dimensionnelle
- Maîtrise des principes de Data Lake
- Connaissance des bonnes pratiques de développement en matière de sécurité et expérience dans leur mise en œuvre
- Expérience prouvée dans l'écosystème Azure
- Maîtrise de Fabric Data Factory et/ou Azure Data Factory
- Maîtrise des principes de Azure Storage Account / Lake House
- Certification Azure Data Engineer (DP-203: Data Engineering on Microsoft Azure)
- Certification Azure Fundamentals (AZ-900: Microsoft Azure Fundamentals)
- Certification Fabric Data Engineer Associate (DP-700: Implementing Data Engineering Solutions Using Microsoft Fabric)
- Connaissance du format Delta
- Connaissances (théoriques) en modélisation UML (Class diagram)
- Expérience en tant que développeur sur les plateformes SAP BO/DS
- Expérience probante/effective en langage DAX et Power BI
- Maîtrise de l'outil Synapse Spark ou Fabric ou Databricks
Comment afarax vous soutient?
- Vous bénéficiez de notre vaste réseau
- Vous avez accès à des projets qui correspondent à votre expertise
- Nous vous aidons et vous soutenons tout au long de votre projet
- Nous vous offrons la possibilité de construire un partenariat précieux et durable
Découvrez d'autres projets sur: https://afarax.be/jobs/type/freelance/