afarax cherche un(e) Data Engineer freelance. Nous avons besoin de vous!
Notre client dans le secteur de l'énergie cherche un(e) Data Engineer pour renforcer son équipe.
Responsabilités
- Développer les flux d'ingestion via Fabric Data Factory (et comprehension de Azure Data Factory)
- Développer les flux de transformation de données via Fabric Factory Notebook
- Optimiser les Queries des transformations, en particulier en prenant en compte les coûts Azure associés
- Contribuer à la modélisation du Lake House
- Établir le Design technique,implémentation de l'architecture médaillon (silver& gold) dans Microsoft Fabric
- Établir le plan de tests unitaires (automatisables) de la solution
- Suivre/exécuter les tests unitaires
- Participer à l'estimation de l'effort lié aux activités de développement lors du cadrage de la demande
- Rédiger la documentation technique
- Contribuer à l'amélioration continue (guidelines de développement)
- Contribuer à la maintenance & résolution des incidents (production)
Est-ce vous?
- Expérience en tant que développeur data / data Engineer
- Expérience prouvée avec des outils Cloud Data (Azure, AWS, GCP, ...)
- Expérience prouvée avec le langage Python et du framework Spark (PySpark)
- Expérience prouvée d'utilisation des langages SQL & TSQL
- Expérience prouvée de GIT & CI/CD
- Expérience prouvée en modélisation dimensionnelle
- Maîtrise des principes de Data Lake
- Connaissance des bonnes pratiques de développement en matière de sécurité et expérience dans leur mise en œuvre
- Expérience prouvée dans l'écosystème Azure
- Maîtrise de Fabric Data Factory et/ou Azure Data Factory
- Maîtrise des principes de Azure Storage Account / Lake House
- Certification Azure Data Engineer (DP-203: Data Engineering on Microsoft Azure)
- Certification Azure Fundamentals (AZ-900: Microsoft Azure Fundamentals)
- Certification Fabric Data Engineer Associate (DP-700: Implementing Data Engineering Solutions Using Microsoft Fabric)
- Connaissance du format Delta
- Connaissances (théoriques) en modélisation UML (Class diagram)
- Expérience en tant que développeur sur les plateformes SAP BO/DS
- Expérience probante/effective en langage DAX et Power BI
- Maîtrise de l'outil Synapse Spark ou Fabric ou Databricks
Comment afarax vous soutient?
- Vous bénéficiez de notre vaste réseau
- Vous avez accès à des projets qui correspondent à votre expertise
- Nous vous aidons et vous soutenons tout au long de votre projet
- Nous vous offrons la possibilité de construire un partenariat précieux et durable