Je werkt mee aan de uitbouw van onze data pipelines binnen ons Big Data platform. Je komt in een Agile team met de mentaliteit van een startup. Je kunt naast de technische ontwikkeling van pipelines ook begrijpen hoe je value uit deze data kan halen. Je kunt exploratief eerst inzichten verwerven en kunt productiewaardige modellen bouwen. Open constructief inhoudelijk en technisch bijsturen is in je natuur. We verwachten dus meer dan enkel technische uitvoering. Je hebt ervaring met technische integraties en kunt hier in mee denken/bouwen (API, event based, pipeline sheduling en transaction handling...). Je denkt functioneel sterk mee. Je bent minstens 4/5 beschikbaar om on-site in Mechelen het team te versterken.
- Designen, bouwen en deployen van een set aan batch data applicaties in Spark / Azure batch
- Kennis van data science and machine learning algorithms zodat je kan verzekeren dat je data deliveries ideaal zijn voor het bouwen van modellen.
- Ervaring in workflow mgmt en job scheduling van data loads (airflow, Azure data factory)
- Ervaring in real time data streaming en verwerking is een plus (Azure functions / event hubs / streaming analytics)
- Ervaring in cloud Azure is een plus. Algemene cloud ervaring is een must
- Kennis van ETL voor grote data sets op gedistribueerde systemen
- Doorgedreven kennis in programmeertalen (Python, SQL, HCL, ...) en in het exposen van data (API, SQL server, event streams,..)
- Ervaring met data exploratie: Jupyter notebooks, dashboarding ... en het waarde halen uit data. We verwachten dat je door eigen analyses en inzichten business opportuniteiten of service verbeteringen kunt identificeren. Je hebt voldoende durf om nieuwe assumpties naar voor te brengen. Je hebt aantoonbare ervaring om business rules en complexiteiten te kunnen afwegen
- Ervaring met ETLs met aggregaties, deduplicatie en linken aan identiteiten
- Ervaring in build automatisatie en DevOps CI/CD tooling: GIT, TerraForm/ARM templates, Circle CI
We wensen de klantenkennis op te bouwen om verder onze service te verbeteren. Zowel outbound in intelligente interacties met onze klanten, als bedrijfsmatig in een meer gerichte inzet van investeringsmiddelen om ons aanbod beter op de vraag af te stemmen.
