Python programmeur
In deze functie ben je werkzaam in een tweetal trajecten binnen het dataplatformteam.
Dataplatform data ingestion en processing
Waterschap Aa en Maas ontwikkelt een data platform binnen Azure Fabric. Voor de data ingestion maken we gebruik van met Python FastAPI ontwikkelde API’s die draaien in een Azure Kubernetes Docker container (bronAPI). Elke databron die we op het dataplatform aansluiten heeft een eigen bronAPI, waarin het maatwerk voor die specifieke bron is opgenomen. In het dataplatform kan dan, door middel van Fabric Notebooks, op een uniforme wijze de data uit alle bronnen worden ingelezen. We willen een versnelling uitvoeren in het aansluiten van bronnen en zijn daarom op zoek naar een ervaren Python programmeur.
Ontwikkelaar datavalidatie
Onze hydrologische meetnetten voorzien ons van tijdreeksen van belangrijke gegevens in ons watersysteem, zoals waterstanden, stroomsnelheid, maar ook de stijghoogte van het grondwater en het percentage bodemvocht. Het is belangrijk dat de kwaliteit van de meetreeksen voldoende is, want deze reeksen zijn de basis voor besluiten, adviezen en ontwerpen. Er ligt een plan klaar om op een robuuste wijze een nieuwe validatieroutine te implementeren in ons dataplatform. Deel van dit plan is het goed aansluiten van brondata, het implementeren van automatische validatieregels, zorgen dat er een gebruiksvriendelijke manier is om de automatische validatie te controleren, en het juist ontsluiten van de gevalideerde meetreeksen. De ontwikkelaar zal de benodigde routines en visualisaties ontwikkelen in Python, het meeste in Fabric Notebooks.
Periode
De werkzaamheden worden uitgevoerd in de periode 16 juni 2025 t/m 12 december 2025.
Eisen
- Aantoonbare ervaring met Python, specifiek met onder andere:
- FastAPI
- Omgaan met bevragen van API’s (requests module)
- Pydantic
- Pandas
- Pyspark
- Ervaring in het verwerken van data met ETL-technieken
- Kennis van het werken met Notebooks binnen Fabric (of bijvoorbeeld Azure Synapse of Databricks)
- Kennis/ervaring van diverse Azure-componenten, runbooks, containers en Azure DevOps pipelines
- Kandidaat dient uiterlijk per 23 juni 2025 beschikbaar te zijn
- Functie dient ingevuld te worden door 1 persoon
- Minimaal één vaste kantoordag per week op locatie in ’s-Hertogenbosch
Wensen
- Goed kunnen samenwerken met ontwikkelaars van waterschap en actief delen wat je maakt
- Communicatief vaardig zijn om samen met eindgebruikers van de (mede) door jou ontwikkelde validatietooling tot een goed product te komen