Stel je eens voor; als Data Engineer binnen de afdeling Data van RVO zorg jij er voor dat onze ca. 6500 collega’s de beschikking hebben over actuele data. Daarvoor zijn we een nieuw Data en Analytics platform (DADEL) aan het neer zetten in de Azure cloud. Uiteindelijk worden op ons platform niet alleen RVO-medewerkers van inzichten bediend maar ook een grote selectie van ministeries en andere overheidsorganen.
Jij draagt bij aan de ontwikkeling van ons Data en Analytics platform, waarbinnen je relevante data beschikbaar stelt en integreert. Je helpt mee met het verder ontwikkelen van CI/CD pipelines, ontsluiten van bronnen en het maken van data producten. Deze data producten zijn onder andere tabellen en rapportages maar ook nieuw te ontwikkelen data science toepassingen. Zwaartepunt zit hierbij wel bij de inrichting van het platform en het ontsluiten en integreren van data.
In deze uitdagende data engineer functie kun jij jouw engineering kennis inzetten op de verschillende transities waaraan wij werken.
Dit doe je niet alleen, maar samen met je agile team. Je werkt aan verschillende opdrachten op het gebied van interne bedrijfsfuncties (o.a. klant, financiën). Je werkt hierin samen met andere data engineers, maar ook met data modelleurs, analisten en data scientists.
Je vindt het leuk om DevOps pipelines in te richten, data te ontsluiten met Python/PySpark en een beetje te Terraformen. Daarnaast denk je na over MLops inrichting voor data science producten en het documenteren in onze wiki. Voor een groot deel van de organisatie is de Azure/cloud nieuw en neem jij de mensen graag mee in deze nieuwe manier van werken.
Verder ga jij je bezighouden met het:
• Inrichten tooling ((o.a. ADF, Databricks, PowerBI, Microsoft DevOps) op Azure.
• Ontsluiten bronnen (nadruk op Databricks/ADF) en het verder opwerken van data in Databricks.
• MLops voor data science producten.
• Ondersteunen van collega’s binnen de agile teams en SSBI’ers in de lijn.
Kijk voor meer informatie ook op Werken met data bij RVO | RVO.nl