Datalake Engineer

Voor VNG Realisatie BV zijn wij op zoek naar een Datalake Engineer.

Omschrijving opdracht:
Je bent werkzaam in het programma Omgevingswet bij VNG en in nauwe samenwerking met één van de ketenpartners, het Kadaster. Binnen het programma zijn wij op diverse wijzen betrokken in het ontwikkelingsproces met betrekking tot het Digitaal Stelsel Omgevingswet (DSO). Om te zorgen dat het gehele digitale stelsel (zowel landelijke- als lokale voorzieningen) blijven voldoen aan de wensen en behoeften van gemeenten, stuurt de VNG in samenwerking met o.a. het Kadaster op de realisatie en doorontwikkeling van deze voorzieningen. Het Kadaster is ketenpartner in het Digitaal Stelsel van de Omgevingswet (DSO). Het Kadaster is samen met andere ontwikkelpartners georganiseerd in operationele beheerorganisaties (OBO’s). De diensten die de verschillende OBO’s ontwikkelen en beheren, vormen de operationele keten van het DSO-LV. De teams binnen de OBO’s werken nauw samen om de gewenste functionaliteit voor het programma Digitaal Stelsel Omgevingswet te realiseren. In dat programma werken verschillende organisaties op een Agile wijze samen op basis van het SAFe framework. Dat betekent onder andere dat er wordt gewerkt in sprints van 2 weken en Program Increments van een kwartaal. De dienst TBO-monitoring (Tactische beheer organisatie) van het Kadaster gaat over de tooling voor het bewaken van de technische en functionele werking van het DSO- LV. Er is hiervoor een aantal dashboards ontwikkeld die nog een verbeterslag kunnen gebruiken en we zijn bezig met het opzetten van een nieuw dashboard voor het weergeven van allerhande informatie over de werking van de Service keten. Voor het uitbreiden en door ontwikkelen van deze tooling zijn wij voor het DSO monitoring team op zoek naar een Datalake Engineer.

Werkzaamheden en verantwoordelijkheden
In deze periode wordt de betreffende functionaliteit geleidelijk ondergebracht in de viewer(s) binnen het omgevingsloket Voor de Datalake Engineer zijn de belangrijkste verantwoordelijkheden:
- Aansluiten van alle ketencomponenten (databronnen), i.s.m. ketenpartners.
- Ontwikkelen en beheren van het DSO-LV AKS data cluster.
- Ontwikkelen en beheren van de Azure Synapse SaaS oplossing.
- Ontwikkelen en beheren van PowerBI dashboards en rapportages, i.s.m. stakeholders. Taken zijn:
- (Mede) vertalen van Serviceketenwensen naar informatie oplossingen.
- Sparren over ontwerpkeuzes / toekomstbestendige oplossingen.
- Peer-reviewing en borgen van kennis (documentatie en kennisdeling).
- Afstemmen met PO en Senior Integratiespecialist.
- Afstemmen met en implementeren bij de ketenpartners.
- Het uitvoeren van onderhoud en het verhelpen van bugs en verstoringen. Belangrijkste technieken, methoden en tools
- Container/Orchestration technologie (Docker/Kubernetes)
- Network tooling en concepten (proxy’s, ssl, etc)
- CI/CD tooling (Gitea, Jenkins)
- Monitoring tooling (Prometheus, Grafana, Kibana, Event Hub)
- EDW tooling (KAFKA, Blob Storage, Azure Synapse, CosmosDB, PowerBI)
- Python
- PromQL
- NoSQL
- openMetrics, OpenTelemetry
- Issue tracking (Jira)

Resultaat van de opdracht:
• Opgeleverde gewenste monitoring data, dashboards en rapportages aan stakeholders van de Serviceketen (aantallen meldingen, doorlooptijden door de hele keten, etc).
• Aangesloten ketencomponenten in samenwerking met het DSO-LV Monitoring team en de ketenpartners;
• Een uitgebreide en doorontwikkelde EDW tooling, met name Azure Synapse/PowerBI.

Omschrijving opdrachtgever:
Wij zijn de Vereniging van Nederlandse Gemeenten (VNG). De vereniging heeft als doel om de lokale overheid te versterken, zodat gemeenten hun inwoners optimaal kunnen bedienen. Dat dragen we in ons hart en daar werken we iedere dag met veel bevlogenheid aan. 344 gemeenten bepalen onze en dus ook jouw agenda. Vaak wordt die beïnvloed door de dagelijkse actualiteit, maar altijd vanuit het belang van onze leden. We zijn een lerende organisatie, we stellen ons continu de vraag waar we staan en wat we kunnen verbeteren. Binnen de VNG is het programma Omgevingswet met ongeveer 80 mensen actief om hun gemeentelijke achterban te stimuleren en te faciliteren om tijdig klaar te zijn voor de invoering van de Omgevingswet (OW) en de Wet Kwaliteitsborging van het bouwen (WKB). Ook behartigt het programma Omgevingswet de gemeentelijke belangen t.a.v. de OW en WKB.

1. Je bent op de in de profieltekst genoemde datum en tijdstip beschikbaar voor een matchgesprek.
2. Je bent beschikbaar voor de functie gedurende de periode en het aantal uur zoals beschreven in de offerteaanvraag.
3. Minimaal afgeronde (bachelor) hbo-opleiding
4. Minimaal 3 jaar ervaring als Datalake Engineer in zowel beheer- als vernieuwingstrajecten op de volgende gebieden:
− Container technologie en cloud concepten (Azure, Docker, Kubernetes)
− Netwerk tooling en concepten via proxies
− Monitoring tooling
− EDW tooling
− Agile en Scrum
5. Aantoonbare kennis van en werkervaring met de volgende tools
− Kubernetes
− Apache airflow
− Databricks
− Azure datalake storage
− Power Bi
− Python (pyspark)
6. We gaan uit van gebruik van eigen telefoon en laptop

1. De voorgestelde kandidaat heeft aantoonbare ervaring in het realiseren van informatievoorziening in het werkveld van ICT en datawarehouse beheer.
2. De voorgestelde kandidaat heeft aantoonbare kennis en ervaring in afstemming met gebruikers bij de ontwikkeling van software.
3. De voorgestelde kandidaat heeft aantoonbare kennis en ervaring van actuele platforms en de technieken voor de bouw van web toepassingen.
4. De voorgestelde kandidaat heeft kennis van de volgende tools: Jenkins, Gitea, Apache Kafka, Spark. PromQL, NoSQL, OpenMetrics, OpenTelemetry, Jira en NPM.
5. De voorgestelde kandidaat heeft minimaal 2 jaar ervaring in het werken met Scrumteams.

• Zelfstandig
• Proactief
• Flexibel
• Over eigen grenzen heen kijken en bereid zijn aanpalende werkzaamheden op te pakken
• Communicatief vaardig
• Gericht op samenwerking
• Organisatie-sensitief
• Klantgericht

Locatie: Thuis online, incidenteel Den Haag/Apeldoorn
Startdatum: 1-1-2023
Duur: 30-06-2023
Optie op verlenging:
Inzet: 18 - 36 uur per week
Tarief: marktconform
Sluitingsdatum: 12-12-2022
Sluitingstijd: 09.00 uur
Intakegesprek: 20 december 2022, tussen 13:00 en 15:00 uur

- CV in ”Word-formaat” geschreven in de taal van de uitvraag;
- Motivatie geschreven in de “ik-vorm”, waarin u zowel kort en bondig ingaat op de scope van de opdracht als puntsgewijs uw aansluiting op de eisen en wensen toelicht;
- Uw beschikbaarheid (per wanneer, aantal uren per week en vakantieplannen);
- Uw uurtarief specifiek voor de onderhavige aanvraag (inclusief reis- en verblijfskosten en excl. BTW).

N.B.
- Bij het ontvangen van uw reactie gaan wij er vanuit dat uw aanbieding voor deze aanvraag exclusief is. Hiermee wordt voorkomen dat uw aanbieding meerdere malen bij dezelfde opdrachtgever voor deze aanvraag wordt ingediend.
- Aangezien de functie eisen knock-out criteria zijn, en de functiewensen de gunningscriteria zijn, dient uw aansluiting hierop dan ook goed afleesbaar in uw cv te zijn opgenomen. Dit verhoogt namelijk een succesvollere behandeling van de aanbieding.
- Tijdens het selectieproces wordt u op de hoogte gehouden van de voortgang. Mocht u vragen hebben, dan staan wij u graag te woord.