Cloud / Data Engineer – RVO - Verloning vacature

Vacatureomschrijving

Voor RVO zoeken wij een Cloud / Data Engineer.

Je komt te werken binnen het Programma AI van RVO, waarbij je bijdraagt aan de doelstelling om opschaling te doen van bestaande data AI oplossingen, medewerkers worden opgeleid en er geëxperimenteerd wordt met nieuwe toepassingen en technologieën.

Als Cloud / Data Engineer werk je actief mee aan de realisatie van schaalbare, efficiënte en veilige data-platforms in de Azure Cloud, waarbij Databricks of Kubernetes een centrale plek inneemt. Je werkt binnen een DevOps team aan oplossingen die techniek, beleid en concrete waarde voor Nederland verbinden.

Je komt te werken binnen het Programma AI van RVO, waarbij je bijdraagt aan de doelstelling om opschaling te doen van bestaande data AI oplossingen, medewerkers worden opgeleid en er geëxperimenteerd wordt met nieuwe toepassingen en technologieën.

• Ruime ervaring met het inrichten van de Medallion Architectuur (Bronze, Silver, Gold) binnen Databricks
• Vertalen van complexe business logica naar helder gestructureerde datasets, bij voorkeur volgens Kimball (dimensioneel modelleren)
• Bouwen van robuuste goud-lagen
• Ontwikkelen van robuuste datapijplijnen met Kubernetes, PySpark en SQL
• Kennis van de mogelijkheden van Spark Declarative Pipelines (SDP)
• Ontwerpen van modulaire en onderhoudbare transformaties met dbt (data build tool)
• Maximaliseren van de platform-performance door inzet van de juiste Databricks compute clusters en het benutten van schaalmogelijkheden
• Optimalisaties binnen Delta Lake, zoals Partitioning, Clustering, Z-Ordering en Liquid Clustering
• Inrichten van centrale governance via Unity Catalog
• Implementeren van RBAC (Role-Based Access Control)
• Hanteren van data security best practices als standaard bij de bouw van oplossingen
• Automatisering en ‘Engineering Excellence’ via Databricks Asset Bundles (DABs) voor betrouwbare en reproduceerbare deployments
• Instrumenteren, monitoren en debuggen van Databricks jobs, pijplijnen en platform componenten
• Met Django API’s ontwikkelen, authenticatie implementeren en zorgen voor betrouwbare koppelingen met databases, waaronder Postgres
• Zorgen voor goede monitoring en logging (Application Insights, Databricks metrics) en idealiter ervaring met MLOps (model lifecycle management)
• Ervaring in het opleiden van interne medewerkers, waarbij kennis wordt overgedragen en aantoonbaar de expertise van teamleden wordt verhoogd

Eisen

• Deze functie is niet geschikt voor zzp’ers en daarom ontvangen wij graag Cv’s van medewerkers die in loondienst zijn van een bedrijf waar zij geen eigenaar van zijn
• Toelichting op eisen & wensen: door verscherpte controle op het voldoen aan de eisen en wensen vragen wij u om per eis en wens duidelijk toe te lichten op welke wijze de kandidaat daaraan voldoet. Het is hierbij niet voldoende om enkel te verwijzen naar het Cv of om passages hieruit te kopiëren. Wij verzoeken u om per eis en wens een korte, concrete toelichting van één à twee zinnen te beschrijven waaruit blijkt dat de kandidaat aan de eis voldoet en passend is op basis van de wensen. Dit moet herleidbaar zijn uit het Cv
• De kandidaat heeft minimaal 4 jaar aantoonbare ervaring met Cloud data platforms op Microsoft Azure met Databricks, aantoonbaar middels Cv
• De kandidaat heeft minimaal 3 jaar ervaring in het ontwerpen en realiseren van dataplatformen, datapijplijnen met Kubernetes
• De kandidaat heeft minimaal 3 jaar ervaring in het ontwerpen en uitwerken van een technische data solution architectuur, met aandacht voor Governance Security
• De kandidaat heeft minimaal 3 jaar ervaring in het ontwikkelen van datapijplijnen met PySpark en SQL

Wensen

• De kandidaat heeft aantoonbare kennis van en ervaring met Microsoft Azure, in het bijzonder Databricks, Storage, Active Directory en Key Vault
• De kandidaat heeft binnen één of meerdere opdrachten aantoonbaar de verantwoordelijkheid gedragen voor de resalisatie van (een significant deel van) een data-platform, waarbij hij of zij betrokken is geweest vanaf de start van het traject tot en met de implementatie en oplevering van de oplossing. De ervaring blijkt uit de beschrijving van de werkzaamheden en resultaten in het Cv
• Kennis van en ervaring met het naar productie brengen van modellen en deze te beheren en schalen met Azure, Kubernetes, Databricks
• Werkt volgens best practices (CI/CD, testing, versioning, IaC), blijkend uit concrete voorbeelden in Cv of motivatie
• In staat om collega's/teamleden te laten groeien in data-engineering vaardigheden, blijkend uit concrete voorbeelden in Cv of motivatie

Competenties

• Analyseren
• Klantgerichtheid
• Omgevingsbewustzijn
• Plannen en organiseren
• Resultaatgerichtheid
• Samenwerken
• Voortgangscontrole
• Zelfontwikkeling
• Resultaatgericht in samenwerking
• Continu op zoek naar verbetering
• Professionele beheersing van de Nederlandse taal

Overige informatie

Een duurzame, economisch sterke samenleving: daar werken we aan bij de Rijksdienst voor Ondernemend Nederland (RVO). Met nationale en internationale programma’s, van de energietransitie en voedselproductie tot ontwikkelingsprojecten in Afrika.

Met voorlichting, advies, financiering, subsidies en hulp bij het vinden van zaken- of kennispartners. Door slim organiseren en maximaal gebruik van digitale communicatie zorgen we voor een soepele en optimale dienstverlening. Door elkaar op te zoeken en verbindingen te leggen bieden we nieuwe inzichten en mogelijkheden.

Voor en achter de schermen zetten 6000 mensen zich in voor een economisch sterk, innovatief en duurzaam Nederland, op verschillende vestigingen in Nederland.

Ook voor jou zijn er kansen! Onze adviseurs weten als geen ander wat er nodig is om ondernemende Nederlanders vooruit te helpen. Beoordelaars nemen subsidie- en andere verzoeken onder de loep en helpen de aanvragers om nieuwe stappen te zetten.

Inkopers benutten de inkoopkracht van de Rijksoverheid, ook om maatschappelijke doelen te bereiken. De medewerkers van de frontoffice staan iedereen te woord die vragen heeft. Functioneel beheerders ontwikkelen en onderhouden digitale loketten. Projectmanagers onderzoeken wat de mogelijkheden van big data zijn. Juristen zorgen dat we ons houden aan wet- en regelgeving. En communicatieadviseurs ontwikkelen toegankelijke websites voor voorlichting en advies.

Wie ondernemend Nederland een warm hart toedraagt, kan bij onze organisatie dus alle kanten op.