Freelance Cloud/Data Engineer - Hero Interim Professionals opdracht

Duur: 7 Maanden. Voor de Rijksdienst voor Ondernemend Nederland (RVO) in Utrecht zijn wij op zoek naar een Cloud/Data Engineer. Als Cloud/Data Engineer bouw je aan schaalbare, efficiënte en veilige data-platforms in de Azure-cloud, met Databricks als technisch hart. Je werkt nauw samen met data scientists, ML engineers en business stakeholders aan oplossingen die technologie, beleid en concrete maatschappelijke waarde verbinden.Data Architectuur & Modellering Je richt de Medallion Architectuur (Bronze, Silver, Gold) in binnen Databricks en vertaalt complexe businesslogica naar helder gestructureerde datasets — bij voorkeur via dimensioneel modelleren volgens Kimball. Je bouwt robuuste goudlagen en maakt gebruik van Metric Views, zodat rapportages en analyses altijd op de juiste dataset steunen.Engineering & Transformaties Je ontwikkelt robuuste datapijplijnen met PySpark en SQL, en benut de mogelijkheden van Spark Declarative Pipelines (SDP). Met je kennis van dbt ontwerp je modulaire, goed onderhoudbare transformaties die aansluiten op de behoeften van de organisatie.Storage & Performance-optimalisatie Je maximaliseert de platformprestaties door de juiste Databricks compute clusters in te zetten en schaalmogelijkheden slim te benutten. Je past Delta Lake-optimalisaties toe zoals Partitioning, Clustering, Z-Ordering en Liquid Clustering.Governance & Security Je richt centrale governance in via Unity Catalog, implementeert Role-Based Access Control (RBAC) en maakt data security best practices een vanzelfsprekend onderdeel van elke oplossing.Platform & Deployment Je automatiseert deployments via Databricks Asset Bundles (DABs) voor betrouwbare en reproduceerbare releases. Daarnaast instrumenteer, monitor en debug je Databricks jobs, pijplijnen en platformcomponenten — en draag je zo bij aan Engineering Excellence binnen het team. Je hebt minimaal 3 jaar aantoonbare ervaring met het ontwerpen en bouwen van een cloud data platform op Azure met Databricks, inclusief het integreren, opschonen en beschikbaar maken van data voor business intelligence-toepassingen, aantoonbaar middels cv en/of motivatie.Je hebt minimaal 3 jaar aantoonbare ervaring met het ontwerpen en uitwerken van technische data solution-architecturen, met specifieke aandacht voor governance en security, aantoonbaar middels cv en/of motivatie.Je hebt minimaal 2 jaar aantoonbare ervaring met het ontwikkelen van robuuste datapipelines met PySpark en SQL, aantoonbaar middels cv en/of motivatie.WensenJe hebt kennis van en ervaring met backendontwikkeling en SQL/Postgres. Met Django ontwikkel je API’s, implementeer je authenticatie en realiseer je betrouwbare koppelingen met databases, waaronder PostgreSQL.Je hebt kennis van en ervaring met monitoring en MLOps, waaronder monitoring en logging via bijvoorbeeld Application Insights en Databricks Metrics. Ervaring met model lifecycle management is een pré.Je hebt kennis van en ervaring met Microsoft Azure, in het bijzonder Databricks, Storage, Active Directory en Key Vault.Je hebt ervaring met het veilig en compliant beheren van data, inclusief toegangsbeheer, encryptie en privacywetgeving.Je hebt kennis van en ervaring met het bouwen, integreren en beheren van betrouwbare en efficiënte datapipelines en dataplatformen ten behoeve van analyse en rapportage.Je hebt kennis van en ervaring met het inrichten van de Medallion Architectuur (Bronze, Silver, Gold) binnen Databricks.Je hebt kennis van en ervaring met de mogelijkheden van Spark Declarative Pipelines (SDP).Je bent in staat complexe data-architecturen te ontwerpen en implementeren, met focus op schaalbaarheid, security en integratie van cloud- en dataplatformen. Wil je ons een open sollicitatie sturen? Voor iedereen die geen idee heeft wat Hero doet, maar dat wél graag wil weten, hebben wij een speciale website ontwikkeld waarbij wij onze dienstverlening simpel uitleggen: Hero for Dummies