Freelance Data Ingestion Engineer opdracht

Als Data Ingestion Engineer werk je bij de Nederlandse Spoorwegen (NS) aan het data-ingestieplatform van team Lakehouse binnen de afdeling Data Innovatie & Analyse (DIA). Jouw rol is cruciaal voor het automatiseren van repeterende processen, het onderbouwen van beslissingen en het maken van toekomstgerichte voorspellingen door middel van datagedreven werken. Je ontwikkelt core services in Python voor het platform, waaronder generieke componenten voor API’s, FTP en data push-principes, en zorgt voor validatie, versioning en metadata-management om een betrouwbare ‘brons en zilver layer’ in Databricks aan te bieden. Daarnaast werk je met RDBMS zoals Postgres, containers in Azure Container Apps, en ontwerp en bouw je API’s. Je bent onderdeel van een autonoom scrumteam met zes developers, een UX-designer, een Scrum Master en een Product Owner, en werkt hybride (hoofdkantoor in Utrecht of thuis) met flexibiliteit voor reizen binnen Nederland. Voor deze rol heb je minimaal HBO werk- en denkniveau, 3 jaar ervaring in een soortgelijke rol, uitstekende beheersing van de Nederlandse taal, ervaring met Azure (Function Apps, Container Apps, ADLS Gen2), schaalbare microservice-architecturen, Infrastructure as Code (Terraform of Bicep), en kennis van Databricks of Snowflake. Ervaring met OTF is een pré.