Freelance Big Data Engineer Opdrachten

Wat doet een freelance Big Data Engineer?

Een freelance Big Data Engineer ontwerpt en bouwt de infrastructuur en pipelines die grote hoeveelheden data verwerken, opslaan en beschikbaar stellen voor analyse. De big data engineer werkt met gedistribueerde verwerkingssystemen en cloud-native data platforms om betrouwbare en schaalbare datastromen te realiseren.

Vaardigheden en kennis

Apache Spark, Hadoop, Kafka, Databricks, Airflow, Hive, data lake architecturen (Azure Data Lake, AWS S3, GCP BigQuery), Python of Scala, SQL, ETL/ELT-processen, data modellering en cloudplatforms.

Typische taken als freelance Big Data Engineer

Ontwerpen en bouwen van schaalbare datapipelines; implementeren van batch- en streamingverwerkingsprocessen; inrichten van data lake en data warehouse architecturen; optimaliseren van Spark-jobs en queryprestaties; bewaken van datakwaliteit en lineage; samenwerken met data scientists en analisten; documenteren van data-architectuur.

Uurtarief freelance Big Data Engineer

Het uurtarief van een freelance Big Data Engineer varieert tussen €85 en €135 per uur. Engineers met Databricks-certificering of ervaring in real-time streaming architecturen vragen hogere tarieven.