Ik ga schaalbare datapijplijnen bouwen met pyspark, databricks en azure
Over deze dienst
Heb je te maken met trage SQL-query’s, rommelige data-silos of hoge cloud-kosten? Ik ben een Enterprise Data Engineer (Microsoft Azure-gecertificeerd) die gespecialiseerd is in PySpark, Azure Databricks, Delta Lake en SQL. Ik ontwerp, optimiseer en bouw fouttolerante data-architecturen die ruwe data omzetten naar analytics-ready en AI-ready pipelines.
Wat ik voor jou kan doen:
- ETL / ELT Pipeline-ontwerp: Schaalbare batch- en streaming-pijplijnen met PySpark, Databricks en Azure Data Factory (ADF).
- Medallion Lakehouse-architectuur: Structuur van ruwe data in Bronze, Silver en Gold Delta Lake-lagen op ADLS Gen2.
- Prestaties en kostenoptimalisatie: Trage Spark-taken oplossen, data-skew verhelpen, Oracle/PostgreSQL-query’s afstemmen en Z-Ordering/Liquid Clustering toepassen.
- AI & RAG Data Readiness: Koppel data lakes aan vector-databases (pgvector) en Kubernetes (AKS) voor real-time AI-retrieval.
Waarom met mij werken?
- Productieklaar, modulair codewerk met duidelijke architectuurdiagrammen.
- Diepe expertise in Azure, Databricks, Python en relationele databases.
- Duidelijke communicatie en een walkthrough na levering.
Stuur me een bericht voordat je bestelt zodat we jouw data-stack en scope kunnen afstemmen!
Veelgestelde vragen
Automatische vertaling
Kun je ook de daadwerkelijke PySpark / SQL-code schrijven naast het architectuurontwerp?
Ja! Naast audit en architectuurblauwdrukken schrijf ik production-ready PySpark-scripts, Databricks-notebooks en geoptimaliseerde SQL-queries. Stuur me je wensen voor een op maat gemaakte implementie-offer.

