Ik ben jouw expert databricks en pyspark data engineer voor etl-pijplijnen
Senior Data en AI engineer, Databricks gecertificeerd, 11 jaar
Over deze dienst
Heb je bulletproof Databricks-pipelines die niet kapot gaan om 3 uur 's nachts? Je bent op de juiste plek.
Ik ben een Databricks Certified Data Engineer (Professional) met meer dan 10 jaar ervaring in het bouwen van productie data systemen voor energiehandel, bankwezen, retail en crypto-analytics bedrijven, waaronder OVO Energy, Bank of America en Sainsbury's.
Wat ik voor je maak:
- ️Schaalbare PySpark / Scala Spark pipelines op Databricks
- DeltaLake architectuur (brons, zilver, goud medaille)
- Streaming + batch ETL met Kafka, Auto Loader of Structured Streaming
- Kostenoptimalisatie van clusterconfiguraties (ik heb meer dan £80k bespaard op jaarlijkse cloudkosten)
- Schoon, getest en gedocumenteerd code die je aan je team kunt geven
Mijn stack: Databricks, PySpark, Scala, DeltaLake, Airflow, Kafka, Snowflake, BigQuery, Terraform, AWS, GCP.
Mijn proces: Discovery call -> architectuur goedkeuring -> bouwen -> testen -> walkthrough -> overdracht. Geen verrassingen, geen scope creep.
Stuur me een bericht voordat je bestelt zodat ik je project goed kan inschatten en bevestigen dat het past. Ik reageer binnen 1 uur tijdens UK werkuren.
Laten we iets solides bouwen.
Veelgestelde vragen
Automatische vertaling
Welke informatie heb je nodig om aan de slag te gaan?
Bronlocatie en formaat van data, doelbestemming, voorbeeldgegevens (geanonimiseerd is prima), volume schattingen en SLA-vereisten. Ik stuur een korte briefing sjabloon na bestelling.
Kun je werken met mijn bestaande cloud setup?
Ja — ik werk met AWS, GCP en Azure-gehoste Databricks. Ik werk binnen jouw omgeving met alleen-lezen credentials die jij aanlevert.
Ondertekent u NDA's?
Absoluut. Stuur me je NDA voordat je bestelt en ik zal deze bekijken en ondertekenen.
Wat als ik nog geen data heb?
Geen probleem — ik kan realistische data simuleren voor ontwikkeling en later kun je productiegegevens inwisselen.
Behandel je real-time streaming pipelines?
Ja — Structured Streaming, Auto Loader en Kafka integraties zijn mijn kernsterktes.
Wat gebeurt er na de bevalling?
Je krijgt een walkthrough (call of Loom), alle broncode, README en 14 dagen e-mailondersteuning voor vragen. Premium tier bevat een 30-minuten overdracht call.
Welke support krijg ik na levering?
Bij elke dienst krijg je 14 dagen e-mail support — ik beantwoord vragen binnen 24 uur, en als iets dat ik heb gemaakt niet doet wat het moet, repareer ik het snel zonder extra kosten. Het Premium pakket voegt een 30-minuten overdrachtsgesprek toe, zodat jij en je team helemaal klaar zijn om het werk te draaien en uit te breiden.

