Ik bouw een databricks data pipeline met delta lake
Data Engineer, Gecertificeerd in Databricks en Fabric, 4 jaar ervaring
Over deze dienst
Heb je een productieklare Databricks pipeline nodig die door een gecertificeerde engineer is gebouwd?
Databricks Certified Data Engineer Associate met 4 jaar ervaring, waaronder 2 jaar in het VK. Ik bouw schaalbare pipelines volgens enterprise best practices.
WAT JE KRIJGT:
Medallion architectuur (Bronze-Zilver-Goud)
Delta Lake voor ACID transacties
Unity Catalog governance
Geautomatiseerde workflows
Data kwaliteitstests
Prestatieoptimalisatie
Volledige documentatie
TECHNISCHE CAPACITEITEN:
- Volledige Medallion pipeline implementatie
- Delta Live Tables
- Real-time streaming met Spark
- Integratie van meerdere databronnen
- PySpark transformaties
- Foutafhandeling en monitoring
- Deployment op Azure Databricks
DATA BRONNEN:
CSV, JSON, Parquet, Azure Blob/ADLS, SQL databases, REST API's, streaming (Kafka, Event Hubs)
WAAROM IK:
- Databricks & Fabric gecertificeerd
- 4 jaar professionele ervaring
- Opleiding in het VK volgens enterprise standaarden
- Productiekwaliteit
- Ondersteuning na oplevering
Meer dan 5 productie Databricks pipelines gebouwd die dagelijks miljoenen records verwerken.
Stuur me een bericht voordat je bestelt om de wensen te bespreken!
Tools & platforms:
Azure Data Factory
•
Overige
Mijn portfolio
Andere Data engineering diensten die ik aanbied
Veelgestelde vragen
Automatische vertaling
Wat moet ik aanleveren om aan de slag te gaan?
Jouw databronnen (bestanden, database-inloggegevens of API-details), zakelijke vereisten, gewenste transformaties en eventuele KPI's die je wilt volgen. Ik begeleid je door de rest en ontwerp de architectuur.
Lever je de Databricks code en notebooks aan?
Ja! Je ontvangt alle Databricks notebooks, workflow configuraties en volledige documentatie. Alles is van jou om te wijzigen en te onderhouden.
Kun je werken met mijn bestaande Azure infrastructuur?
Absoluut! Ik kan integreren met je bestaande Azure resources (Storage Accounts, SQL databases, Event Hubs, etc.) en volg de standaarden en beveiligingsbeleid van jouw organisatie.
Wat is inbegrepen bij Unity Catalog setup?
Unity Catalog configuratie omvat workspace setup, metastore creatie, data governance policies, toegangscontrole en lineage tracking. Beschikbaar in Standard en Premium pakketten.
Bieden jullie ondersteuning na de bevalling?
Ja! Alle pakketten omvatten ondersteuning na oplevering. Standaard 30 dagen, Premium 60 dagen. Ik ben beschikbaar om vragen te beantwoorden en te helpen met kleine aanpassingen.

