Ik bouw schaalbare data pipelines en ETL met python, sql, airflow en databricks
Over deze dienst
Wil je betrouwbare data pipelines die gewoon werken? Ik ben een Data Engineer met een M.Sc. in Data Science en ervaring in de industrie bij Amazon en Tata Consultancy Services, waar ik pipelines bouwde die meer dan 1TB data verwerkten voor meer dan 100 analisten.
Wat ik voor je kan bouwen:
- ETL/ELT pipelines in Python en SQL
- Data-integratie van APIs, databases, CSV/Excel en cloud storage
- Geplande workflows met Apache Airflow
- Data warehouses en dbt modellen
- Databricks en PySpark verwerking voor grote datasets
- Data schoonmaak, validatie en kwaliteitscontroles
- Pipelines op AWS, GCP of Databricks
Waarom met mij werken:
- Bij Amazon heb ik de verwerkingstijd van pipelines met 30% verminderd en 95% van handmatige datawerkzaamheden geëlimineerd door automatisering
- Databricks Certified Data Engineer
- Schoon, gedocumenteerd en getest code dat jij volledig bezit
- Duidelijke communicatie en op tijd leveren
Hoe het werkt:
- Stuur me een bericht met je data bronnen en doel
- Ik bevestig de scope en het juiste pakket
- Je ontvangt werkende code, documentatie en een walkthrough
Weet je niet welk pakket het beste past? Stuur me een bericht voordat je bestelt, en ik reageer snel.
Veelgestelde vragen
Automatische vertaling
Wat heb je van mij nodig om te beginnen?
Toegang tot of voorbeelden van je data bronnen, de doelbestemming (database, warehouse of bestanden), en een korte beschrijving van de verwachte output. Inloggegevens kunnen veilig worden gedeeld nadat de opdracht is gestart.
Met welke tools en platforms werk je?
Python, SQL, PySpark, Apache Airflow, dbt, Kafka en Databricks, op AWS, GCP of PostgreSQL. Als je een andere stack gebruikt, stuur me eerst een bericht en ik bevestig of ik kan helpen.
Wordt de code van mij?
Ja. Je ontvangt de volledige source code, documentatie en setup-instructies, en het is 100% van jou om te gebruiken en aan te passen.
Kun je werken met mijn bestaande pipeline of database?
Ja. Ik kan bestaande pipelines uitbreiden, repareren of optimaliseren. Deel alsjeblieft details voordat je bestelt zodat ik het correct kan inschatten.
Hoe houd je mijn data veilig?
Ik gebruik alleen de toegang die nodig is voor de taak, deel of bewaar je data nooit buiten het project, en ik kan werken met geanonimiseerde voorbeeldgegevens als je dat liever hebt.
Wat als mijn project niet in een pakket past?
Stuur me een bericht met je wensen en ik maak een aangepaste aanbieding die past bij jouw scope en budget.

