Ik bouw schaalbare data pipelines, ETL-workflows en cloud data oplossingen
Over deze dienst
Heb je moeite met het beheren van rommelige ruwe data of het stroomlijnen van je data workflows? Ik help je graag!
Als een ervaren Data Engineer specialiseer ik me in het ontwerpen en ontwikkelen van end-to-end data pipelines die schaalbaar, cloud-klaar en geoptimaliseerd voor prestaties zijn. Ik heb een diepgaand begrip van het omzetten van complexe datasets in bruikbare zakelijke inzichten.
Wat ik aanbied:
ETL/ELT pipeline creatie (Batch & streaming)
Cloud-gebaseerde deployment: AWS Glue, Lambda, Azure Data Factory, Databricks, GCP Dataflow
Real-time verwerking met Kafka, Pub/Sub of Event Hubs
API-integratie en cloud opslag ondersteuning
Data validatie, schoonmaak en kwaliteitscontrole
Automatisering van data-inname, transformatie en laden
PostgreSQL, NoSQL, Snowflake, Databricks integratie
Technische stack:
Python, SQL, Spark, PySpark, Apache Kafka, AWS, Azure, GCP, Databricks, PostgreSQL, NoSQL, Hadoop, Snowflake en meer.
Tools & platforms:
Azure Data Factory
•
Overige
