Ik bouw python, etl data pipelines en automatiseer data workflows
Gegevensingenieur
Over deze dienst
Ben je op zoek naar robuuste, schaalbare en geautomatiseerde ETL/ELT data pipelines? Ik help bedrijven hun data naadloos te extraheren, schoon te maken, te transformeren en te laden in moderne databases en cloud data warehouses.
Met meer dan 2 jaar praktische ervaring in Data Engineering, specialiseer ik me in het bouwen van betrouwbare, fouttolerante data workflows met Python, SQL en AWS.
Wat ik voor jou kan doen:
Aangepaste ETL/ELT pipelines: Geautomatiseerde invoer vanuit REST API's, webhooks, databases of platte bestanden (CSV/JSON/Parquet).
Cloud data warehousing: Schema ontwerp, modellering en laden in Snowflake, AWS
Query optimalisatie & tuning: Langzame SQL queries versnellen en prestatieknelpunten oplossen.
Workflow orchestratie: Planning, afhankelijkheidsmapping en automatische meldingen met Apache Airflow.
Real-time data streaming: Near real-time pipelines met Apache Kafka.
Data kwaliteit & automatische tests: Validatiecontroles en pytest unit tests om datacorruptie te voorkomen.
Technische stack & tools:
Talen: Python, SQL
Databases & warehouses: Snowflake, MySQL
Cloud & Big Data: AWS (S3), Kafka, Airflow
Stuur me gerust een bericht met je dataformaat en projectvereisten voordat je een bestelling plaatst!
Bestemmingsplatform:
Snowflake
•
Amazon S3
Tools & platforms:
Overige
Veelgestelde vragen
Automatische vertaling
Welke details heb je van mij nodig voordat je begint?
Geef een korte overzicht van je projectvereisten, voorbeeld input data bestanden of schema's, doel database/doel locatie details en benodigde API-gegevens of toegangsrechten.
In welke tools en technologieën bent u gespecialiseerd?
Ik ben gespecialiseerd in Python en SQL voor het bouwen van geautomatiseerde data-invoer, transformatiescripts en database workflows. Ik werk veel met REST API's, platte bestanden (CSV, JSON, Excel) en relationele databases.
Wat als mijn vereisten niet passen bij de vooraf ingestelde gig-pakketten?
Geen probleem. Elke data-architectuur is uniek. Stuur me een direct bericht met uitleg over je setup, en ik maak een op maat gemaakte Custom Offer op basis van jouw exacte scope en planning.
Hoe zorg je voor datakwaliteit en betrouwbaarheid van de pipeline?
Ik implementeer schema validatieregels, data kwaliteit checks, edge-case handling (zoals null of duplicaten) en automatische unit tests om te zorgen dat de pipeline betrouwbaar draait zonder stilzwijgend te falen.
Bied je documentatie en ondersteuning na levering?
Ja. Elke voltooide levering bevat duidelijke setup documentatie en code comments zodat je de pipeline makkelijk kunt onderhouden en bedienen in de toekomst.

