Ik ontwikkel cloudgebaseerde data workflows met gcp bigquery airflow en dataflow
Over deze dienst
Ik ontwerp en bouw cloudgebaseerde data workflows met Google Cloud Platform (GCP), BigQuery, Airflow en Dataflow.
Met meer dan 4 jaar ervaring als GCP Data Engineer, specialiseer ik me in:
Het bouwen van ETL/ELT pipelines voor data-inname en transformatie
Het ontwikkelen van datawarehouses in BigQuery met partitionering en clustering
Het automatiseren van workflows met Apache Airflow / Cloud Composer
Het implementeren van data quality checks en validatiescripts met Python en SQL
Het migreren van data van bronnen zoals Salesforce, Oracle, Hive, MySQL naar BigQuery
Of je nu een eenvoudige ETL pipeline nodig hebt of een complete end-to-end data engineering oplossing, ik lever schaalbare, geoptimaliseerde en betrouwbare workflows die op maat gemaakt zijn voor jouw bedrijfsbehoeften.
Mijn portfolio
Veelgestelde vragen
Automatische vertaling
V1: Welke informatie heeft u van mij nodig om te kunnen beginnen?
Ik heb toegang nodig tot jouw data bron (database, API of bestanden), details over de bestemming (bijvoorbeeld BigQuery dataset), en eventuele specifieke transformatie/bedrijfslogica die je wilt toepassen.
Q2: Kan je werken met meerdere data bronnen?
Ja, ik kan data integreren van verschillende bronnen zoals Salesforce, Oracle, Hive, MySQL, APIs en Google Cloud Storage naar BigQuery of andere doelen.
Q3: Stel je ook planning en automatisering in?
Ja, ik gebruik Apache Airflow / Cloud Composer om workflows te plannen en te automatiseren zodat je pipelines betrouwbaar draaien zonder handmatige tussenkomst.
Q4: Kan je de data valideren en de kwaliteit waarborgen?
Absoluut. Ik voeg data quality checks toe zoals validatie van rijnummer, schema consistentie en aangepaste Python/SQL tests om een nauwkeurige data-inname te garanderen.
Q5: Wat als ik toekomstige wijzigingen of ondersteuning na levering nodig heb?
Ik bied revisies aan als onderdeel van elk pakket, en ik ben ook beschikbaar voor langdurige ondersteuning via Fiverr’s doorlopende projecten of op maat gemaakte aanbiedingen.
