Ik bouw je data pipeline met airflow en spark

Sommige informatie is automatisch vertaald.

Pakistan

Ik spreek Engels, Japans

Software ontwikkelaar

Ik ben een software engineer met 3 jaar ervaring in het ontwikkelen en optimaliseren van backend services voor grootschalige betalingsverwerkingssysteem. Ik heb batchverwerkingspijplijnen geïmplemente...
Over deze dienst

Betrouwbare, schaalbare en cloud-klare data pipelines bouwen.


Heb je moeite om je data efficiënt te verplaatsen of te transformeren? Ik ben gespecialiseerd in het bouwen van end-to-end data pipelines die het inladen, transformeren, valideren en laden automatiseren in cloud- en on-premises omgevingen.


Met meer dan 2,5 jaar ervaring en tools zoals Spark, SQL, Python, Databricks, Snowflake, AWS & GCP help ik je om rommelige ruwe data om te zetten in productieklare inzichten.


Wat ik aanbied:

  • ETL & ELT pipelines (batch & streaming)
  • Integratie met APIs, cloudopslag en databases
  • Cloud-native deployment: AWS Glue, Lambda, Azure ADF, Databricks, GCP Dataflow
  • Real-time architectuur met Kafka, Pub/Sub of Event Hubs
  • Data schoonmaken, kwaliteitscontroles, audit logging


Opmerking: Stuur me een bericht voordat je bestelt om zeker te weten dat ik je project perfect scopeer!


Taal:

Engels

Technische expertise:

dbt (Data Build Tool)

Apache Airflow

Expertise:

Datapijplijnen

ETL-ontwikkeling

Datawarehousing

Branche:

Audio en video

Gegevensanalyse

Financiële diensten