Ik bouw AWS ETL-pijplijnen met airflow, spark en python

Sommige informatie is automatisch vertaald.

Mexico

Ik spreek Spaans, Engels

Senior Data Engineer

Ik ben een onafhankelijke data engineer met meer dan 20 jaar ervaring in IT en meer dan 10 jaar gespecialiseerd in grote dataplatforms. Ik ontwerp, bouw en optimaliseer ETL/ELT-pijplijnen, data lakes ...
Over deze dienst

Senior Data Engineer met meer dan 10 jaar ervaring in het bouwen van productie-ETL voor Fortune 500-klanten (Expedia, Ford, HP).

Ik ontwikkel betrouwbare, productieklare AWS data pipelines met Python, PySpark, Airflow en Spark, geen wegwerpscripts. Echte engineering: partitionering, broadcast joins, orkestratie en testen.

Track record:

Verlaagde een HiveQL-job van 64 uur naar minder dan 3 uur (95,6% sneller)

Gecertificeerd 500 TB data van Hadoop naar AWS gemigreerd, volledig gevalideerd

Eigen multi-tenant SaaS-platform gebouwd en beheerd van begin tot eind

Wat je krijgt: schone, gedocumenteerde en deploybare code pipelines die jouw team kan onderhouden, geen black box.

Gebaseerd in Mexico (overlap met US-tijdzone), realtime samenwerking tijdens jouw kantooruren. Vloeiend in Engels.

Weet je niet welke package het beste past? Stuur me eerst een bericht en ik bespreek het met je.

Bestemmingsplatform:

Amazon Redshift

PostgreSQL

MySQL

Apache Hive

Tools & platforms:

AWS Glue DataBrew

Overige

Mijn portfolio