Wil je je data workflows automatiseren? Ik ben gespecialiseerd in het bouwen van schaalbare, kosteneffectieve ETL pipelines met Python en AWS, waarmee je ruwe data wordt omgezet in bruikbare inzichten.
Wat ik voor je kan doen:
- AWS Glue Jobs: Het ontwikkelen van robuuste ETL scripts met PySpark voor grootschalige data verwerking of Python Shell voor lichte integraties.
- Serverless pipelines: Het bouwen van event-gedreven workflows met AWS Lambda en S3 triggers.
- Data orchestratie: Het opzetten en beheren van workflows met AWS Step Functions of Glue Workflows.
- Data laden: Data efficiënt laden in Amazon Redshift, S3 (Data Lakes) of RDS.
- API integratie: Data ophalen uit third-party APIs met Python en veilig opslaan in AWS.
- Optimalisatie: Het verfijnen van bestaande Glue jobs om DPU (Data Processing Unit) kosten te verlagen.