Ik bouw een etl-pipeline, data schoonmaken, data verrijken

Sommige informatie is automatisch vertaald.

China

Ik spreek Chinees, Engels

Data engineer, ETL, APIs en BI automatisering

Hoi, ik ben Jay — een Data Engineering en Automation specialist met ervaring in het leiden van een team van meer dan 15 Data Engineers. Ik help bedrijven bij het bouwen van schaalbare data-oplossinge...
Over deze dienst

Wat ik kan doen

Ik help bedrijven hun data workflows te automatiseren, organiseren en optimaliseren, van verzameling tot rapportage.


Mijn diensten omvatten:

SQL query ontwikkeling en optimalisatie

Geautomatiseerde data workflows en rapportagesystemen

Batch data verwerking met schaalbare oplossingen

Real-time data verwerking en streaming pipelines

Data schoonmaak, transformatie en integratie

API integratie en automatische data synchronisatie

Database- en data warehouse ontwerp

Business rapportage en dashboard oplossingen

Power BI en Tableau data visualisatie

End-to-end data automatiseringsoplossingen voor startups en bedrijven


  • Ervaring in het migreren van data van legacy systemen (On-premise) en APIs naar Azure Data Lake, waarbij complexe transformaties op data worden uitgevoerd met DataBricks (Python en PySpark), en de verwerkte data worden verplaatst naar SQL Server / PostgreSQL / Data of Delta Lake.


  • Ervaring in het implementeren van schaalbare end-to-end geoptimaliseerde workflows op Azure Data Factory / Databricks om data uit diverse bronnen te extraheren, verwerken en opslaan.

Technologie:

Apache Hadoop

Apache Kafka

Java

Python

Scala

Expertise:

API integratie

Data-acquisitie

Data-extractie

Mijn portfolio

Andere Gegevensverwerking diensten die ik aanbied