Ik bouw pyspark ETL-pijplijnen voor batch- en streaminggegevens op AWS

Sommige informatie is automatisch vertaald.

Pakistan

Ik spreek Urdu, Engels

1 bestelling voltooid

Data Engineer voor PySpark, AWS en QuickSight

Ik ben Muhammad Zeeshan, een Data Engineer die fulltime werkt aan AWS-dataplatforms. Ik bouw PySpark ETL-pijplijnen (batch en streaming) op Amazon EMR, zet S3-datalakes op en vertaal de resultaten naa...
Over deze dienst

Nodig je betrouwbare PySpark-taak of een volledige ETL-pijplijn? Ik ben fulltime data engineer en het bouwen van batch- en streaming-pijplijnen met PySpark op AWS is mijn dagelijkse werk.


Wat ik voor je kan doen:

- PySpark ETL-baar schrijven: inlezen, schoonmaken, transformeren, laden

- Grote datasets in batch verwerken op Amazon EMR

- Streaming jobs bouwen voor real-time data

- Je taken integreren met Apache Hive en Apache Hudi

- Een data lake op Amazon S3 opzetten of organiseren

- Bestaande PySpark-code optimaliseren of debuggen


Wat je krijgt:

- Schone, commentaarrijke code

- Korte notities over hoe je het draait en plant

- Antwoorden meestal binnen een uur


Hoe het werkt:

1. Stuur me je databron, je doel en de transformatie die je nodig hebt

2. Ik bevestig scope, prijs en tijdlijn

3. Ik lever de code en pas deze aan op basis van jouw feedback


Stuur me alsjeblieft een bericht voordat je bestelt zodat we eerst de scope afspreken.

Expertise:

Big data

•

Gegevensmanipulatie

•

etl

•

Transformatie

•

SQL

•

NoSQL

Technologie:

Apache Hadoop

•

apache vonk

•

Excel

•

Python

•

SQL

•

NoSQL