Ik bouw data engineering oplossingen met Azure

Sommige informatie is automatisch vertaald.

Pakistan

Ik spreek Engels, Urdu, Duits

221 bestellingen voltooid

Web scraper en Data Engineer

Ik heb meer dan 4 jaar professionele ervaring met Python web scraping, en heb meer dan 300 aangepaste crawlers gebouwd voor verschillende websites. Ik ben zeer bedreven in Scrapy, Selenium, Selenium W...

Niveau 2

Voldoet aan hoge prestatiecriteria en heeft een bewezen staat van dienst in het voldoen aan de verwachtingen van de klant.

Over deze dienst

Ben je op zoek naar een data engineer om betrouwbare ETL-pijplijnen op Azure te bouwen? Ik ontwerp en implementeer end-to-end data oplossingen met behulp van Azure Data Factory (ADF), Azure Databricks en Medallion Architecture om je data efficiënt te verzamelen, transformeren en beheren.


Diensten die ik aanbied:

  • Data Ingestion: APIs, CSV, Excel, databases, cloud storage
  • Data Transformatie: Databricks (PySpark/SQL), ADF Data Flows (filteren, samenvoegen, selecteren, afgeleide kolom, rij aanpassen, joins)
  • ETL-pijplijnen met Medallion Architecture (Bronze, Silver, Gold)
  • ADF Activiteiten: Data kopiëren, ForEach, Lookup, Web, Stored Procedures
  • Planning & triggers: Tijdgebaseerd, opslaggebaseerd en gebeurtenisgestuurd


Waarom ik?

  • Sterke expertise in ADF & Azure Databricks
  • Geoptimaliseerde, schaalbare ETL-pijplijnen


Bestemmingsplatform:

Databricks Lakehouse

PostgreSQL

MySQL

Tools & platforms:

Azure Data Factory

Overige

Mijn portfolio