Ik bouw end-to-end azure data pipeline met adf en databricks

Sommige informatie is automatisch vertaald.

Pakistan

Ik spreek Engels

Cloud Data Engineer

Ik ben een Cloud Data Engineer die zich specialiseert in het bouwen van schaalbare ETL/ELT-pijplijnen met Azure Data Factory, Databricks, Delta Lake en Azure Synapse Analytics. Ik zet ruwe data om in ...

Lees meer

Over deze dienst

Ik ontwikkel een end-to-end data engineering oplossing om je data te verzamelen, transformeren, verwerken en klaar te maken voor analytics.

Ik ben gespecialiseerd in Azure, Azure Data Factory, Azure Databricks, PySpark, Python, SQL, ADLS Gen2 en Delta Lake.

Wat ik kan bouwen:

ETL/ELT data pipelines
API-, CSV-, Excel- en SQL-data-inname
Azure Data Factory orchestratie
ADLS Gen2 data lake oplossingen
Databricks- en PySpark-transformaties
Delta Lake en Medallion Architectuur
Batch- en incrementele data verwerking
SCD Type 1 / Type 2
Data modellering en analytics-klaar datasets
Data kwaliteit en validatie
Power BI-klaar datalagen

Typische architectuur:

Bron ADF ADLS Databricks/PySpark Delta Lake Gold Layer Analytics

Of je nu een nieuwe pipeline nodig hebt, een bestaande pipeline wilt optimaliseren of een compleet dataplatform, ik ontwerp de oplossing op basis van jouw wensen.

Heb je een project in gedachten? Neem contact met me op voordat je bestelt, zodat ik je wensen kan begrijpen en de juiste oplossing kan aanbevelen.

Lees meer