Ik ben jouw expert databricks en pyspark data engineer voor etl-pijplijnen

Sommige informatie is automatisch vertaald.

Verenigd Koninkrijk

Ik spreek Engels

Senior Data en AI engineer, Databricks gecertificeerd, 11 jaar

Ik ben een ervaren professional met meer dan 11 jaar in software- en data-engineering. Ik heb een bewezen staat van dienst in het leiden van agile teams, automatiseren van ETL-processen en infrastruct...
Over deze dienst

Heb je bulletproof Databricks-pipelines die niet kapot gaan om 3 uur 's nachts? Je bent op de juiste plek.

Ik ben een Databricks Certified Data Engineer (Professional) met meer dan 10 jaar ervaring in het bouwen van productie data systemen voor energiehandel, bankwezen, retail en crypto-analytics bedrijven, waaronder OVO Energy, Bank of America en Sainsbury's.

Wat ik voor je maak:

  1. ️Schaalbare PySpark / Scala Spark pipelines op Databricks
  2. DeltaLake architectuur (brons, zilver, goud medaille)
  3. Streaming + batch ETL met Kafka, Auto Loader of Structured Streaming
  4. Kostenoptimalisatie van clusterconfiguraties (ik heb meer dan £80k bespaard op jaarlijkse cloudkosten)
  5. Schoon, getest en gedocumenteerd code die je aan je team kunt geven

Mijn stack: Databricks, PySpark, Scala, DeltaLake, Airflow, Kafka, Snowflake, BigQuery, Terraform, AWS, GCP.

Mijn proces: Discovery call -> architectuur goedkeuring -> bouwen -> testen -> walkthrough -> overdracht. Geen verrassingen, geen scope creep.

Stuur me een bericht voordat je bestelt zodat ik je project goed kan inschatten en bevestigen dat het past. Ik reageer binnen 1 uur tijdens UK werkuren.

Laten we iets solides bouwen.

Expertise:

API integratie

Automatiseringen

Big data

Datastroom

etl

Technologie:

Apache Kafka

apache vonk

Python

Snowflake

Databricks