Door categorieën bladeren
Ontdekken
Fiverr Pro
Nederlands
$
USD
Ik bouw schaalbare ETL-pijplijnen met Spark, Databricks en Delta Lake
Over deze dienst
Professionele Data Engineering | ETL | Databricks | Spark | Data Lake Specialist
Ben je op zoek naar een schaalbare, productieklare data pipeline voor jouw bedrijf?
Ik ben een Professionele Data Engineer met echte industrie-ervaring in het bouwen van Big Data oplossingen met behulp van:
- Apache Spark / PySpark
- Databricks (Delta Lake, Medallion Architecture)
- Azure Data Factory
- Hadoop Ecosysteem
- SQL & Python
- API Integraties (SOAP/REST)
- MongoDB, Oracle, MySQL, PostgreSQL, enz.
Wat ik voor je kan doen:
- ETL / ELT pipeline ontwikkeling
- Batch- en real-time data verwerking
- Database Data Lake integraties
- Delta Lake architectuur ontwerp
- Data schoonmaak & transformatie
- Prestatie optimalisatie
- Spark job tuning
- Automatisering & planning
- API Database-inname
- Cloud data engineering (Azure/Databricks)
Eigen ervaring omvat:
- MongoDB Delta Lake integratie
- Oracle Fusion SOAP API Delta Lake-inname
- Enterprise-level dagelijkse pijplijnen
- Geoptimaliseerde big data verwerking voor miljoenen records
Waarom voor mij kiezen?
⭐ Industrie-ervaring
⭐ Schone & geoptimaliseerde code
⭐ Schaalbare architectuur
⭐ Op tijd leveren
⭐ 100% klanttevredenheid
Veelgestelde vragen
Automatische vertaling
1. Welke diensten bied je aan in deze dienst?
Ik bied professionele Data Engineering en ETL/ELT-diensten aan, waaronder: PySpark / Spark ontwikkeling Databricks workflows Azure Data Factory pijplijnen Database & API integraties Data Lake / Delta Lake setup Data schoonmaak & transformatie Pijplijn optimalisatie & automatisering
2. Met welke technologieën en tools werk je?
Ik ben gespecialiseerd in: Apache Spark / PySpark Databricks (Delta Lake, Notebooks, Jobs) Azure Data Factory Hadoop ecosysteem Python & SQL REST/SOAP APIs MongoDB, Oracle, MySQL, PostgreSQL, SQL Server Cloud opslag (ADLS, S3, Blob)
3. Kun je data van meerdere bronnen integreren?
Ja. Ik kan data integreren van: Databases APIs CSV/Excel/JSON bestanden Cloud opslag Streaming bronnen
4. Bouw je zowel ETL- als ELT-pijplijnen?
Ja. Ik ondersteun: ETL (Transformeer voor het laden) ELT (Laad eerst, transformeer in Databricks/Spark) Afhankelijk van jouw gebruiksgeval, adviseer ik de beste architectuur voor prestatie en kosten.
5. Kun je mijn trage Spark- of Databricks-jobs optimaliseren?
Absoluut. Ik help met: Partition tuning Caching strategieën Geheugen optimalisatie Shuffle vermindering Query optimalisatie Delta Lake prestatie tuning Dit kan de uitvoeringstijd en cloudkosten aanzienlijk verminderen.
Wat heb je van mij nodig voordat je begint?
Gelieve te voorzien: Bron details (DB/API/bestanden) Voorbeeld dataset of schema Verwachte output formaat Cloud platform details Zakelijke vereisten Deadline Duidelijke vereisten helpen mij sneller en beter te leveren.
