Ik maak een ETL data pipeline naar PostgreSQL van jouw data
AI-, automatisering- en data systems consultant
Over deze dienst
Ik verplaats jouw data uit verspreide spreadsheets, apps en exports naar één schone database die je daadwerkelijk kunt opvragen.
DE PROBLEEM DAT DIT OPLOST Jouw cijfers staan op zes plekken. Iemand bouwt elke maand handmatig hetzelfde rapport opnieuw op. Niemand vertrouwt op de totalen omdat twee systemen niet overeenkomen. Elk dashboardproject komt stil te liggen omdat de onderliggende data een rommel is.
WAT IK BOUW Extractie uit APIs, databases, spreadsheets, CSV exports, formulieren. Schoonmaak en transformatie, met de regels opgeschreven in plaats van verborgen in iemands hoofd. Laden in PostgreSQL, een echt warehouse schema, geen dumpplaats. Geplande vernieuwingen zodat het automatisch up-to-date blijft. Data kwaliteit controles die problemen aangeven in plaats van ze stilletjes door te laten gaan.
WAT JIJ KRIJGT Een werkende pipeline, een gedocumenteerd schema en duidelijke instructies. Open-source stack door heel de boel, geen licentie die je telkens moet verlengen, en niets dat aan mij vastzit.
WAAROM IK Ik beheer productie Postgres en PostGIS warehouses die live dashboards voeden. Ik heb pipelines gebouwd voor data verzameld onder echt moeilijke veldomstandigheden, wat uitstekend is voor rommelige input.
Vertel me je bronnen en ik vertel je wat realistisch is.
Technologie:
Excel
•
Python
•
R
•
SQL
Mijn portfolio
Veelgestelde vragen
Automatische vertaling
Waarom PostgreSQL en niet Snowflake of BigQuery?
Omdat het voor de meeste bedrijven meer dan genoeg is, het kost maar een fractie en je wordt niet per query gefactureerd. Als je volumes echt een cloud warehouse nodig hebben, zeg ik dat — maar dat is zeldzamer dan de vendors suggereren.
Mijn data is een rommel. Is dat een probleem?
Nee, dat is de normale start. Rommelige input is meestal het meeste werk en dat is inbegrepen in de prijs. Stuur een voorbeeld en ik vertel je eerlijk hoe slecht het is voordat je bestelt.
Waar bevindt de database zich?
Op jouw server, in jouw cloud account, of ik kan het hosten — zie de extra opties. Ik heb liever dat het in infrastructuur zit die jij controleert, zodat je nooit aan mij vastzit.
