Ik bouw een Python-API-ingestiepipeline naar PostgreSQL

Sommige informatie is automatisch vertaald.

Brazilië

Ik spreek Engels

Data Engineer en Python ontwikkelaar

Ik ben een Python Data Engineer die gespecialiseerd is in geautomatiseerde gegevensinvoer-pijplijnen, API- integraties en PostgreSQL-optimalisatie. Ik help bedrijven fragiele handmatige spreadsheets ...
Over deze dienst

Stop uren te verspillen aan dagelijkse manuele CSV-exporten uit ERP-systemen of dashboards die vastlopen als APIs rate-limiting of time-outs krijgen.


Ik bouw een veerkrachtige Python-gegevensinvoer-engine voor maximaal 3 REST API-eindpunten, die schone, duplicaatvrije incrementele laadpaden rechtstreeks naar PostgreSQL of Parquet levert.


Wat er bij elke levering inbegrepen is:

- Python-ingestiepipeline met rate-limit-afhandeling, automatische paginering en exponentiële retries

- Duplicaatvrije incrementele loads naar PostgreSQL of Parquet

- Uitvoeringsaudit-tabel (pipeline_runs_audit) om elke run bij te houden

- Gecontaineriseerde Docker Compose-implementatie met geautomatiseerde planning

- Stapsgewijs operationeel runbook en setup-documentatie


Hoe we te werk gaan:

1. Snelle technische diagnose om je API-eindpunten en doel- schema te beoordelen

2. Vastomlijnde scope en duidelijke leveringstermijn

3. Geteste Docker Compose-implementatie met live auditlogs


Bewezen architectuur gebaseerd op productie- engineeringpatronen (comex-data-engine-v2).


Stuur me een bericht met je API-documentatie of ERP-bron voordat je bestelt, zodat we op jouw eindpunten en schema kunnen afstemmen.

Bestemmingsplatform:

Snowflake

•

Databricks Lakehouse

•

PostgreSQL

Tools & platforms:

Overige

Mijn portfolio

Andere Data engineering diensten die ik aanbied