Ik ga Python ETL-data-pijplijnen bouwen met Apache Airflow en PostgreSQL

Sommige informatie is automatisch vertaald.

Kenia

Ik spreek Engels

Software ontwikkelaar

Ik ben een ervaren software-ingenieur met vijf jaar full-stack ontwikkelervaring in testgedreven omgevingen. Mijn vaardigheden omvatten bekwaamheid in Spring Boot, Django, Flask en React voor het bouw...
Over deze dienst
Gevlekte spreadsheets, PDF’s en API’s die nooit helemaal op elkaar aansluiten? Ik bouw betrouwbare Python-data-pijplijnen die je data samenbrengen, opschonen en laden in een database die je kunt vertrouwen. Ik ben een data engineer met meer dan 5 jaar ervaring. Recent heb ik de ETL-pijplijnen gebouwd voor een financiële reconciliatieplatform dat door institutionele fonds-clients wordt gebruikt, waaronder OCR-extractie uit gescande bankafschriften. Wat ik voor jou kan bouwen: ETL-pijplijnen uit CSV, Excel, API’s, databases en PDFs Apache Airflow-workflows die volgens schema draaien Data cleaning, validatie en deduplicatie PostgreSQL-databasontwerp en query-tuning Data-extractie uit gescande documenten (OCR) Matching en reconciliatie tussen databronnen Docker-setup zodat het overal hetzelfde draait Elk traject wordt geleverd met: Schone, gedocumenteerde Python-code Gegevenskwaliteitcontroles, zodat slechte records worden gemarkeerd i.p.v. stiekem verwijderd Een korte handleiding over hoe het te draaien Tech: Python, Pandas, Apache Airflow, PostgreSQL, Celery, Redis, Docker Stuur me vóór het bestellen een bericht met je databronnen en doel, dan adviseer ik het juiste pakket.

Expertise:

Automatiseringen

•

Data-extractie

•

Gegevensmanipulatie

Technologie:

Python

•

SQL

•

Snowflake

•

NoSQL

•

Databricks

•

Apache Airflow

Mijn portfolio