Ik bouw een aangepaste python en polars marktgegevens pipeline
Kwantitatieve architect | Financiële data engineer | Specialist in algorithmisch handelen
Over deze dienst
Dit is een aangepaste Python en Polars markt-data pipeline die is opgebouwd rond jouw bronnen, workflow en onderzoeksbehoeften.
Jij kiest de data bron, schema, updatefrequentie, transformatie regels, output formaat, opslagstructuur en deployment omgeving. Ik ontwerp vervolgens de ETL workflow om jouw data te importeren, schoon te maken, te normaliseren, te valideren, te transformeren en op te slaan.
Afhankelijk van het pakket kan de pipeline API- of bestandstoegang, timestamp- en tijdzonebeheer, controle op duplicaten en null-waarden, schema-validatie, contractmapping, sessiefiltering, incrementele verwerking, partitioned Apache Parquet output, logging, planning, herstartlogica, tests en documentatie bevatten.
Elke oplevering documenteert de architectuur, configuratie, validatiecontroles, aannames en beperkingen. Standaard en Premium bevatten werkende code en overdrachtsmaterialen; Basic biedt een audit en implementatieplan.
Belangrijke details:
- Ik werk met door de klant aangeleverde of correct geautoriseerde data.
- Verkoop-, exchange-, cloud- en abonnementskosten zijn niet inbegrepen.
- Live trading logica, geavanceerde L2/MBO reconstructie en voortdurende monitoring vereisen een aparte scope.
Stuur me een bericht voordat je een bestelling plaatst om je wensen te bespreken.
Mijn portfolio
Veelgestelde vragen
Automatische vertaling
Welke delen van de pipeline kan ik aanpassen?
Je kunt de data bron, schema, updatefrequentie, transformatie regels (zoals sessiefiltering of contractmapping), output formaat, opslagstructuur en deployment omgeving aanpassen.
Wat is inbegrepen in het Basic (Starter) pakket?
Je ontvangt een technische audit van je huidige workflow en een uitgebreid implementatieplan en architectuurontwerp. Dit pakket bevat geen werkende code.
Wat moet ik aanleveren voordat ik begin met werken?
Je moet je data bronnen, schema's, transformatie regels, doelomgeving en duidelijke acceptatiecriteria aanleveren.
Welke data bronnen en formaten kan je ondersteunen?
Ik ondersteun API's, CSV's, Parquet-bestanden, databases, SCID-bestanden en meer, die ik verwerk met Python en Polars.
Ontvang ik de broncode en documentatie?
Ja, voor de Standaard en Premium (Geavanceerd) pakketten ontvang je de volledig werkende Python/Polars code, configuratiebestanden, testresultaten en volledige documentatie.
