Ik bouw een aangepaste python en polars marktgegevens pipeline

Sommige informatie is automatisch vertaald.

Italië

Ik spreek Engels

3 bestellingen voltooid

Kwantitatieve architect | Financiële data engineer | Specialist in algorithmisch handelen

Quant Data Engineer die zich specialiseert in futures markt data, high-performance ETL pipelines en Sierra Chart tools. Ik help kwantitatieve handelaren en fondsen om ruwe, gefragmenteerde markt data ...
Over deze dienst

Dit is een aangepaste Python en Polars markt-data pipeline die is opgebouwd rond jouw bronnen, workflow en onderzoeksbehoeften.

Jij kiest de data bron, schema, updatefrequentie, transformatie regels, output formaat, opslagstructuur en deployment omgeving. Ik ontwerp vervolgens de ETL workflow om jouw data te importeren, schoon te maken, te normaliseren, te valideren, te transformeren en op te slaan.

Afhankelijk van het pakket kan de pipeline API- of bestandstoegang, timestamp- en tijdzonebeheer, controle op duplicaten en null-waarden, schema-validatie, contractmapping, sessiefiltering, incrementele verwerking, partitioned Apache Parquet output, logging, planning, herstartlogica, tests en documentatie bevatten.

Elke oplevering documenteert de architectuur, configuratie, validatiecontroles, aannames en beperkingen. Standaard en Premium bevatten werkende code en overdrachtsmaterialen; Basic biedt een audit en implementatieplan.

Belangrijke details:

  • Ik werk met door de klant aangeleverde of correct geautoriseerde data.
  • Verkoop-, exchange-, cloud- en abonnementskosten zijn niet inbegrepen.
  • Live trading logica, geavanceerde L2/MBO reconstructie en voortdurende monitoring vereisen een aparte scope.

Stuur me een bericht voordat je een bestelling plaatst om je wensen te bespreken.

Bestemmingsplatform:

Snowflake

•

Google BigQuery

•

Amazon Redshift

Tools & platforms:

Fivetran

•

Airbyte

•

Kafka Connect

•

Talend

Mijn portfolio