Ik laad Hugging Face en Kaggle datasets in jouw database

Sommige informatie is automatisch vertaald.
5,0
5,0

Pakistan

Ik spreek Engels

12 bestellingen voltooid

Ervaren Data Engineer! Data Pipeline Specialist! Data Migratie

Ben je op zoek om ruwe data om te zetten in krachtige inzichten? Je bent op de juiste plek! Ik ben een ervaren Data Engineer met een sterke achtergrond in het bouwen, migreren en optimaliseren van dat...

Niveau 1

Voldoet aan bepaalde prestatiecriteria en toont een sterke potentie op de marktplaats.

Over deze dienst

Heb je een publieke dataset in je eigen database nodig? Ik haal het uit Hugging Face, Kaggle of een andere open-data bron, maak het schoon en laad het in je database, data warehouse of cloud storage, klaar om te queryen.


Wat ik doe:

Extractie uit Hugging Face, Kaggle, data.gov, AWS Open Data, BigQuery publieke datasets, APIs, en CSV-, JSON- of Parquet-bestanden

Schoonmaken en transformeren: juiste datatypes, geneste JSON flattenen, duplicaten en kapotte rijen verwijderen

Inladen in PostgreSQL, MySQL, SQL Server, MongoDB, Supabase, BigQuery, Snowflake, Redshift, Databricks, S3, GCS of Azure

Grote datasets streamen in batches, zodat grootte zelden een probleem is

Incrementele loads en geplande verversingen met Airflow, GitHub Actions of cron

Tekstdatasets ingebed en geladen in pgvector, Pinecone of Qdrant voor AI en RAG


Jij krijgt:

- Query-klare tabellen in je opslag

- Schoon, herbruikbare Python code

- Een README en een validatierapport (rijtellingen, schema)


Ik controleer elke dataset op licentie en geef eventuele restricties aan voordat ik het laad.


Weet je niet welke package het beste past? Stuur me de dataset link en je bestemming voor je bestelt, en ik adviseer je een geschikte optie.

Bestemmingsplatform:

Google BigQuery

•

Amazon Redshift

•

PostgreSQL

Tools & platforms:

Fivetran

•

Airbyte

•

AWS Glue DataBrew

Reviews

1 reviews van deze dienst
5,0

(1)
(0)
(0)
(0)
(0)
Specificering van de beoordeling
  • Communicatieniveau van de freelancer
    5
  • Kwaliteit van de levering
    5
  • Waarde van de levering
    5
Sorteer op
Meest relevant
  • A

    alina_westphal

    DE

    Duitsland

    5

    Hamza did an excellent job loading data from multiple HubSpot sources into BigQuery. Everything was clean, reliable, and delivered on time, with clear communication throughout. A true data engineering pro. Highly recommended!

    US$ 100-US$ 200

    Prijs

    2 dagen

    Looptijd

    Nuttig?
    Ja
    Nee
Reviews

1 reviews van deze dienst
5,0

(1)
(0)
(0)
(0)
(0)
Specificering van de beoordeling
  • Communicatieniveau van de freelancer
    5
  • Kwaliteit van de levering
    5
  • Waarde van de levering
    5
Sorteer op
Meest relevant
  • A

    alina_westphal

    DE

    Duitsland

    5

    Hamza did an excellent job loading data from multiple HubSpot sources into BigQuery. Everything was clean, reliable, and delivered on time, with clear communication throughout. A true data engineering pro. Highly recommended!

    US$ 100-US$ 200

    Prijs

    2 dagen

    Looptijd

    Nuttig?
    Ja
    Nee