Ik haal gegevens van websites voor je op
Moderne, responsive en schaalbare web ervaringen maken
Over deze dienst
Hallo daar!
Ik help je met het scrapen van gegevens van de site die je leuk vindt. Ik doe al een tijdje web scrapen voor klanten van mijn peers.
Ik gebruik vooral Puppeteer met NodeJS om gegevens te extraheren en de geëxtraheerde data kan worden geleverd in een schoon Excel, CSV (Comma Separated Values) of JSON-bestand - als een ruwe file niet jouw ding is, kan ik ook een functionaliteit implementeren die data uploadt naar jouw favoriete database, omdat ik eerder MongoDB en Supabase heb gebruikt.
Technologie:
JavaScript
•
Python
•
NodeJS
•
Poppenspeler
•
Beautiful Soup
Techniek:
Geautomatiseerd
Mijn portfolio
Veelgestelde vragen
Automatische vertaling
Wat voor soort data kan worden geëxtraheerd?
Alles wat in tekstvorm is, kan worden geëxtraheerd - voor dingen zoals video's en foto's zal ik de URL opslaan.
Wat voor soort data-bestand wordt het na het extraheren van data?
Ik heb tot nu toe alleen gewerkt met Excel (met meerdere sheets), CSV (Comma Separated Values) en JSON-bestanden, omdat dit de meest gebruikte zijn.
Wat als ik veel data heb die geëxtraheerd moet worden?
In dat soort gevallen gebruik ik liever een backend integratie of splits ik de bestanden in meerdere delen.
Hoe lang duurt het meestal?
Afhankelijk van de site, die niet veel complicaties heeft zoals rate limiting of geauthenticeerde tokens die na een tijdje verlopen, duurt het niet meer dan een paar uur. Websites met complicaties kosten ook niet veel tijd zodra we hun preventieve maatregelen hebben aangepakt.

