Ik bouw een python web scraping bot voor javascript sites en login dashboards
Over deze dienst
De meeste scraping gigs gebruiken requests en BeautifulSoup. Dat werkt op eenvoudige HTML en geeft je een LEGE file zodra een site met JavaScript wordt gerenderd, pagineert met oneindig scrollen of achter een login zit.
Ik gebruik een echte browser, zodat ik zie wat jij op scherm ziet.
WAT IK AANPAK DAT GOEDKOPER SCRAPERS NIET DOEN
JavaScript / React / Vue pagina's die data laden nadat de HTML is geladen
Oneindig scrollen en load-more knoppen
Diepe paginering en multi-step flows
Dashboards waarvoor je een account hebt, maar geen exportknop of API
JOUW DATA KRIJG JE
Als CSV, Excel en JSON
De commentaar Python script, zodat je het zelf opnieuw kunt uitvoeren
Een korte setup-notitie. Geen black box, geen lock-in
JOUW WACHTWOORD VERLIJT NOOIT JE COMPUTER
Voor login-beveiligde targets lever ik een script dat je lokaal uitvoert met je eigen inloggegevens. Ik vraag nooit om je wachtwoord.
Geen CAPTCHA-oplossingen. Geen persoonlijke e-mails of telefoonnummers verzamelen. Geen LinkedIn, Facebook of Instagram. Publieke data, of data die jij bezit of waarvoor je een account hebt. Als je target een probleem is, zeg ik dat vooraf, niet achteraf.
Stuur me de URL en de velden die je wilt en ik vertel je meteen of het mogelijk is.
Technologie:
Python
•
Google Sheets
•
Excel
•
Toneelschrijver
•
Pandas
Techniek:
Geautomatiseerd
Veelgestelde vragen
Automatische vertaling
Mijn laatste scraper kwam met een leeg bestand terug. Kun je dat oplossen?
Meestal wel. Een lege resultaat betekent meestal dat de tool de HTML las voordat JavaScript de inhoud vulde. Ik gebruik een echte browser en wacht tot de data is gerenderd, zodat ik zie wat jij op scherm ziet. Stuur me de URL en ik check het voordat je bestelt.
Krijg ik de code of alleen de data?
Beide. Je krijgt de data als CSV, Excel en JSON, en het commentaar Python script dat het heeft gemaakt, met een korte setup-notitie. De meeste verkopers leveren alleen een spreadsheet, zodat je telkens weer moet betalen voor nieuwe data. Dat hoef jij niet te doen.
Kun je een site scrapen waarvoor ik moet inloggen?
Ja, op Standard en Premium, voor een account dat jij bezit of mag gebruiken. Ik vraag nooit om je wachtwoord. Ik bouw het script voor het login-proces en lever het, daarna voer jij het uit op je eigen machine met je eigen inloggegevens. Ze verlaten nooit jouw computer.
Wat als de website verandert en de scraper stopt met werken?
Standard bevat 7 dagen fixen, Premium 14. Sites veranderen en geen scraper is permanent, dat zeg ik vooraf. Na die periode kan ik een kleine reparatie geven, of je kunt het script zelf aanpassen omdat de code van jou is.

