Ik scrape elke website en lever schone data in een sheet of database
Softwareontwikkelaar, automatisering en AI-integraties
Over deze dienst
Je hebt de data nodig die op een pagina staat, in een formaat dat je daadwerkelijk kunt gebruiken.
Ik maak de scraper. Het bezoekt de pagina's die je noemt, haalt de velden op die je aangeeft, maakt de data schoon en schrijft het naar een spreadsheet, een database of een endpoint dat jij bezit. Prijzen, lijsten, profielen, reviews, catalogi, wat de pagina ook toont.
Waar een site gewone verzoeken weigert, gebruik ik een echte browser sessie. Dat is langzamer en eerlijk over wat het doet, en het werkt op pagina's die alles blokkeren. Als inloggen nodig is, houd jij de inloggegevens en voer je die zelf in.
Recent werk omvat een monitor die 177 domeinen volgt en rapporteert wat er is veranderd, en een collector die openbare accounts verzamelt op tientallen landensites.
Stuur me de pagina en de velden die je nodig hebt. Ik vertel je of het scrapeable is en wat het kost voordat je bestelt.
Technologie:
Python
•
Scrapy
•
Selenium
•
Beautiful Soup
•
Toneelschrijver
Techniek:
Geautomatiseerd
Mijn portfolio
Veelgestelde vragen
Automatische vertaling
Wat als de site scrapers blokkeert
Dan automatiseer ik een echte browser sessie, die de pagina laadt op dezelfde manier als jij. Langzamer, maar het werkt waar gewone verzoeken falen.
In welk formaat krijg ik het
Standaard CSV. Google Sheets, Excel, JSON, SQLite of een Postgres-tabel op verzoek.
Kan het elke dag draaien
Vanaf de Standard tier en hoger, ja. Het draait volgens een schema en stuurt je een e-mail als er iets misgaat.
Is scrapen legaal?
Dat hangt af van de site en je jurisdictie. Ik werk met openbare data en accounts die jij bezit, en ik zal dat aangeven als een verzoek over de lijn gaat.

