Ik voer web scraping en data mining uit van beveiligde website

Neem eerst contact met mij op voordat u een bestelling plaatst via de website. Geef aan wat u precies wilt laten scrapen of geef andere informatie door.

Belangrijke opmerking: Geen handarbeid

Ik heb meer dan 5 jaar ervaring met webscraping/webautomatiseringprojecten. Ik heb in de loop der jaren veel complexe websites gescrapet.

Ik ga scrapers bouwen om gegevens te verzamelen van eenvoudige websites, maar ook van websites die de volgende kenmerken hebben:

• Cloudflare/CDN-bescherming
• Captcha/HCaptcha-beveiliging
• IP-blokkering
• Dynamische inhoud
• U moet zich eerst registreren/inloggen.
• Datadome-bescherming
• Anderen

Ik zal je ofwel de broncode/het programma ter beschikking stellen, ofwel de verzamelde gegevens.

Uitvoergegevens in:

• Excel
• CSV
• JSON
• SQL
• Google Spreadsheet
• Of anderen

Enkele websites die ik heb gescrapet:

• leboncoin.fr
• g2.com - alle softwarebedrijven en details verzameld.
• intermarche.com - een snelle scraper die proxies/threads gebruikt om alle productinformatie van alle winkellocaties te verzamelen. Het maakt gebruik van headless Selenium om captcha's op te lossen en reguliere verzoeken om productinformatie op te halen.
• rarible.com
• foundation.app
• coinmarketcap.com
• Amazon.com
• marketplace.axieinfinity.com
• vinted.fr
• socialblade.com
• inderdaad.com
• glassdoor.com
• poocoin.com - zelfs de grafieken
• bea-brak.de/bravsearch/index.brak
• voetdistrict.com
• walmart.com