Ik maak een web scraper voor cloudflare en bot-beschermde sites

Sommige informatie is automatisch vertaald.

Bangladesh

Ik spreek Bengaals, Engels, Hindi

AI en LLM backend engineer, RAG chatbots, web scraping, AI deployment

AI/LLM backend engineer. Ik bouw AI-systemen die in productie werken, niet alleen in een notebook. Ik ben een medeoprichter van een AI startup waar ik de backend vanaf nul heb opgebouwd: een RAG pipe...
Over deze dienst

Je scraper stopte met werken op de dag dat de site Cloudflare of DataDome inschakelde. Ik haal de data toch op.


De meeste verkopers vallen om zodra een target echte bot-bescherming toevoegt. Dat is mijn specialiteit. Ik schreef een open-source AI browser agent (153 sterren op GitHub) die is gebouwd om data te halen van pagina's beschermd door Cloudflare, DataDome, Akamai en PerimeterX, en ik draai een productie pipeline die dagelijks meer dan 3.900 bronnen scraped zonder geblokkeerd te worden.


Wat je krijgt:

- Schone gestructureerde data in CSV, JSON, Excel of direct in je database

- Gedocumenteerde, onderhoudbare code die layoutwijzigingen overleeft

- Proxy rotatie, retries en foutafhandeling zodat runs niet stilletjes falen

- Optioneel plannen zodat het automatisch op je server draait


Wat ik niet doe: iets dat tegen de servicevoorwaarden van een site ingaat. Ik vertel je eerlijk als een target niet toegankelijk is.


Hoe het werkt: stuur me de URLs en de velden die je nodig hebt, ik bevestig de haalbaarheid, bouw het, en lever de data plus een korte walkthrough video.


Stuur me de site en ik vertel je meteen of het mogelijk is.

Technologie:

Python

•

Instant datascraper

•

NodeJS

•

Poppenspeler

Type informatie:

Vermeldingen

•

Vastgoed

•

Social media

•

Websites

•

Links

Techniek:

Geautomatiseerd

Mijn portfolio