Ik voer webscraping uit naar een schonen CSV-dataset
Over deze dienst
Koppel tabellen op publieke websites die overeenkomen aan één schone CSV, met een bron-URL en rijnummer voor elke record.
Stuur 1-100 expliciete openbare HTTPS-URL’s van één oorsprong (zelfde host), dezelfde tabelnummer en tot 10 exacte kolomkoppen. Alle pagina’s hebben hetzelfde statische tabelontwerp. Elke bron-tabel heeft minimaal één gegevensrij. Dit $30-pakket dekt 1.000 totale gegevensrijen, levering binnen 2 dagen en 1 revisie.
Ontvang de CSV, de vastgelegde brontoepassing, offline afspeelscript, rapport, README en AI-gebruikverklaring. Onafhankelijke controles brengen elke gevraagde pagina in evenwicht; rijen worden nooit stilletjes verwijderd of verzonnen.
Beperkingen: 2 MB per pagina, 10 MB totaal HTML, 20 MB bronsample, 10 MB CSV en 40 MiB pakket. Robots-toestemming en vereiste wachttijden tot 5 minuten per verzoek worden afgedwongen. Geblokkeerde, te grote, niet-ondersteunde of incomplete batches worden ter beoordeling vastgehouden; geen gedeeltelijke levering.
Geen login, JavaScript-rendering, URL-ontdekking, samengevoegde/geneste tabellen of doorlopende updates. Bronstabellen mogen maximaal 50 kolommen hebben. Revisies wijzigen geselecteerde kolommen met bevroren captures; nieuwe URL’s, tabellen of vernieuwde data vereisen een nieuw bereik. Het werk is AI-ondersteund; geen calls of inlogaccounts. Importeer CSV-kolommen als tekst.
Technologie:
Python
Type informatie:
Websites
Techniek:
Geautomatiseerd
Veelgestelde vragen
Automatische vertaling
Wat zal ik ontvangen?
Één CSV met de door jou gekozen kolommen plus source_url en source_row, de vastgelegde bronbundel, een offline replay-script, rapport, README en AI-gebruikverklaring. Het $30-pakket dekt tot 100 URL’s, 1.000 totale rijen en 10 geselecteerde kolommen, met 2-dagen levering en 1 revisie.
Welke websites worden ondersteund?
Openbare HTTPS-pagina’s op één oorsprong, met hetzelfde statische HTML-tabellayout en een kopregel plus ten minste één gegevensrij per pagina. Geen login, JavaScript, discovery of samengevoegde/geneste tabellen. Automatische toegang moet toegestaan zijn; robots-wachtijden van meer dan 5 minuten per verzoek vallen buiten de scope.
Wat zijn de bestands- en gegevenslimieten?
Tot 100 URL’s, 1.000 gegevensrijen in totaal en 10 geselecteerde kolommen. Bron-tabellen mogen maximaal 50 kolommen hebben. Beperkingen: 2 MB per pagina, 10 MB totaal HTML, 20 MB bronbundel, 10 MB CSV en 40 MiB pakket. Elke pagina moet slagen; geblokkeerde, te grote of incomplete batches worden vastgehouden.
Wat houdt de herziening in?
Één revisie van de geselecteerde kolomlijst, binnen de 10-kolomlimiet, met dezelfde bevroren captures. Nieuwe URL’s, een andere tabel, vernieuwde brondata en doorlopende updates vereisen een nieuw bereik. De bijgeleverde script speelt de vastgelegde bron offline af; het crawlt of monitort geen websites.
Hoe worden de data gecontroleerd?
Onafhankelijke controles brengen elke pagina en geselecteerde cel, URL-volgorde, rijnummers, herkomst en bestandshashes in evenwicht. Het geleverde script moet de CSV offline kunnen reproduceren. Witruimte wordt genormaliseerd; lege plekken blijven leeg. Er worden geen waarden verzonnen. Importeer elke CSV-kolom als tekst om formules te vermijden.

