← Koopscanner

Onze bot

Koopscanner kijkt namens zijn gebruikers of er een advertentie online komt die past bij een zoekopdracht die zij zelf hebben ingesteld. Dat doet een bot. Hier staat wat hij doet, hoe vaak, en hoe je hem laat stoppen.

Hoe je hem herkent

Onze verzoeken dragen deze user-agent, altijd:

Koopscanner/1.0 (+https://koopscanner.nl/bot; bot@koopscanner.nl)

We doen ons niet voor als een browser. Dat maakt ons makkelijker te blokkeren, en dat is een bewuste keuze.

Wat hij ophaalt

  • Openbare zoekresultaatpagina's, precies zoals een bezoeker die ziet. Geen ingelogde pagina's, geen berichten, geen accounts.
  • Bij een advertentie die een gebruiker gemeld krijgt: die ene advertentiepagina, voor de prijs en de biedingen. Die bewaren we zes uur, zodat we hem niet opnieuw opvragen.
  • We maken geen accounts aan, plaatsen niets, bieden niet, en versturen geen berichten.

Hoe vaak

  • Elke bewaakte zoekopdracht wordt elke minuut opgehaald — één keer, hoeveel gebruikers hem ook volgen.
  • Minimaal een seconde tussen twee verzoeken naar dezelfde site.
  • Identieke zoekopdrachten van verschillende gebruikers worden samengevoegd tot één verzoek. Honderd mensen die hetzelfde volgen kosten evenveel als één.
  • Zoekresultaten bewaren we een minuut voordat we opnieuw kijken.
  • Een dagmaximum dat wij onszelf opleggen, uitgedrukt in bewaakte zoekopdrachten: Marktplaats 100, 2dehands 40, Vinted 40. Daarboven stoppen we tot de volgende dag.

Wat hij doet als je nee zegt

  • Bij een 429 of 503 trekken we ons terug. We lezen Retry-After en wachten anders steeds langer, tot een kwartier.
  • Bij een 403 stoppen we met die site. Niet tijdelijk en niet automatisch hervat: er moet dan een mens kijken.
  • Drie fouten op rij leggen een site vanzelf een kwartier stil.

Hoe je ons laat stoppen

Mail bot@koopscanner.nl en we zetten je site dezelfde dag uit. Je hoeft geen reden te geven en we vragen er niet op door.

Een Disallow in je robots.txt voor onze user-agent werkt ook — die lezen we en die respecteren we.

Koopscanner is een onafhankelijke dienst en geen officieel onderdeel van Marktplaats.nl, 2dehands.be of Vinted.