ParkonautBot

ParkonautBot haalt openbaar toegankelijke informatie over pretparken en attracties op voor Parkonaut, een tracker voor pretparken.

Zo herken je hem

Hij identificeert zich met deze User-Agent. Het product token voor de vergelijking in robots.txt is ParkonautBot:

ParkonautBot/1.0 (+https://parkonaut.app/bot)

Zo gedraagt hij zich

• Voordat hij iets van een host ophaalt, laadt hij /robots.txt en past die toe volgens RFC 9309: de eigen groep, anders *, inclusief Crawl-delay. Is de robots.txt onbereikbaar (netwerkfout of 5xx), dan haalt hij niets van die host op.
• Hij respecteert voorbehouden tegen tekst- en datamining en tegen AI-gebruik: het TDM Reservation Protocol (tdm-reservation als HTTP-header, als metatag of in /.well-known/tdmrep.json) en noai in de header X-Robots-Tag of in de metatag robots. Een pagina met zo’n voorbehoud gebruikt hij niet.
• Biedt een website een interface voor geautomatiseerde toegang, dan gebruikt hij die en houdt hij zich aan de regels ervan.
• Hij stuurt alleen GET-verzoeken. Hij verstuurt geen formulieren en logt nergens in.
• Hij leest gestructureerde gegevens die in pagina’s zijn ingesloten: schema.org-markup als JSON-LD (application/ld+json) en Microdata.
• Hij spreidt zijn verzoeken per host en pauzeert tussen verzoeken aan dezelfde website, langer als Crawl-delay daarom vraagt.
• Waar hij een bron opnieuw leest, gebruikt hij voorwaardelijke verzoeken (If-None-Match, If-Modified-Since), zodat ongewijzigde inhoud niet opnieuw wordt gedownload.
• Antwoordt een website met 429 of 503, dan wacht hij en probeert het een paar keer opnieuw, daarna geeft hij op. Retry-After respecteert hij (tot vijf minuten).

We tonen de gegevens die hij vindt samen met hun bron.

Zo blokkeer je hem

Voeg in je robots.txt een groep toe voor ParkonautBot. De bot leest die voordat hij iets van je host ophaalt en slaat de geblokkeerde paden over. Zo sluit je hem volledig uit:

User-agent: ParkonautBot
Disallow: /

Verder lezen

• RFC 9309: Robots Exclusion Protocol (IETF)
• JSON-LD 1.1: W3C-aanbeveling
• Getting started with schema.org: vocabulaire en serialisaties (JSON-LD, Microdata, RDFa)
• Schema.org Markup Validator: je gestructureerde gegevens controleren
• TDM Reservation Protocol: rapport van een W3C Community Group, geen W3C-standaard

Contact

Vragen of problemen met ParkonautBot? Neem contact met ons op via de gegevens in het Colofon.