Crawler-Richtlinie
KartdexBot ist der Crawler, der für Kartdex die Websites von Kartbahnen liest. Diese Seite beschreibt sein Verhalten und wie Sie ihn fernhalten.
Verhalten
Er identifiziert sich als KartdexBot mit Link auf diese Seite. Vor jeder Website liest er robots.txt, einschließlich Pfadregeln und Crawl-Delay, und ruft nie eine Seite ab, die eine Website verbietet. Er holt wenige Seiten pro Website (Start, Preise, Öffnungszeiten, Kontakt, Buchung), wartet zwischen den Anfragen, begrenzt die Seitengröße und kommt etwa monatlich zur Prüfung auf Änderungen zurück. Bilder lädt er nur, wenn sie Preistafeln zu sein scheinen, um die Preise darauf zu lesen.
Was mit den Seiten passiert
Angaben zur Bahn (Preise, Fahrzeiten, Alters- und Größengrenzen, Öffnungszeiten, Kartarten, Buchungsweg, Ausstattung) werden extrahiert und mit Zitat und Link zur Ursprungsseite veröffentlicht. Seitentexte werden nicht neu veröffentlicht. Bewertungen werden nie gesammelt.
Ausschließen
Tragen Sie User-agent: KartdexBot und Disallow: / in Ihre robots.txt ein; der Crawler stoppt beim nächsten Besuch. Für Korrektur oder Entfernung eines bestehenden Eintrags nutzen Sie das Korrekturformular oder schreiben Sie an .