Zasady robota
KartdexBot to robot, który czyta strony torów gokartowych dla Kartdex. Ta strona opisuje, jak działa i jak go wykluczyć.
Zachowanie
Identyfikuje się jako KartdexBot z linkiem do tej strony. Przed każdą witryną czyta robots.txt, łącznie z regułami dla ścieżek i crawl-delay, i nigdy nie pobiera strony, której witryna zabrania. Pobiera kilka stron na witrynę (start, cennik, godziny otwarcia, kontakt, rezerwacja), odczekuje między żądaniami, ogranicza rozmiar strony i wraca mniej więcej co miesiąc, by sprawdzić zmiany. Obrazy pobiera tylko wtedy, gdy wyglądają na tablice cen, aby odczytać z nich ceny.
Co robi ze stronami
Dane o torze (ceny, długość przejazdów, minimalny wiek i wzrost, godziny otwarcia, rodzaje gokartów, sposób rezerwacji, udogodnienia) są wyodrębniane i publikowane z cytatem oraz linkiem do strony źródłowej. Tekst stron nie jest ponownie publikowany. Opinie nigdy nie są zbierane.
Wykluczenie
Dodaj User-agent: KartdexBot i Disallow: / do robots.txt; robot zatrzyma się przy następnej wizycie. Aby poprawić lub usunąć istniejący wpis, skorzystaj z formularza poprawek lub napisz na .