Seite 1 von 1

robots.txt anpassen.

Verfasst: Dienstag 22. November 2005, 17:13
von Joghurt
Das habe ich woanders gepostet, passt wohl aber besser hierhin:

http://www.python-forum.de/viewtopic.php?p=26552#26552

(Der Googlebot hatte unabsichtlich ein Posting geqoutet)

Verfasst: Dienstag 22. November 2005, 18:01
von mitsuhiko
Oder bitte endlich die Gäste Funktion deaktivieren.

Verfasst: Freitag 25. November 2005, 17:01
von Joghurt
blackbird hat geschrieben:Oder bitte endlich die Gäste Funktion deaktivieren.
Wieso? Wieviele Gäste sind denn bis jetzt unangenehm aufgefallen?

Verfasst: Samstag 26. November 2005, 13:32
von piddon
Die Robots.txt wurde angepasst. Ich erlaube sowieso zur Zeit nur den GoogleBot, da alle andere bots einfach zu viel Traffic verursacht haben. Nun habe ich den Googlebot, wie in einem anderen Thread vorgeschlagen, auch limitiert.