[php] HTTP_REFERER und bots

[Ernst May-Jung]

Am Sonntag 25 September 2005 17:57 schrieb Fabian Birnkammer:
> Warum benützt du nicht eine robots.txt [1]-Datei.

Es geht darum, daß die Suchmaschien kein .../index.php?sid=123456789 bekommen.
Dafür ist die robots.txt nicht gegeinet.

Wenn ich das per robots.txt sperren würde und ich würde solche URLs an Sumas 
ausliefern, dann würde gar nix mehr indiziert.

Ernst