|
Frage zur robots.txt
Hallo,
in der robots.txt kann ich ja bestimmt Verzeichnisse ausschliesen, die nicht indexiert werden sollen.
Sind damit nur Verzeichnisse gemeint, die auch wirklich auf dem Server existieren, oder kann ich dort auch Verzeichnisse angeben, die mittels mod_rewrite erzeugt wurden?
Ich möchte den gesamten Userbereich nicht indexieren lassen. Es gibt keinen Ordner /user/ auf dem Server, sondern dieser wurde mit mod_rewrite erzeugt.
in der robots.txt steht deshalb Disallow: /user/
funktioniert das so?
|