Hallo,
ich möchte eine Testumgebung für meine Seite auf dem gleichen Server einrichten, die dann auch per URL abrufbar sein soll.
Damit Google & Co. meine gespiegelte Seite nicht indexieren will ich dies natürlich verhindern.
Reicht es in der robot.txt ein Disallow des Folders einzugeben in dem sich meine gespiegelte Version befindet?
Ich hatte mal vor langer Zeit gelesen, dass einige Crawler ein Disallow ignorieren.
Danke,
Mark
