ABAKUS

Re: robots.txt wie bekomm ich

KOHLFUERST — Fr,18 Aug 2006 12:19:27 +0000

@hasenhuf - in dem Fall verwende ich immer

User-agent: *
Disallow: http://www.domain.xx/phpsessionid=

Das d�rfte somit alles ausschliessen was damit beginnt und m�sste meiner Erfahrung nach f�r alle Suchmaschinen passen. Wir haben das mal bei einem Portal mit echten 2,4 Mio Seiten und 2 Domains probiert. Da haben wir eine der beiden Domains in der robots.txt gesperrt. Als die draussen war, haben wir diese neu best�ckt.

Re: robots.txt wie bekomm ich

Hasenhuf — Fr,18 Aug 2006 11:59:05 +0000

KOHLFUERST hat Folgendes geschrieben:

- vor allem f�r ALLE Suchmaschinen.

google hat Folgendes geschrieben:

Da es sich jedoch um eine Erweiterung des Standards handelt, wird das Muster eventuell nicht von allen Suchmaschinen erkannt.

Re: robots.txt wie bekomm ich

KOHLFUERST — Fr,18 Aug 2006 9:27:29 +0000

@yel nats - hier ist ein Link zur gro�en Mama der dir genaue Anweisungen f�r alle arten von Sperrungen gibt. Damit ist es einfach die URLs mit Session Variablen auszusperren - vor allem f�r ALLE Suchmaschinen. Wichtig ist aber, dass du den Suchmaschinen einen Link legst der ohne Session auskommt - sonst kommen deine Seiten nie in die SuMas

http://www.google.com/support/webmasters/bin/answer.py?answer=40367&query=robots.txt%20session&topic=&type=

Gr��e, Michael

Re: robots.txt wie bekomm ich

KOHLFUERST — Di,15 Aug 2006 1:13:05 +0000

Vor ca. 2 Wochen hat hier jemand einen Link gepostet der auf Google ganz genaue Anweisungen f�r Meta Tags gibt. Der Inhalt des Dokuments gibng etwas tiefer. Vielleicht schaust du mal nach. Im Thread ging es darum Google f�r PHP Session ID's zu sperren. Gr��e, Michael

Re: robots.txt wie bekomm ich

mark — Di,15 Aug 2006 8:56:53 +0000

Dann nimm

/?op*

sollte funktionieren.
Testen kann man es auch �ber Google Sitemaps.

robots.txt wie bekomm ich

Yel nats — Di,15 Aug 2006 8:49:56 +0000

Hallo,

wie bekomm ich per robots.txt folgendes aus Google verbannt

http://www.domain.de/?op=BlogProfile&blogId=20
http://www.domain.de/?op=UserProfile&userId=20

also alles ab .de/?op

Gru�,

Yel nats