Yahoo / Slurp liest nur robots.txt

hansifix · : 15.03.2004 : 2

Wollte mal nachfragen, ob es bei mehreren auch so ist!
Bei mir kommt der Slurp massig am Tag vorbei, liest aber nur die robots.txt. In der robots.txt lasse ich alles zu. (habe sie auch schon ganz herausgenommen) alles ohne Erfolg. Alle anderen Roboter lesen die Seiten. Nur ebene der Slurp von Yahoo nicht.
Hat jemand eine Idee???

Webby · : 17.10.2001 : 5429 : Hannover

Was ist dein URL?

ABAKUS Internet Marketing
Professionelle Suchmaschinenoptimierung und Suchmaschinenmarketing

hansifix · : 15.03.2004 : 2

Es ist eine ganz normale Domain, die ich für einen Freund betreue. Also keine Weiterleitung oder so.

diabolo · : 31.03.2004 : 1

Hey!

Das selbe Phänomen habe ich auch.
Egal ob ich die robots.txt lösche oder nicht.
Er liest nur diese ein und ist wieder weg.

Wäre toll, wenn einer hier Infos dazu hat.

Gruss Jörg

Metaman · : 17.04.2004 : 554 : Wittenburg (Mecklenburg)

infos hab ich leider auch keine,
aber ich hab mir heut morgen den Web Stats Tracker installiert
und konnte bis jetzt von Slurp schon 69 Zugriffe feststellen
darunter war ein einziger Zugriff auf eine Seite, die es jedoch nicht mehr gibt...

PR 4 Backlink für DICH von der
-- Verrückten Linkliste --

sean · : 05.01.2004 : 3420 : Leipzig/Karlsruhe

na, an dem Web Stats Tracker wirds aber nicht gelegen haben dass der Slurp die Dateien einliest

Ich sachs nur, damit Hinsifix jetzt nicht meint das würde sein problem lösen

sean

Die besten Adwords Anzeigen