|
|
manute


: 22.07.2003 : 3034 : Hamburg
|
| : 17.06.2004, 23:44 : yahoo mag xenu nicht? |
|
|
hat schon mal jemand versucht, yahoo-seiten mit xenu zu crawlen? kann das sein, dass die den anhand des useragents aussperren?
Das Social Network nur für SEOs |
|
| Nach oben |
|
 |
bugscout


: 23.06.2003 : 2595 : Neufundland
|
| : 18.06.2004, 20:04 : yahoo mag xenu nicht? |
|
|
moin manute,
wenn du www.yahoo.de nimmst, gibt es einen link zu http://de.yahoo.com/
und schluss ist. logischerweise
spider mal http://de.yahoo.com/
grüsse
Diese Regierung macht nichts falsch. Für einige Leute
ist die Politik von Vorteil - nur wir sind nicht dabei.
Georg Schramm |
|
| Nach oben |
|
 |
manute


: 22.07.2003 : 3034 : Hamburg
|
| : 20.06.2004, 15:59 : yahoo mag xenu nicht? |
|
|
daran liegt's nicht, habe auch schon mit diversen unterseiten probiert. das problem ist vermutlich, dass alle yahoo-internen links immer weiterleiten. aber man kann ja "treat redirections as errors" abschalten bei xenu, daran sollte es also eigentlich nicht liegen...
Das Social Network nur für SEOs |
|
| Nach oben |
|
 |