Ich verstehe die Zusammhänge zwischen den Spidern und den Suchmaschinen von AllTheWeb, Hotbot und MSN nicht genau. Weiß jemand von Euch ungefähr welche Robots denn genau hinter diesen Suchmaschinen und ihren Ergebnisse stecken?
Ich meine damit nicht so pauschal, wie "Inktomi", sonden sowas schon etwas genauer erklärt wie z.B....
Gibt es da Muster oder Zusammenhänge die man als Normalsterblicher durchschauen kann und gibt es tatsächlich kluge Köpfe, die da hintendran blicken? Ich danke Euch sehr herzlich und sende viele Grüße