Suchmaschinenoptimierung
   
 

SEMSEO Konferenz 2012
 

 
 

distributed crawling ?

Neues Thema eröffnen   Neue Antwort erstellen    ABAKUS Foren-Übersicht -> Spiders / Robots Themen
 grub-Client - FRage Was macht der GoogleBot ?  
dirk

pr


: 24.11.2003
: 720
: TmV1c3M=


: 04.05.2004, 08:40    : distributed crawling ? Antworten mit Zitat

Hi,

gibts eigentlich noch mehr projekte ala grub.org ? Finde das eigentlich ziemlich genial, was die sich da haben einfallen lassen !
Nach oben
dirk Private Nachricht senden E-Mail senden
manute

pr


: 22.07.2003
: 3034
: Hamburg


: 08.05.2004, 18:55    : distributed crawling ? Antworten mit Zitat

echt ne geile sache, hab ich grad zum ersten mal gesehen, vielen dank für den link dirk.
aber eins hab ich nach ner halben stunde lesen nicht gefunden: wer nutzt die daten heute schon und kann ich sie auch selbst für ne kleine, eigene suma nutzen? kennt sich vielleicht jemand schon besser damit aus?

Das Social Network nur für SEOs
Nach oben
manute Private Nachricht senden WWW AIM-Name Yahoo Messenger MSN Messenger
manute

pr


: 22.07.2003
: 3034
: Hamburg


: 08.05.2004, 23:50    : distributed crawling ? Antworten mit Zitat

so jetzt hab ich mir das mal etwas genauer angesehen und bin enttäuscht
ich kann keine eigenen seite zum crawlen eintragen und sehe im grub-forum beiträge mit genau dem gleichen problem, die 1 jahr alt sind! -> schrott!

Das Social Network nur für SEOs
Nach oben
manute Private Nachricht senden WWW AIM-Name Yahoo Messenger MSN Messenger
Rankseeker

pr


: 19.10.2003
: 32
: Las Palmas


: 10.05.2004, 18:04    : distributed crawling ? Antworten mit Zitat

manute @

:

ich kann keine eigenen seite zum crawlen eintragen und sehe im grub-forum beiträge mit genau dem gleichen problem, die 1 jahr alt sind! -> schrott!


Klar kannst Du deine eigenen Seiten zum crawlen eintragen. Zuerst musst Du die Funktion "enable local crawling fpr this client" in den preferences aktivieren.
Bitte vorher das Textfile grub.txt downloaden und in jede root deiner domains einspielen... dorthin wo robots.txt ist.

Anschliessen kannst Du alle deine Seiten im Memberbereich eintragen.
Lass den Grub über Nacht laufen und Deine Seiten sind alle im Index.

Ist eine gute Sache... bin schon über ein Jahr dabei.

Gruss

Auswandern Kanaren
Nach oben
Rankseeker Private Nachricht senden
manute

pr


: 22.07.2003
: 3034
: Hamburg


: 10.05.2004, 18:48    : distributed crawling ? Antworten mit Zitat

das hab ich schon so gemacht, aber es hat stundenlang nicht funktioniert. mittlerweile geht es aber doch, keine ahnung warum.
ich gucks mir noch etwas länger an, mal sehen, aber so begeistert bin ich davon nicht mehr.

Das Social Network nur für SEOs
Nach oben
manute Private Nachricht senden WWW AIM-Name Yahoo Messenger MSN Messenger
axelm

pr


: 18.10.2004
: 589
: Hamburg


: 14.02.2005, 15:55    : distributed crawling ? Antworten mit Zitat

Die Daten werden im Moment von Looksmart.com benutzt.
Seit kurzem haben die dafür wohl auch ein bissel Hardware abgestellt und tauchen selber als Team in den Stats auf.

Ich habe den Client seit ca. 1 Jahr laufen und merke, dass die Anzahl der Client immer weniger wird (ca. 550 im Moment vor 6-12 Monaten waren es noch 2000)

Wer noch nen Rechner rumstehen hat sollte sich das Ding mal installieren.

Seit dem Update auf den neuen Client finde ich keine Einstellung mehr um das local crwaling zu aktivieren. Macht der das jetzt automatisch wenn man seine Sites eingetragen hat und die grub.txt abgelegt hat?
Nach oben
axelm Private Nachricht senden WWW Besuche das Xing-Profil dieses Users
axelm

pr


: 18.10.2004
: 589
: Hamburg


: 14.02.2006, 11:12    : distributed crawling ? Antworten mit Zitat

Grub.org ist tot, es lebe distributed crawling!

Aufmerksame Logifle leser werden es schon bemerkt haben, es gibt was neues:
http://www.majestic12.co.uk/
der Java Client für Windows macht einen ganz vernünftigen Eindruck.

Da die Rechner meistens eh an sind, kann man das mal laufen lassen.
Jeder User der sich einen Account anlegt bekommt eine Profil Seite mit einem Backlink.
Nach oben
axelm Private Nachricht senden WWW Besuche das Xing-Profil dieses Users
bull

pr


: 20.09.2003
: 2176
: Vèneto


: 14.02.2006, 12:14    : distributed crawling ? Antworten mit Zitat

Siehe auch
http://www.abakus-internet-marketing.de/foren/viewtopic/t-10499.html
wo der Kollege tbone78 ebenfalls viel Positives konstatierte.

Gruß
bull
Nach oben
bull Private Nachricht senden
Neues Thema eröffnen   Neue Antwort erstellen    ABAKUS Foren-Übersicht -> Spiders / Robots Themen
Seite 1 von 1

 






Ähnliche Beiträge
Thema Forum Antworten
Wer kann Crawling 404 fehler beseitigen? Wer kann Crawling 404 fehler beseitigen? surf4all Stellenbörse: Stellenangebote und -gesuche 0 18.04.2012, 12:30 Wer kann Crawling 404 fehler beseitigen?
Crawling von Contao CMS Systemen gestört? Crawling von Contao CMS Systemen gest... CyberNibbler Spiders / Robots Themen 7 12.03.2012, 16:43 Crawling von Contao CMS Systemen gestört?
Crawling Fehler Crawling Fehler trooy Ich hab' da mal 'ne Frage 6 19.02.2012, 13:05 Crawling Fehler
ca. 5000 404 Crawling-Fehler in Webmastertools nach Umzug ca. 5000 404 Crawling-Fehler in Webma... scheune09 Weiterleitungen und mod_rewrite 6 04.01.2012, 18:58 ca. 5000 404 Crawling-Fehler in Webmastertools nach Umzug
Crawling-Fehler Webmastertools TROTZ rewrite? Crawling-Fehler Webmastertools TROTZ ... Chr1s Spiders / Robots Themen 6 03.01.2012, 16:00 Crawling-Fehler Webmastertools TROTZ rewrite?
Crawling Fehler "nicht gefunden"-wie nachträglich Crawling Fehler "nicht gefunden&... Pfauli Google Forum 12 16.11.2011, 01:49 Crawling Fehler "nicht gefunden"-wie nachträglich
Was tun gegen Crawling-Fehler? Was tun gegen Crawling-Fehler? Hirnhamster Weiterleitungen und mod_rewrite 12 27.06.2011, 21:41 Was tun gegen Crawling-Fehler?

Suchmaschinenoptimierung | Latent Semantische Optimierung (LSO) | SEO Blog | SEO Online Tools | Suchmaschinenmarketing Angebot | Online Marketing

Impressum

Dieses SEO Forum läuft unter phpBB.


Sie lesen gerade: distributed crawling ?