Online Marketing Forum Deutschland
 
ABAKUS Online Marketing Forum
Suchmaschinenoptimierung
+ABAKUS
ABAKUS bei Google+
Facebook
ABAKUS bei Facebook
Google+ SEO Community von ABAKUS
Google+
SEO Community

   

ABAKUS Foren-Übersicht -> Spiders / Robots Themen
 

[Anfänger] robots.txt und mehrere Domains?

Neues Thema eröffnen   Neue Antwort erstellen
 HTTrack mit robots.txt draussen lassen Startseite wird nicht indexiert ...  
gurken

pr


: 07.09.2006
: 880



: 24.02.2012, 13:29    : [Anfänger] robots.txt und mehrere Domains?
Von: gurken
gurken
00 24.02.2012, 13:29
Antworten mit Zitat Antworten mit Zitat

Ich habe mehrere Domains mit gleichem Webspace z.B.

domain1.com geht nach /domain1/
domain2.com geht nach /domain2/

Nun habe ich jeweils in /domain1 und /domain2 eine robots.txt (überhaupt richtig?)

Dann habe ich noch eine Domain für interne Zwecke welche direkt auf das Rootverzeichnis geht ./ - hier möchte ich nun einen Order machen /intern/ und darauf mit domainintern/intern/ zugreifen - dieses Verzeichnis soll aber nicht mit Google gefunden werden. Muss ich einfach eine robots.txt in den Rootordner legen und den Unterordner /intern/ disalowen?

Verstehe ich es richtig das es mehrere robots.txt geben kann und die jeweils darüber liegende robots.txt hat die höhere Priorität? - Sprich wenn ich im root den ordner /domain1/ disalow wird die robots.txt in /domain1/ nicht berücksichtig da ja nicht weitergegangen wird?
00
Nach oben
gurken Private Nachricht senden
net(t)worker

pr


: 12.02.2012
: 61



: 24.02.2012, 14:00    : [Anfänger] robots.txt und mehrere Domains?
Von: net(t)worker
net(t)worker
00 24.02.2012, 14:00
Antworten mit Zitat Antworten mit Zitat

es wird immer nur die /robots.txt beachtet, du verwechselst das wahrscheinlich mit der .htaccess die vom Webserver bearbeitet wird, hier kann in jedem Ordner eine liegen und die überschreiben sich dann gegenseitig...

deine domain für interne Dinge solltest du direkt auf den Unterordner /intern legen und nicht aufs verzeichnisroot...

www.facebook.com/netttworker
00
Nach oben
net(t)worker Private Nachricht senden
gurken

pr


: 07.09.2006
: 880



: 24.02.2012, 15:07    : [Anfänger] robots.txt und mehrere Domains?
Von: gurken
gurken
00 24.02.2012, 15:07
Antworten mit Zitat Antworten mit Zitat

das geht leider nicht da die interne Domain gleichzeitig die Hauptdomain ist und immer auf das Rootverzichnis zeigt -> kann nicht geändert werden.

In meinem Fall müsste also die robots.txt im root liegen und dann das Unterverzeichnis /intern/ disalown?

Für die anderen 2 Domains hab ich es aber richtig gemacht?
00
Nach oben
gurken Private Nachricht senden
net(t)worker

pr


: 12.02.2012
: 61



: 24.02.2012, 15:37    : [Anfänger] robots.txt und mehrere Domains?
Von: net(t)worker
net(t)worker
00 24.02.2012, 15:37
Antworten mit Zitat Antworten mit Zitat

regurge hat Folgendes geschrieben:
das geht leider nicht da die interne Domain gleichzeitig die Hauptdomain ist und immer auf das Rootverzichnis zeigt -> kann nicht geändert werden.


klar kann das geändert werden... zur Not durch einen Hosterwechsel.... wenn ein Hoster meint das zusätzliche domains oder subdomains auch gleichzeitig immer über eine andere domain erreichbar sein müssen, sollten die sich nicht wundern wenn die Kunden weggehen...

www.facebook.com/netttworker
00
Nach oben
net(t)worker Private Nachricht senden
Melegrian

pr


: 30.01.2005
: 3170



: 24.02.2012, 16:18    : Re: [Anfänger] robots.txt und mehrere Domains?
Von: Melegrian
Melegrian
00 24.02.2012, 16:18
Antworten mit Zitat Antworten mit Zitat

regurge hat Folgendes geschrieben:
Ich habe mehrere Domains mit gleichem Webspace z.B.

domain1.com geht nach /domain1/
domain2.com geht nach /domain2/

Nun habe ich jeweils in /domain1 und /domain2 eine robots.txt (überhaupt richtig?)

Wie wird was aufgerufen?

domain1.com geht nach /domain1/index.html
domain2.com geht nach /domain2/index.html

Ladet beim Aufruf von domain1.com die index.html und im Browser wird nur domain1.com angezeigt und beim Aufruf von domain2.com halt die index.html von domain2.com und im Browser wird nur domain2.com angezeigt? Und mit Domain-intern das gleiche Spiel?

Es gibt immer nur eine robots.txt und diese liegt im Root, wobei mit Root aber das Hauptverzeichnis der Domain gemeint ist. Ein Bot, der domain2.com aufruft, sieht die robots.txt von domain1.com und von Domain-intern nicht, wenn das richtig eingerichtet ist. Also bei domain2.com steigt der nicht über root/domain2/ ein sondern über / und der Server liefert index.html aus. Diesen Teil root/domain2 vor / sieht der Bot nicht beim Aufruf von domain2.com.

Somit legst Du im Root von jeder Domain eine robots.txt nur für diese Domain ab, vermutlich hast Du das richtig gemacht. Du kannst im Root von Domain-intern eine robots.txt mit

User-agent: *
Disallow: /domain1/
Disallow: /domain1/

ablegen, was für den Bot nur so viel bedeutet, dass er diese beiden Verzeichnisse von Domain-intern unberücksichtigt lassen möchte. Ein Bot, der über Domain1.com oder Domain2.com einsteigt, sieht diese beiden Verzeichnisse aber nicht, sondern hält die für das jeweilige Hauptverzeichnis / der jeweiligen Domain. Viel wichtiger ist, dass Du nicht versehentlich einen Link von Domain-intern nach Domain1.com in dieser Art setzt: domain-intern.com/domain1/intern.html, in dem Fall hätte der Bot einen verfolgbaren Querverweis.
00
Nach oben
Melegrian Private Nachricht senden
gurken

pr


: 07.09.2006
: 880



: 25.02.2012, 12:03    : Re: [Anfänger] robots.txt und mehrere Domains?
Von: gurken
gurken
00 25.02.2012, 12:03
Antworten mit Zitat Antworten mit Zitat

Melegrian hat Folgendes geschrieben:
""


danke für die tolle Antwort, ich glaube alles verstanden zu haben
00
Nach oben
gurken Private Nachricht senden
Neues Thema eröffnen   Neue Antwort erstellen    ABAKUS Foren-Übersicht -> Spiders / Robots Themen

Seite 1 von 1
 





Ähnliche Beiträge
Thema Online Marketing Forum Antworten
Domainumzug united-domains > SEDO - brauche Hilfe! Domainumzug united-domains > SEDO ... themaster3000 Ich hab' da mal 'ne Frage 8 02.11.2018, 18:18 Domainumzug united-domains > SEDO - brauche Hilfe!
[B] Expired Domains kaufen | Fitness | Sport | und andere [B] Expired Domains kaufen | Fitness ... betrakon Marktplatz: Dienstleistungen 0 08.10.2018, 14:23 [B] Expired Domains kaufen | Fitness | Sport | und andere
[B] Expired Domains kaufen | Fitness | Sport | und andere [B] Expired Domains kaufen | Fitness ... betrakon Marktplatz: Dienstleistungen 0 02.10.2018, 14:01 [B] Expired Domains kaufen | Fitness | Sport | und andere
Verzeichnis für expired .de Domains. Gibt es soetwas? Verzeichnis für expired .de Domains. ... Pokemon Domainpopularität / Link-Marketing, Backlinks aufbauen & Seeding 3 30.09.2018, 20:42 Verzeichnis für expired .de Domains. Gibt es soetwas?
Content Umzug - mehrere Seiten auf eine Einzelne? Content Umzug - mehrere Seiten auf ei... Cybershark Google Forum 3 28.09.2018, 13:27 Content Umzug - mehrere Seiten auf eine Einzelne?
[B] Expired Domains kaufen | Fitness | Sport | und andere [B] Expired Domains kaufen | Fitness ... betrakon Marktplatz: Dienstleistungen 0 26.09.2018, 09:28 [B] Expired Domains kaufen | Fitness | Sport | und andere
[B] Expired Domains kaufen | Fitness | Sport | und andere [B] Expired Domains kaufen | Fitness ... betrakon Marktplatz: Dienstleistungen 0 22.09.2018, 09:05 [B] Expired Domains kaufen | Fitness | Sport | und andere


SEO Wetter von www.seowetter.de

Startseite der SEO-Agentur ABAKUS | Social Media & SEO Blog | SEO Online Tools | Suchmaschinenmarketing Angebot | Reif für die Klinik?

Impressum | Datenschutz

[Anfänger] robots.txt und mehrere Domains? [Anfänger] robots.txt und mehrere Domains? - Österreich [Anfänger] robots.txt und mehrere Domains? - Schweiz

Dieses SEO Forum läuft unter phpBB.


Sie lesen gerade: [Anfänger] robots.txt und mehrere Domains?