robots.txt steuern bei shop in unterseite

djad · **djad** » 07.11.2016, 15:37 **robots.txt steuern bei shop in unterseite**

hallo leute,

ich habe folgende konstellation auf dem server:

domain.de (präsentationsseite in wordpress noch für suma gesperrt)
domain.de/shop (dieser shopware shop soll aber indexiert werden)

wie sollten hier die robots.txt dann im root ordner aussehen?

Erfolgreiche und optimale Nutzung mit Shopware Shopsystemen! Nutzen Sie unsere jahrelange Erfahrung mit Suchmaschinenoptimierung für Shopware und lassen Sie sich beraten!

Lesen Sie die wichtigsten Shopware-Optimierungsmaßnahmen oder kontaktieren Sie uns direkt unter: 0511 / 300325-0

/Affilitiv/

entweder die Sperre einfach weg

oder; für die index.html
* noindex (index nein)
* follow (Links folgen ja)

oder, von irgendwo einen Link in diesen Ordner
die robots darf natürlich nur die "index.html" bzw den RootOrdner sperren; Nicht den ShopOrdner (da darfste aber nicht mich fragen welche Kommandos da ...)

djad · **djad** » 08.11.2016, 10:33 **robots.txt steuern bei shop in unterseite**

hi, danke für die antwort
also wordpress seite ist ja im backend gesperrt für suchmaschinen. außerdem ist die seite eh "dekativiert"
daher hab ich mal die robots.xt wie folgt im root angelegt, mit dem ziel, dass der /shop ordner zwar indexiert wird:

natürlich hat shopware seine eigenen robots.txt, die es irgendwoe aus dem template zieht.

User-agent: *

Allow: /shop/

Disallow: /shop/compare
Disallow: /shop/checkout
Disallow: /shop/register
Disallow: /shop/account
Disallow: /shop/note
Disallow: /shop/widgets
Disallow: /shop/listing
Disallow: /shop/ticket