Herzlich willkommen im SEO Forum der ABAKUS Internet Marketing GmbH
registrieren registriertes Mitglied
Indizierung von Endless timelines und Ajax content
"Important page is blocked by robots.txt"-was kann
Prozentrechnung geht aber anders...torstenv hat geschrieben: Dier ist aber zur Zeit nicht erreichbar, da meine CPU-Auslastung über 400% liegt
Die robots txt ist lediglich eine empfehlung, keine regel an die sich irgendwer halten muesste. Entweder du blockst die bots schon bevor sie bei dir aufschlagen mit einem externen dienst, oder du versuchst es mit .htaccesstorstenv hat geschrieben: Meine robots.txt sieht derzeit so aus:
Moeglich; allerdings sollte man wohl den durchschnitt der einzelnen kerne nennen um die CPU auslastung zu bestimmen, statt einfach last1+last2 usw. zu addieren.Rem hat geschrieben:Das meint 4 Kerne mit jeweils 100% Auslastung...nerd hat geschrieben:Prozentrechnung geht aber anders...torstenv hat geschrieben: Dier ist aber zur Zeit nicht erreichbar, da meine CPU-Auslastung über 400% liegt