Entfernen von alten #! hashbang URLs aus dem Google Index

Michael_W

Hallo zusammen,

wer kann mir zu folgendem Problem einen Tipp geben

? Vielen Dank im Voraus!

Wir sind heute, nachdem wir ca. 2 Monate auf einem MEAN-Stack mit Hashbang unterwegs waren, mit einer neuen Version unserer Webseite (auf Webflow) live gegangen. Zielsetzung ist es jetzt die alten Links im Index möglichst schnell durch die neuen zu ersetzen. Link Juice dürfte eher zweitrangig sein. Einige Fakten/Infos:

Alte Seite:
- Die alte Seite nutzt Hashbangs #!.
- URL Struktur: https://www.domain.de/#!/text/text
- Über prerender.io wurden escaped_fragments generiert.
- Die URLs wurden als Sitemap bei Google eingereicht (mit #!).
- Die alte Seite war max. 2 Monate live und hatte keine wirklichen Backlinks.

Neue Seite:
- Heute haben wir die neue Seite mit Hilfe von Webflow gelaunched.
- Die neuen URLs sehen folgendermaßen aus: https://www.domain.de/folder/name-of-the-page
- Ca. 60% der alten Seiten hätten theoretisch eine korrespondierende Seite auf der neuen Seite. Die restlichen hätten übergeordnete Seiten auf die man redirecten könnte.
- Über Webflow kann ich nur direkt im System 301 Redirects anlegen und diese funktionieren mit den Hashbangs natürlich nicht.
- Wenn ich die alten Adressen, sowohl mit Hashbang als auch mit Escaped Fragment, aufrufe, dann komme ich auf die neue Startseite.

Problem und Fragen:

(1) Wie bekomme ich die alten hashbang URLs am einfachsten und schnellsten aus dem Google Index? Und wie bekomme ich die neuen URLs am schnellsten gelistet?

(2) Was würde passieren, wenn ich die (a) alten Hashbang URLs oder die (b) alten escaped_fragments über einen "removal request" aus Google entfernen lasse? Besteht das Risiko, dass die neue Startseite dadurch entfernt wird, da diese ja auch aufgerufen wird wenn die alten URLs eingegeben werden (bzw. die alten URLs als neue Startseite interpretiert werden)?

(3) Besteht das Risiko, dass alle (ca 130) alten URLs als dublicate content gewertet werden, da letztendlich ja alle auf die neue Startseite verweisen bzw. als neue Startseite interpretiert werden?

(4) Ist es möglich/sinnvoll, dass alle 130 alten URLs über einen "removal request" entfernt werden? Oder gibt es eine bessere Lösung?

Vielen Dank!!!

Beste Grüße,
Michael

chris21

Die escaped_fragments per 301 weiterleiten und gleichzeitig per Javascript die Hashbangs abfangen und ebenfalls weiterleiten.

Also ?_escaped_fragment=/text/text per mod_rewrite od. php od. abfangen und auf /folder/name-of-page

und gleichzeitig per Javascript die /#!/text/text abfangen und per document.location.replace('/folder/name-of-page') o.ä. auf die /folder/name-of-page weiterleiten.

Dazu die Crawler von Google, Bing und Co. beobachten und vll. notfalls in der Sitemap die alten Hashbangs und die neuen URLs drin haben. (Die alten, damit sie aufgerufen und dadurch die Weiterleitungen entdeckt werden, die neuen, weil ihr sie schnell in den Index bekommen wollt)

Alternative zum Javascript Redirect der Hashbangs mit dynamischen Canonical arbeiten.

Also bei Aufruf von /#!/text/text-1 bekomme ich den Canonical auf /folder/name-of-page-1 und bei Aufruf von /#!/text/text-2 den Canonical auf /folder/name-of-page-2 (dann würde ich die _escaped_fragments_ trotzdem zusätzlich direkt per 301 weiterleiten)

(Tante Edith sagt: da ihr anscheinend unter den Hashbangs die alten Inhalte nicht mehr bereitstellen könnt, fällt der Canonical flach und ihr müsst mit der Kombi aus 301 für escaped_fragments und JS Redirects für die Hashbangs arbeiten. Edith Ende)

Mit removals würde ich nicht arbeiten, soweit die alten URLs alle indexiert sind (und das sind sie ja, sonst gäbe es das Problem nicht).

Michael_W

Hi Chris,

danke für die schnelle Antwort.

Problem ist nur, dass ich via Webflow kein JS/PHP einbinden kann. Bzw. nicht wüsste wie das funktionieren soll. Gibt's da irgendwo online ein Beispiel für den Case?

Was würde denn gegen das Löschen sprechen? Link Juice kommt beim Redirect wahrscheinlich sowieso keiner an. Oder sieht Google das weniger gern .. ?

Beste Grüße, Michael

chris21

Link Juice ist nur noch ein (vll. sogar nur noch kleiner) Teil der Kriterien, wie Google Seiten und Inhalte bewertet. Bei älteren Seiten, die erfolgreich waren, will man auch die Nutzersignale, die Google gesammelt hat, transferieren. Bei einer zwei Monate alten Seite ist dies vll. noch nicht so relevant.

Habe mir eben Webflow angesehen, wie es aussieht, habt ihr da noch nicht mal jenen Zugriff auf den Server wie bei einem normalen Webhosting.

Könnt Ihr denn zumindest eigene JS-Codes einbringen? Dann notfalls darüber die Weiterleitungen machen. Ansonsten eben (sofern ihr den entsprechenden Produkt/Plan habt, HTML & CSS exportieren, selber hosten und die Probleme professionell lösen

Michael_W

JS könnte ich mit rein nehmen ... würde das ausreichen um die Hashbang URLs aus dem Index zu bekommen?

Kannst Du mir ein Stichwort nennen nach dem ich googeln kann, um ggf. eine Anleitung zu finden?

Vielen Dank

!!!

elmex

Was für eine Menge an Google Traffick generiert die Seite denn überhaupt? Und um welche Seite geht es eigentlich? Wenn Du eh kaum Besucher hast, dann brauchst Du Dir bei einer 2 Monate alten Seite um sowas keine Gedanken machen, gerade wenn es keine "tollen" Deeplinks gibt....

tuennes

In die Sitemap die neuen wie die alten Seiten aufzunehmen, halte ich für ziemlichen Mumpitz. Da gehören nur die aktuellen Seiten rein. Die alten kennt Google doch schon, wie soll das bei einer Weiterleitung helfen?

Die alten Seiten dann einfach per Mod_Rewrite und 301 auf die neuen umleiten. Bei nur 130 Seiten kann man das doch sogar noch per Hand machen. Da braucht man dann auch keine Wissenschaft mehr für. Da ist man doch in zwei Stunden fertig mit.

Oder versteh ich nur diese komischen Hashbangs nicht?

Michael_W

elmex hat geschrieben:Was für eine Menge an Google Traffick generiert die Seite denn überhaupt? Und um welche Seite geht es eigentlich? Wenn Du eh kaum Besucher hast, dann brauchst Du Dir bei einer 2 Monate alten Seite um sowas keine Gedanken machen, gerade wenn es keine "tollen" Deeplinks gibt....

Hi elmex,

der Google Traffic und der Link Juice/ die Backlinks sind minimal bis nicht vorhanden. Von daher gebe ich Dir vollkommen Recht..

Mein Problem ist nur, wie ich die alten Seiten aus dem Index heraus bekomme. Am liebsten wäre es mir alle alten Unterseiten zu löschen und die neuen Seiten sauber per Sitemap einzuspielen.

Ein 301 funktioniert von den #! URLs aus leider nicht.

Alternativ könnte ich natürlich alle 130 alten URLs über das Removal Tool von Google entfernen lassen, allerdings habe ich da schon einige kritische Anmerkungen bekommen, dass dieses Tool möglichst nicht genutzt werden sollte.

Darüber hinaus stellt sich für mich die Frage, ob die Gefahr besteht, dass die neue Startseite damit dann auch gelöscht wird .. da die Hashbang URL ja momentan komplett die neue Startseite ausgeben.

Viele Grüße und besten Dank,
Michael

Michael_W

tuennes hat geschrieben:In die Sitemap die neuen wie die alten Seiten aufzunehmen, halte ich für ziemlichen Mumpitz. Da gehören nur die aktuellen Seiten rein. Die alten kennt Google doch schon, wie soll das bei einer Weiterleitung helfen?

Die alten Seiten dann einfach per Mod_Rewrite und 301 auf die neuen umleiten. Bei nur 130 Seiten kann man das doch sogar noch per Hand machen. Da braucht man dann auch keine Wissenschaft mehr für. Da ist man doch in zwei Stunden fertig mit.

Oder versteh ich nur diese komischen Hashbangs nicht?

Hi,

Der Mod-Rewrite klappt bei den Hashbang URLs leider nicht. Das wäre natürlich auch mein erster Gedanke gewesen.

Allerdings hätte ich da auch nur bei 60% der Seiten einen direkten Match auf eine neue Seite gehabt und bei 40% nur auf eine übergeordnete Seite. D.h. ca. jeweils ca. 5-10 Seiten würden auf eine übergeordnete Seite verweisen, die Thematisch relativ gut passt. Super glücklich scheint Google mit mehreren 301 Redirects auf eine einzige Seite ja aber auch nicht zu sein.

Danke und Gruß,
Michael

elmex

Michael_W hat geschrieben:Darüber hinaus stellt sich für mich die Frage, ob die Gefahr besteht, dass die neue Startseite damit dann auch gelöscht wird .. da die Hashbang URL ja momentan komplett die neue Startseite ausgeben.

Das halte ich für eine durchaus berechtigte Sorge...

Allerdings muss ich zugeben, genau aus diesen Gründe diese Hashbang URLs immer gemieden zu haben. So weit ich weiß, kann man diese nur per Javascript auswerten - gibt es da nicht mittlerweile irgendeine "Google freundliche Weiterleitung" in Javascript?!

Michael_W

Was würde denn passieren, wenn die Startseite im Worst-Case mitgelöscht werden würde? Könnte ich sie dann wieder neu listen lassen?

Gerade denke ich folgende Kombination durch:

(1) Entfernen der alten #! URL über das Removal Tool

(2) Über robots.txt verhindern, dass die #! URLs weiter gecrawlt werden:

User-agent: *
Disallow: /*_escaped_fragment_

(3) Neue Seiten via sitemap einstellen.

Wäre das eine gangbare Lösung?

Michael_W

Michael_W hat geschrieben:Was würde denn passieren, wenn die Startseite im Worst-Case mitgelöscht werden würde? Könnte ich sie dann wieder neu listen lassen?

Gerade denke ich folgende Kombination durch:

(1) Entfernen der alten #! URL über das Removal Tool

(2) Über robots.txt verhindern, dass die #! URLs weiter gecrawlt werden:

User-agent: *
Disallow: /*_escaped_fragment_

(3) Neue Seiten via sitemap einstellen.

Wäre das eine gangbare Lösung?

Zusätzlich würde ich vorsichtshalber noch die #! URL als auf "disallow" setzen:

User-agent: *
Disallow: /*_escaped_fragment_
Disallow: /*#!

Eigentlich dürften die ja für Google nicht relevant sein, aber falsch machen kann ich damit doch auch nichts oder ..

Michael_W

Any ideas? Macht das Vorgehen so Sinn?

Ich freue mich über jeden Tipp/Hinweis

..