Hallo,
leider spielt der Googlebot verrückt.
Mein OSC Shop wird seit dem 16.07. 10Uhr nur noch mit dem Anhang "/language/de" gespidert. Der Shop selbst war immer einsprachig und hatte nie diesen Anhang.
Auch externe Links in dieser Form sind nicht zu finden. Noch besser, mit jedem Sprung hängt er noch eine 2-3 stellige Zahl hinter "/language/de247" und wechselt diese ständig.
z.B. normal ist "/cpath/114_115" der Bot macht daraus "/cpath/114_115/language/de34" oder "/de234" oder "/de56" u.s.w. bis zu 10x täglich wird die gleiche Seite gespidert.
OSC liefert immer eine "200", da alles was nach "/language/" kommt akzeptiert wird.
1. Es gibt keine externe Links mit dieser URL
2. Die interne verlinkung im Shop ist auch ok.
3. Andere Bots verhalten sich normal.
4. Der Bot spidert mitlerweilen nur noch diese URLs
5. Die falschen URLs erscheinen nicht im Index
6. Bisher noch keinen Nachteil gefunden
Wie soll ich nun vorgehen ?
Im Code herumwühlen um das ausführen von "/language/ zu verhindern.
per .htaccess versuchen umzuleiten (nur wie?)
robots.txt dürfte auch nicht funktionieren.
Email an Google ?
