Unterseiten werden von Google nicht indexiert, Fehler: noindex

[Jthob]

Hallo zusammen,
ich habe eine Internet-Seite gebaut, die jetzt schon einige Wochen Online ist. Sie besteht momentan ca. aus 50 einzelnen Seiten. Die Hauptseite rankt aktuell auch schon unter den ersten 3 Plätzen für die relevanten Keyword, aber: Google Indexiert ca. 30 Seiten einfach nicht. In der Search Konsole wird ein Fehler ausgegeben bei dem darauf verwiesen ist, dass die Seiten auf noindex gesetzt sind. Dies ist allerdings nicht der Fall. Im Quelltext, in der txt.robots-Datei und im Backend lässt sich allerdings nicht finden, wieso diese Seiten auf noindex gesetzt sein sollten. Wir haben die txt.robots-Datei schon mehrmals erneuert und auch die einzelnen Unterseiten manuell zur erneuten Indexierung eingereicht... Leider immer wieder der gleiche Fehlerhinweis von der Search-Console. Wer hat hier eine Idee wie ich rausbekommen, wo die Herausforderung liegt?... Es ist super ärgerlich, da die Content-Kreation für die Unterseiten viel Zeit in Anspruch genommen hat. Über Hilfe wäre ich sehr dankbar!
Gruß&Dank, Jthob

[heinrich]

Meine Glaskugel ist grade in der Reparatur! Liegt wohl an der txt.robots-Datei
YMMD

[arnego2]

Hallo zusammen,
ich habe eine Internet-Seite gebaut, die jetzt schon einige Wochen Online ist. Sie besteht momentan ca. aus 50 einzelnen Seiten.

Schau mal mit site:meine-seite.de nach was alles im Index ist.
Wenn viel fehlt lege eine Sitemap an und reiche die ein. Mit etwas Glück ist die komplette Seite nach 9 weiteren Monaten indexiert. Google ist etwas langsamer geworden. Zu groß IMHO.

[marowi]

Wir haben das selbe Problem mit einem Projekt.

Es war in der Entwicklungsphase eine kurze Zeit lang ohne Verzeichnisschutz und mit noindex meta-tag für den Googlebot zugänglich. Wenige Tage später haben wir dann auf index,follow umgestellt. Doch die Seiten, die der Googlebot zwischenzeitlich mit noindex gefunden hat, sind seitdem nicht indexiert. Das war vor zwei Monaten...

In der Search Console werden uns die Seiten mit dem Fehler "Gesendete URL als "noindex" gekennzeichnet" gemeldet. Haben jetzt schon alles versucht die Seiten in den Index zu bekommen. Haben in der Search Console Überprüfungen gestartet, korrekte Sitemaps angegeben, manuelles Indexieren der Seiten beantragt. Nichts hat bisher geholfen. Obwohl uns der Live URL-Test bescheinigt, dass die Seiten fehlerfrei sind und indexiert werden können.

Auf moz.com gibt es einen ausführlichen Artikel zum selben Problem:
https://moz.com/blog/accidentally-deindex-your-site

Bei ihm hat es 8-9 Wochen gedauert, bis die Seiten wieder alle indexiert waren.

Ich befürchte bei neuen Seiten ohne starkes Backlinkprofil dürfte es noch länger dauern.

Google scheint was noindex betrifft, ein sehr langes Gedächtnis zu haben. Das war früher anders. Und komisch ist auch, dass der Googlebot täglich auf den Seiten herumschwirrt - scheinbar mit verschlossenen Augen.

[top]

Wenn es daran liegt, könnte es die Sache vielleicht beschleunigen wenn man die URL-Struktur der betreffenden Seiten ändert. (Und zur Sicherheit vielleicht noch eine Weiterleitung einrichtet.)
Also z. B. aus example.org/tolle-wurst einfach ecample.org/tolle-wuerste machen. Du kannst es ja erst mal mit ein paar wenigen betroffenen Seiten testen. Dann hättest du auch ein deutliches Indiz ob es wirklich daran lag.

[arnego2]

Wir haben das selbe Problem mit einem Projekt.

Was sagt die Site:deine-domain.de Abfrage?

[marowi]

Die site-Abfrage gibt genau die Seiten aus, die auch laut Search Console indexiert sind. Das stimmt überein.

Das mit der URL-Änderung werde ich testweise mal probieren und dann berichten.

[marowi]

Linkstruktur ändern würde klappen. Habe einige Seiten angepasst und URLs gewählt, die Google noch nicht kannte. Danach dann in der Search Console indexieren beantragt und keinen Tag später wurden sie aufgenommen. Ist leider nicht praktikabel für die ganze Seite. Bestätigt aber meine Vermutung, dass Google Seiten die mal noindex waren eine ganze Weile lang ignoriert. Auch wenn man für diese um eine erneute Indexierung bittet.

[daniel5959]

Hallo,

es geht wohl beim Forenuser "Jthob" um seine Affiliate-Webseite, auf der zahlreiche Hobbyarten vorgestellt werden, die Texte sind gut lesbar und ausführlich, es gibt jeweils 3 Artikelfotos als Werbelinks auf den Unterseiten.

Den Link zur Webseite, der in einem anderen Forum gepostet wurde, hat der Betreiber inzwischen entfernt.

daniel5959

[Lyk]

Wenn es daran liegt, könnte es die Sache vielleicht beschleunigen wenn man die URL-Struktur der betreffenden Seiten ändert. (Und zur Sicherheit vielleicht noch eine Weiterleitung einrichtet.)
Also z. B. aus example.org/tolle-wurst einfach ecample.org/tolle-wuerste machen. Du kannst es ja erst mal mit ein paar wenigen betroffenen Seiten testen. Dann hättest du auch ein deutliches Indiz ob es wirklich daran lag.

testen??? was willste da testen? die würste??
oder willste die wurst testen??
is ein unterschied zwischen einer wurst und mehrere würste^^

paar wochen online, würde warten und weiter an der webseite arbeiten.

oder aber mal einfach ein trick versuchen... die robots.txt-datei einfach löschen und eine neue erstellen, funktioniert meistens. nur ändern geht nicht, die alte muss wirklich gelöscht werden, hoch laden und an google senden. paar tage später sind alle url´s im index.

url-änderung ist ein anfänger fehler, würde ich nicht machen.

[top]

Wenn es daran liegt, könnte es die Sache vielleicht beschleunigen wenn man die URL-Struktur der betreffenden Seiten ändert. (Und zur Sicherheit vielleicht noch eine Weiterleitung einrichtet.)
Also z. B. aus example.org/tolle-wurst einfach ecample.org/tolle-wuerste machen. Du kannst es ja erst mal mit ein paar wenigen betroffenen Seiten testen. Dann hättest du auch ein deutliches Indiz ob es wirklich daran lag.

testen??? was willste da testen? die würste??
oder willste die wurst testen??
is ein unterschied zwischen einer wurst und mehrere würste^^
...
url-änderung ist ein anfänger fehler, würde ich nicht machen.

Natürlich soll er testen ob die Umbenennung des Dateipfades dazu führt, dass Google diese Seiten in den Index aufnimmt. Wenn alle umbeannten Seiten im Index landen und die anderen fehlenden Seiten es immer noch nicht geschafft haben, sollte das doch ein Zeichen dafür sein, dass das etwas gebracht hat.
Hast du selbst damit Erfahrungen oder eine Erklärung warum das nicht funktionieren sollte? Ich lerne gerne etwas dazu.

...
oder aber mal einfach ein trick versuchen... die robots.txt-datei einfach löschen und eine neue erstellen, funktioniert meistens. nur ändern geht nicht, die alte muss wirklich gelöscht werden, hoch laden und an google senden. paar tage später sind alle url´s im index.
...

Woran kann Google beim Abruf der robots.txt erkennen ob, die Datei nur geändert oder komplett neu geschrieben wurde?

[Lyk]

Natürlich soll er testen ob die Umbenennung des Dateipfades dazu führt, dass Google diese Seiten in den Index aufnimmt. Wenn alle umbeannten Seiten im Index landen und die anderen fehlenden Seiten es immer noch nicht geschafft haben, sollte das doch ein Zeichen dafür sein, dass das etwas gebracht hat.

kannst ja sofort neue webseite erstellen. bzw dein test führ dazu, dass die webseite neu bewertet wird ---> 3 Monate verloren.
irgend wann änderste wieder die url, willst ja die alten benutzen, die neuen url´s waren ja nur ein test und booom, wieder 3 monate verloren und siehe da, die seiten sind wieder deindexiert, also fängste wieder von neu an url´s zu ändern und boom, wieder ne neubewertung und wieder 3 monate verloren, bzw. musste warten^^

wann und wie willste mit der seite durchstarten? wie soll das gehen bei den ganzen änderungen?

zumal, willst ja auch noch mit umleitung arbeiten.
weiss du was passiert wenn du von eine deindexierten seite url änderst und eine umleitung erstellst?
die umleitung führt dazu, dass die neue seite auch abgestraft wird, aber hauptsache umgeleitet^^

Hast du selbst damit Erfahrungen oder eine Erklärung warum das nicht funktionieren sollte? Ich lerne gerne etwas dazu.

ja habe ich, sonst würde ich mich nicht zum thema melden.

hatte noch vor kurzem ähnliches problem, jedoch mit einer alten webseite.

die seite läuft mit wordpress. benutze da yoast, ein seo pluging und habe mal testweise alle seiten auf noindex gesetzt und keine minute später wieder alles auf index.

keine woche später werden fast alle seite ausser die startseite und paar andere deindexiert. ich schau mit dem plugin in die robots.txt-datei und sehe nichts. dann habe ich mich via ftp auf den server verbunden und habe die robots-datei heruntergeladen und mit 4 verschiedenen editoren mir die datei angeschaut und habe kein eintrag gesehen.

obwohl mit keinem editor ein eintrag gesehen wurde, habe ich die datei komplett gelöscht, neu erstellt und hochgeladen.
keine woche später waren alle url´s wieder im index.

Woran kann Google beim Abruf der robots.txt erkennen ob, die Datei nur geändert oder komplett neu geschrieben wurde?

gibt manchmal reste von codeschnipsel die siehst du nicht sind aber trotzdem vorhanden, quasi unsichtbare, die siehste nur, wenn du unicode-zeichen änderst.... deswegen bei solchen deindexierung fehler sofort robots löschen und neu erstellen, alles andere bringt nix, bzw. macht das ganze komplizierter und sehr viel durcheinander.

[Martin Bongartz]

Mal den HTTP Header geprüft? F12 bei Chrome > Network > das Hauptdokument (html) anklicken und im Header schauen, ob dort ein noindex eingetragen ist.

[staticweb]

Erster Beitrag und keine Reaktion auf die Antworten. Wahrscheinlich vergebliche Liebesmüh.

[staticweb]

[quote=staticweb post_id=1034820 time=1596550312 user_id=48398]
Erster Beitrag und keine Reaktion auf die Antworten. Wahrscheinlich vergebliche "Liebesmüh".
[/quote]