registrieren registriertes Mitglied


Anzeige

Anzeige

Bestimmte Suchseiten crawlen lassen?

Hier kannst Du Deine Fragen zum Thema Suchmaschinenoptimierung (SEO) stellen.
Kakaro
PostRank 1
PostRank 1
Beiträge: 20
Registriert: 24.04.2016, 14:23

Beitrag Kakaro » 12.02.2018, 21:51 Bestimmte Suchseiten crawlen lassen?

Hallo,

Gibt es eine Möglichkeit, bei Suchseiten übergeordnete Verzeichnisse vom Crawler zu sperren, aber gleichzeitig spezielle Suchseiten zuzulassen? Zum Beispiel:

Disallow: /suche/
allow: /suche/ausnahme

Oder gilt das Disallow /suche/ ausnahmslos für alle weiteren Pfade?

Anzeige von: