Parametrisierte URLs in der robots.txt domainwide ausschließen

[wdziedzic]

Für meine Domain habe ich folgende Anweisung in der robots.txt:

Code: Alles auswählen

disallow: /?

Ich möchte aber parametrisierte URLs auch für sprachliche Subfolder ausschließen

Soll ich eine disallow Regel pro Subfolder definieren

Code: Alles auswählen

disallow: /en/?

disallow: /es/?

disallow: /it/?

oder reicht eine Wildcard

Code: Alles auswählen

disallow: /*?*  

und die disallow Regel wird für parametrisierte URLs innerhalb der ganzen Domain funktionieren?

[arnego2]

Dazu
https://developers.google.com/search/do ... bots/intro
Besser ist es in den Header einen Meta Tag zu setzen der die Suchmachinen zum nicht indexen animiert.

[staticweb]

> Ich möchte aber parametrisierte URLs auch für sprachliche Subfolder ausschließen

Dies in der robots.txt zu machen, davon ist SEO-technisch abzuraten.