aus irgendeinem mir unerfindlichen grund wird mein doppelter content (bzweise die anzahl der url-skelette bei einer siteabfrage immer grösser obwohl ich vor einigen wochen meine robots.txt angepasst habe.
aktuell hab ich grade entdeckt das ein und die selbe datei (bzw.URL im index 2mal existiert.).und zwar nicht nur diese.
Beispiel
kann mir mal jemand auf die sprünge helfen wie dieses zustandekommt.A*berration - Forum für F*otografie (& Lexikon)
FORUM für F*OTOGRAFIE (Fot*otechnik-G*estaltung-Modelecke) Professionell betreut.
www.axellauer.de/f*oto-forum/ftopic35-.html - 20k - Im Cache - Ähnliche Seiten
www.axellauer.de/f*oto-forum/ftopic35.html
Ähnliche Seiten
weiss mir so langsam keinen rat mehr.
ich poste auch mal meine robots.
vielleicht findet ja jemand irgendeinen offensichtlichen fehler.
schon mal vielen dank.
gruss axel
User-agent: Googlebot
Disallow: /*?
Disallow: /grusskarte/
Disallow: /forum/admin/
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/docs/
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/language/
Disallow: /forum/templates/
Disallow: /forum/common
Disallow: /forum/extension
Disallow: /forum/faq
Disallow: /forum/groupcp
Disallow: /forum/login
Disallow: /forum/memberlist
Disallow: /forum/modcp
Disallow: /forum/posting
Disallow: /forum/profile
Disallow: /forum/privmsg
Disallow: /forum/search
Disallow: /forum/fpost
Disallow: /forum/ptopic
Disallow: /forum/ntopic
Disallow: /forum/post-
Disallow: /forum/memberlist.html
Disallow: /forum/profile-editprofile.html
Disallow: /forum/profile-register.html
Disallow: /forum/privmsg-inbox.html
Disallow: /forum/category
Disallow: /forum/viewonline
Disallow: /standfotos/downhillcity.htm
Disallow: /bildbeispiel.htm
Disallow: /gaeste.htm
Disallow: /gaesteset.htm
Disallow: /impressum.htm
Disallow: /leftframe.htm
Disallow: /statistik/
Disallow: /bildverkauf/
User-agent: *
Disallow: /grusskarte/
Disallow: /forum/info.html
Disallow: /forum/counter/
Disallow: /forum/admin/
Disallow: /forum/album_mod/
Disallow: /forum/cache/
Disallow: /forum/db/
Disallow: /forum/docs/
Disallow: /forum/images/
Disallow: /forum/includes/
Disallow: /forum/language/
Disallow: /forum/mods/
Disallow: /forum/templates/
Disallow: /forum/xs_mod/
Disallow: /forum/album
Disallow: /forum/common
Disallow: /forum/extension
Disallow: /forum/faq
Disallow: /forum/groupcp
Disallow: /forum/login
Disallow: /forum/map
Disallow: /forum/memberlist
Disallow: /forum/modcp
Disallow: /forum/posting
Disallow: /forum/privmsg
Disallow: /forum/profile
Disallow: /forum/rating
Disallow: /forum/report
Disallow: /forum/search
Disallow: /forum/fpost
Disallow: /forum/ptopic
Disallow: /forum/ntopic
Disallow: /forum/post-
Disallow: /forum/groups.html
Disallow: /forum/memberlist.html
Disallow: /forum/profile-editprofile.html
Disallow: /forum/profile-register.html
Disallow: /forum/privmsg-inbox.html
Disallow: /forum/category
Disallow: /forum/viewonline
Disallow: /standfotos/downhillcity.htm
Disallow: /bildbeispiel.htm
Disallow: /gaeste.htm
Disallow: /gaesteset.htm
Disallow: /impressum.htm
Disallow: /leftframe.htm
Disallow: /statistik/
Disallow: /bildverkauf/
Disallow: /forum/config.php
Disallow: /forum/groupcp.php
Disallow: /forum/memberlist.php
Disallow: /forum/modcp.php
Disallow: /forum/posting.php
Disallow: /forum/privmsg.php
Disallow: /forum/viewonline.php
Disallow: /forum/faq.php
Disallow: /forum/ptopic*.html$
Disallow: /forum/ntopic*.html$
Disallow: /forum/ftopic*asc*.html$
