Herzlich willkommen im SEO Forum der ABAKUS Internet Marketing GmbH

Zum Inhalt

  • Leistungen
  • SEO-Wissen
  • Referenzen
  • SEO Agentur
Suchmaschinenoptimierung

Home


Profil


Suche


private Nachrichten


Mitglieder


Anmelden


Registrieren


Letzte Themen

Newsletter abonnieren
  • Schnellzugriff
    • Unbeantwortete Themen
    • Aktive Themen
    • Suche
  • Anmelden
  • Registrieren
  • ABAKUS Foren-Übersicht
  • Suche

registrieren registriertes Mitglied


Anzeige

Anzeige
Erweiterte Suche
 

Nutch CVS/0.03-dev

 Turnitin.com Robot - Was genau sammelt er ?

Szukacz/1.5

 
UweT
PostRank 10
PostRank 10
Beiträge: 5601
Registriert: 03.01.2003, 00:07

Beitrag von UweT » 21.09.2003, 10:43

Nutch CVS/0.03-dev
Spider der Alpha OpenSource Suchmaschine
https://www.nutch.org/
beachtet Robots.txt
bekannte IP: 213.255.36.41

Um diesen Robot von Ihrer Seite zu bannen geben sie folgende Zeile in Ihre Robots.txt ein

Zukünftiger öffentlicher Index:
User-agent: Nutch
Disallow: /

Demo Index:
User-agent: NutchOrg
Disallow: /

Weitere Infos: https://www.nutch.org/docs/bot.html

gruß
tbone.

Anzeige von:

Die Antwort findest du hier: zum Archiv
  • Foren-Übersicht
  • Alle Cookies löschen
  • Kontakt
  • zum ABAKUS Archiv

Flat Style by Ian Bradley

Powered by phpBB® Forum Software © phpBB Limited

Deutsche Übersetzung durch phpBB.de

Datenschutz | Nutzungsbedingungen | Impressum

SEO Agentur | SEO Blog | SEO Online Tools | SEO Dienstleistungen | SEO Workshops | SEO Beratung | Backlinks kaufen | SEO Audit | SEO Tools gratis | SEO-Konkurrenzanalyse


Sie lesen gerade: Nutch CVS/0.03-dev - ABAKUS