From: Raphael Becker (beckerra_at_rumms.uni-mannheim.de)
Date: 25. Feb 2000
Hallo Liste,
Ich habe auf meinem Rechner seit Monaten ein Dauerbeschuß von
verschiedenen Suchmaschinen. Das bemerkenswerte daran ist, daß diese
Suchmaschinen permanent und auch schon seit MOnaten auf Dateien
zugreifen wollen, die es auf meinem Rechner nicht mehr gibt, konkret:
SuSE Supportdatenbank, lokal (wird unter /doc im htdocs-Baum
gespeichert).
Ich habe diese Dateien inzwischen gelöscht, weil der Traffic einfach
zu hoch war, leider ohne Erfolg. Das Endergebnis ist, daß mein Apache
pro Tag zwischen 450 und 600 "Error 404 file not found"-Fehler
ausspuckt.
Wie kann ich Suchmaschinen aussperren?
Wie funktioniert robots.txt (genaue Syntax)? Was mach ich mit den
Suchmaschinen, die sich nicht an robots.txt halten?
Kennt Apache Möglichkeiten, Verbindungen von bestimmten IP-Bereichen
zu ignorieren, vielleicht sowas wie "Teergrube"?
Gibt es ne Möglichkeit eine Art "Blacklist" mit IP-Adressen und
IP-Ranges anzulegen, wo man die Störenfriede kurzerhand von Port 80
verbannen kann?
Gruß
Raphael Becker
-- Online-Doku: http://home.pages.de/~online-doku Gesucht - Gefunden: Linux-Anleitungen Fehlt was? Dann nix wie her mit dem URL mailto:online-doku_at_gmx.de
Dieses Archiv wurde generiert von hypermail 2.1.2 : 11. Mar 2002 CET