Arbeitet man mit Datenbanken, speziell im Entwicklungsstadium einer Anwendung, kann allerlei Müll anfallen, den man tunlichst loswerden möchte. Geht es um einzelne Einträge, kann man das gut mit Befehlen wie:

DELETE * FROM tabellenname WHERE id=xy

wenn man nur wenige oder gar einen einzelnen Eintrag loswerden möchte. Und

DELETE * FROM …

Ich habe schon über die Statistiksoftware pageLogger berichtet und bin auch bisher damit zufrieden. Allerdings stellte ich fest, dass die Bot-Erkennungsliste etwas mager ist.

Im Verzeichnis PAGELOGGER/includes/robots liegt die Datei robots.txt. Sie ist gefüllt mit RegEx - also kleinen Textschnipseln die in einem User Agent auftauchen können - und …