Zitat von
fiasko:
- vielleicht sind ein paar der Spinnen zu plöd ranzukommen -
Seriöse Spider lassen sich per robot.txt abweisen. Andere wohl per Script.
Zitat von
generic:
solltest du auch abschalten bei deinen browser.
Bei Opera gibt es das, aber bei Firefox habe ich so etwas noch nicht gefunden.