# # robots.txt # # Bitte beachten: Einige Spiders haben in der Vergangenheit zu viele # und zu schnelle Aufrufe produziert. # Deshalb werden Site-Aufrufe gegebenfalls blockiert. # User-agent: BlitzBOT User-agent: CFNetwork User-Agent: MJ12bot User-agent: grub-client User-agent: snapbot User-agent: spbot Disallow: /