# robots.txt für superligands und supersite
# Delay für alle robots für die Seiten result... (resultHET, resultdrugsim, resultpdb u.a. mit großem SQL aufwand) auf 3 min hochgesetzt

User-agent: *
# Advanced robots.txt features
# Allow one page request every 10 minutes
Request-rate: 1/10
# Limit crawl time to one request per 10 seconds
Crawl-delay: 10

Disallow: /superligands/search3d*