# robots.txt User-agent: * Crawl-delay: 60 Disallow: /login/ Disallow: /preisvergleich/