
robots
robots
# Prioritní stránky pro crawlování
# Crawl delay pro šetrnější crawlování
# Specifické roboty
User-agent: * Allow: / # Prioritní stránky pro crawlování Allow: /jihomoravsky-kraj/ Allow: /olomoucky-kraj/ Allow: /zlinsky-kraj/ Allow: /moravskoslezsky-kraj/ Allow: /vysocina/ Allow: /blog/ # Sitemap Sitemap: https://www.deratizace-deraspol.cz/sitemap.xml # Crawl delay pro šetrnější crawlování Crawl-delay: 0 # Specifické roboty User-agent: Googlebot Allow: / Crawl-delay: 0 User-agent: Seznambot Allow: / Crawl-delay: 0 User-agent: Bingbot Allow: / Crawl-delay: 0

# Prioritní stránky pro crawlování
# Crawl delay pro šetrnější crawlování
# Specifické roboty