############################################################################### # # Filename: robots.txt # Desc: This file is used to disallow spiders to search the following # folders/directories # # ############################################################################### User-agent: * Disallow: /cgi-bin/ Disallow: /GeneratedItems/ Disallow: /press/pk/ Disallow: /rd/ Disallow: /styles/ Disallow: /zip/ sitemap: http://www.mireth.com/sitemap.xml # eof