# robots.txt file for http://www.feel-healthy.de # programming: www.meiss.info | www.rhein-main-mediendesign.de # Gibt an, welche Unterverzeichnisse nicht durch Crawler durchsucht werden sollen # erlauben zu indizieren User-agent: * Disallow: Sitemap: http://www.feel-healthy.de/sitemap.xml # www.archive.org sperren User-agent: ia_archiver Disallow: / # immer sperren User-agent: * Disallow: /logs/ Disallow: /alt/ Disallow: /css/ Disallow: /images/ Disallow: /scripte/ Disallow: /cgi-bin/ Disallow: /cgi-data/ Disallow: /video/ Disallow: /lightbox/ # sperren User-agent: * Disallow: /galerie_training/ Disallow: /galerie_massage/ # auch sperren User-agent: EmailCollector Disallow: / User-agent: WebReaper Disallow: /