# =================================== # Generator: http://pixelfolk.net/tools/robots # Erstellt am: 31.01.2017, 18:55 # Webseite: http://http://www.rath-heumar.info/ # =================================== Sitemap: http://www.rath-heumar.info/sitemap_index.xml # =================================== # Folgende Seiten sollen nicht indexiert werden: # =================================== User-agent: * Disallow: /cgi-bin/ Disallow: /wp-admin/ Disallow: /temp/ # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebReaper User-agent: WebCopier User-agent: Offline Explorer User-agent: HTTrack User-agent: Microsoft.URL.Control User-agent: EmailCollector User-agent: penthesilea Disallow: /