# =================================== # Erstellt am: 25.01.2010, 19:54 # Webseite: http://www.lipsiart.de # =================================== Crawl-delay: 10 Sitemap: http://sitemap.xml # =================================== # Folgende Seiten sollen nicht indexiert werden: # =================================== User-agent: * Disallow: /cgi-bin/ Disallow: /client/ Disallow: /administrator/ Disallow: /includes/ Disallow: /libraries/ Disallow: /xmlrpc/ Disallow: /templates/ Disallow: /media/ Disallow: /dmdocuments/ Disallow: /content/ Disallow: /language/ Disallow: /develop/ Disallow: /plugins/ Disallow: /components/ Disallow: /modules/ Disallow: /cache/ Disallow: /tmp/ Disallow: /images/ Disallow: /downloads/ Disallow: /logs/ Disallow: /renekrause/ Disallow: /moments42/ # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebReaper User-agent: WebCopier User-agent: Offline Explorer User-agent: HTTrack User-agent: Microsoft.URL.Control User-agent: EmailCollector Disallow: /